先直接放动画连结跟结论...
https://www.reddit.com/r/StableDiffusion/comments/12i9qr7
靠腰....虽然打从AI绘画出现的时候就知道很快就会有这样的技术出现,
但这一天来的比想像的快太多...
看到这影片第一个想到的是Vtuber可能将会有革命性的改变...
以后可能Vtuber不会再是死板的表情与动作,
而是能够即时的用AI技术将镜头前的大叔变成活生生的美少女。
(连声音都可以即时变成很油的,已经有这样的AI技术出现)
这未来有可怕...
======================================
AI将真人热舞转换成动画片 流畅画面惊艳千万网友!
〔即时新闻/综合报导〕现今人工智能(AI)技术被运用的范围越来越广泛,并不时会出
现令人惊艳的使用方式。近日国外一名网友利用AI技术,制作一段将真人热舞画面转变成
二次元动画的影片,该片曝光不到2日,便立即吸引千万人次浏览,并在Reddit、Twitter
、脸书等社群媒体被无数网友疯传。
一名网友在美国知名网络“Reddit”论坛 发文并PO出一段影片,只见片中一名外型亮丽
的长腿二次元美少女,随着热情洋溢的音乐节奏开始跳舞,而她跳出的舞蹈动作、脸上神
韵等,与画面左上方的真人女子几乎一模一样,虽然仍能看到一些不自然的小瑕疵,但整
体流畅度和稳定度,超乎以往同样用AI制作出来的类似影片。
而据原PO表示,他是用AI绘图软件“Stable Diffusion”里面的外挂插件“ControlNet”
,在2月推出的新功能“Multi-ControlNet”,来制作这支长度1分15秒的影片。至于影片
的背景音乐与真人热舞的部分,则是参考韩国女团“宇宙少女”(WJSN)在2019 年推出
的歌曲〈Boogie Up〉。
该影片曝光后,立即在网上掀起热议,不少网友纷纷给予高度赞赏,同时也议论日新月异
的AI技术,是否会对现实动画业、演艺圈等业界产生大幅影响,“感觉再过不久,AI可以
取代很多网红”、“这可以让任何作品被立即改编成动画”、“以后会让动画师不用再血
汗工作,还是会直接失业呢?”、“当这项技术完全实施时,我们再也不会在社交媒体上
看到一个没有吸引力的人”。
全文
https://news.ltn.com.tw/news/novelty/breakingnews/4269286
作者:
Amo1992 (阿莫)
2023-04-15 11:20:00腿了
作者:
ZMTL (夜风/潇湘 VR板已经开板!)
2023-04-15 11:20:00这个一直洗才会被人家说AI都在吹XD
这第一个影响的不是Vtuber 而是动画制作....
而且我记得这又不是即时运算做出来的但它目前不是即时的没错呀.....而且你提Vtuber 有没有想过MMD可以做的很漂亮那为啥还要搞真人动捕
作者:
Iseria (Ise)
2023-04-15 11:23:00所以这段动画花了多久时间做
作者:
astinky (此方のことが大好きだ!)
2023-04-15 11:23:00把后制跟即时混在一起了吧
后制本来就能做到很强 这个只是把“人工修改”改成“AI修改”而已
作者:
emptie ([ ])
2023-04-15 11:24:00因为只是比较便宜吧 用mmd拉动作的人力成本目前比请真人来搞还贵
作者:
astinky (此方のことが大好きだ!)
2023-04-15 11:26:00即时是资本家才玩得起,老百姓再等个五十年看看
作者:
xbit (神秘的路人甲)
2023-04-15 11:26:00ai发展很快.现在就看gpu给不给力了...
作者:
xbit (神秘的路人甲)
2023-04-15 11:28:00搞不好过几年进化ai+超强显卡cpu真的能即时运算出动作
作者:
guolong (+9吼溜肯)
2023-04-15 11:30:00这后制啦,要即时你大概得要好几张老黄90卡
作者: rbull (假高尚一大堆) 2023-04-15 11:31:00
这要变商用里面还要修图
这东西变即时运算的也用不到现有动画中阿不过感觉可以去发展AI风格动画 其实应该会蛮有趣的
作者:
ashkaze (畏怕阳光)
2023-04-15 11:34:00上面那IVE转AI的影片看了眼睛很不舒服
作者:
Mimmature (Musicians Immature)
2023-04-15 11:35:00没办法即时啦 大概十年内都没办法但是其他相关的产业会进步很快连adobe都推firefly了 以后你只要学概念不用学太多软件实作就能创作名副其实的大创意时代
作者:
fman (fman)
2023-04-15 11:38:00不过脸和身体的连动还是看得出来违合感
好了啦 吹仔话术跟算命的一样 反正怎么讲就是等到有
作者:
arrenwu (键盘的战鬼)
2023-04-15 11:44:00这个看起来跟前面几个没差多少 怎么这么受欢迎啊XD不穿衣服看起来真的满关键的真希望出个可以帮助日本TV动画的相关进步XD
作者: jeremylouee 2023-04-15 11:48:00
.. 不就类似VT的动态捕捉
作者:
arrenwu (键盘的战鬼)
2023-04-15 11:49:00但是那方向上目前没有看到相关的进步啊
作者:
Mimmature (Musicians Immature)
2023-04-15 11:49:00要能即时处理 最关键的是速度跟一致性但一致性就是目前所谓的ai天生无法达成的问题有兴趣可以稍微看一下目前机器学习最普遍使用的算法最浅白的说明就知道了
作者:
arrenwu (键盘的战鬼)
2023-04-15 11:50:00不然我真心觉得那块是人力大量同时成本又要低的地方
作者: dg7158 2023-04-15 11:52:00
跳舞那个现在还做不到即时转换吧
作者:
arrenwu (键盘的战鬼)
2023-04-15 11:56:00这等级..很高吗?
作者:
Irenicus (Jon Irenicus)
2023-04-15 11:56:00有说这影片是算了多久才算出来的吗?
作者:
Irenicus (Jon Irenicus)
2023-04-15 11:57:00要做到能即时转换不知道需要多可怕的硬件
作者:
arrenwu (键盘的战鬼)
2023-04-15 11:57:00光脸和衣服一直跳完成度就很低了
作者:
arrenwu (键盘的战鬼)
2023-04-15 12:01:00另外就是如果需要动补 那对TV动画不知道又能有多少帮助
作者: SALEENS7LM (我爱我婆,更爱你的) 2023-04-15 12:04:00
Ai邪教徒真的很爱到处妄想别人失业捏
上面那个MV的脸都分不出到底谁是谁…要多人差别处理目前AI还有很大的难度吧
作者:
Irenicus (Jon Irenicus)
2023-04-15 12:05:00不管啦反正你们这些人都等著失业吃自己吧
作者:
Freeven (夏舞枫)
2023-04-15 12:18:00作者:
cccict (马路柏油)
2023-04-15 12:19:00这是把每一帧丢ai画图在拼回影片
作者: triplee (none) 2023-04-15 12:21:00
我只觉得业界实际会怎么运用AI结果不会是现在外界各种猜测或坚定相信的模式
大概看懂了 他每一帧每一帧都用AIimg2img在刻所以才会衣服不断变色闪烁跟后面背景一直在变不一样看来要克服这点最快就是裸体白背景吧 嘻
作者:
opencat (opencat)
2023-04-15 12:31:00用4个controlNet控制场景,model用animeLike25D,来玩看看
作者:
chigo520 (CHIGO)
2023-04-15 12:52:00以后该不会不用动态捕捉直接拍然后改就好了
现在早就有先真人拍再后制换掉的了这个技术就只是后制简化
实时可能真的有可能离我们不远 并不是算力能有突破性上升 而是AI能透过训练不断优化
作者:
Aeryzephyr (IN JP SYS.no chinese)
2023-04-15 13:57:00依目前来说就像mmd也能做动画,但超级麻烦一致度又低
作者: philip81501 (笑口常开0口0) 2023-04-15 14:09:00
AI粉就是爱耸动标题
作者:
ms06 (è–°è¡£ç´«éˆ´é†¡é†¬ç¶ è)
2023-04-15 14:14:00脖子的感觉很微妙的违和?
作者:
zxc88585 (hkekq)
2023-04-15 14:21:00最先失业的应该是你这种发废文的,lora跟controlnet的应用都两个多月前的事了腿到现在。现在的AI,现在的AI动画还是需要引导骨架,且做不到变形画面,先做一个中村丰的战斗片段,给你i2i都不一定能生的出来
作者: Spunnyge07 (9guansan9) 2023-04-15 14:30:00
你也没说能取代什么?光战斗画面就死一片了
作者: Arashi0731 (狂舞) 2023-04-15 14:36:00
我倒觉得5年内应该就可以了
作者: SALEENS7LM (我爱我婆,更爱你的) 2023-04-15 15:01:00
“取代手绘、取代音乐、取代写作、取代影视、取代ACGN/3DCG到艺文娱乐创作相关所有各行各业”取代个屁
作者:
linzero (【林】)
2023-04-15 15:07:00动态捕捉以前听说有人在弄没装备的,是将影片用视觉辨识方式捉出动作来建模3D动作,这有着将2D资料转成3D资料
ThreeDPoseTracker 可以用影片撷取动作转给你的模组用当然还是有一些限制 但那种摆拍的跳舞影片抓得蛮准的转身也没有问题