[Vtub] 目前是不是还不能精确辨识脸部表情?

楼主: lumaix (lumaix)   2021-10-15 10:09:00
回顾哈洽马初配信
心心的五官两只眼睛跟眉毛可以别开动
但也发现常常眼睛跟眉毛会不同步
有时眼睛或眉毛会乱动 表情也会很怪
https://i.imgur.com/NHZr62e.jpg
但后来好像有修正
后来哈洽马的眼睛跟眉毛连动表情也比较自然
https://i.imgur.com/FsnZyMP.jpg
不过后来好像就再也没出现过旧的脸部辨识系统
就跟Miko 的3D手一样
所有说目前VT所使用的系统
是不是还不能精确的辨识脸部表情?
作者: wizardfizban (疯法师)   2021-10-15 10:10:00
看设备
作者: tom11725 (奥特斯)   2021-10-15 10:11:00
太精准其实也是坏事就是,可能会产生不必要的误会
作者: vivianqq30 (vivianqq30)   2021-10-15 10:13:00
看设备的捕捉如何判断啊 眼睛大小 光影 眼镜都会影响吧
作者: ghostxx (aka0978)   2021-10-15 10:13:00
如果你要单指Holo是,纯论技术不是
作者: utcn92 (望风来)   2021-10-15 10:15:00
单纯hololive技术不到家
作者: we15963 (whiteway)   2021-10-15 10:15:00
之前不是有出过能非常精准判别表情的设备 只是乡民说太过
作者: CactusFlower (仙人掌花)   2021-10-15 10:15:00
作者: we15963 (whiteway)   2021-10-15 10:16:00
恐怖谷 然后后来就没消息了吗?
作者: allen20937 (旅行者)   2021-10-15 10:18:00
看游戏一堆精准的动态捕捉就知道这问题是钱砸的够不够多,需不需要用到的问题
作者: wizardfizban (疯法师)   2021-10-15 10:19:00
太好的设备贵 头戴式设备则是累 戴着长期使用不好
作者: leeberty (阿圾)   2021-10-15 10:20:00
https://youtu.be/zg4LPhl5ihw 这个Miko表情就很有戏
作者: aria0520 (紫)   2021-10-15 10:22:00
先不提其他企业势 有些个人势的捕捉技术超猛的
作者: stinger5009 (歪歪歪)   2021-10-15 10:22:00
可以是可以 但是真的也没必要太精准
作者: gungriffon (阿毛毛Q)   2021-10-15 10:22:00
鲨鲨初期也会抖眼皮 然后羽衣妈妈的是有强制双眼同步眨眼功能 有一次念棉花糖观众问能不能眨眼wink她说目前在用的LIVE2D有同步双眼眨眼所以没办法闭单眼应该不只是只有羽衣有这功能 所以这是可以选挂的
作者: CactusFlower (仙人掌花)   2021-10-15 10:25:00
眼皮会抖应该是开阖的曲线没拉好 L2D可以设定好几个开阖比例的节点 要怎么跟皮对应完全是可以自己拉的
作者: arrenwu (键盘的战鬼)   2021-10-15 10:26:00
你在讨论“捕捉技术”前 要先讲清楚你的设备
作者: s9018124 (鬼切安纲)   2021-10-15 10:26:00
未来明的捕捉系统连舌头都捕捉的到 虽然超级用不到的
作者: gungriffon (阿毛毛Q)   2021-10-15 10:26:00
有些规模比较小的V还是会眨眼不同步或是抖眼皮 就是调整的细节有差别
作者: arrenwu (键盘的战鬼)   2021-10-15 10:27:00
Hololive就我所知道是一支手机放得远远的
作者: a22122212 (阿公)   2021-10-15 10:28:00
过度精准反而没必要
作者: guogu   2021-10-15 10:29:00
如果是3d对3d可能会简单一点 目前2d基本都是live2dlive2d的运作模式不管捕捉的再准要再现都是很困难的
作者: stinger5009 (歪歪歪)   2021-10-15 10:29:00
不自然眨眼有些是她们戴眼镜抓不到眼睛造成的
作者: shigurew (shigure)   2021-10-15 10:30:00
目前的技术只要花钱就可以绝对精准,就看你要多复杂而已
作者: wizardfizban (疯法师)   2021-10-15 10:31:00
Hololive是用自家软件捕捉镜头画面来运算的所以还有手动控制的部份
作者: winklly (阿鸟)   2021-10-15 10:31:00
还有就是设备对中之人的负担吧
作者: handlin (听说双喆吹别人口琴)   2021-10-15 10:31:00
Holo是手机捕捉吧 我记得
作者: aria0520 (紫)   2021-10-15 10:32:00
那就是iphone内建的face detection 虹ho都是
作者: iwinlottery (我民乐透头彩)   2021-10-15 10:32:00
Fps都很低
作者: u571530 (roger)   2021-10-15 10:32:00
为什么手都不出来玩了,有手超好笑的
作者: mimimi950 (mimi)   2021-10-15 10:33:00
现在用ToF或结构光技术可以把面部动作侦测到超精细的肌肉随便动一下都看的出来
作者: aria0520 (紫)   2021-10-15 10:33:00
用iphone的原因是iphone有3D camandroid有3d cam的手机单手都数得出来而且大多是对岸牌(华为)
作者: guogu   2021-10-15 10:35:00
目前其实不是抓不到就是了 而是做到100%跟真人同步会很不二次元 在脸上定位后怎么准换成二次元风格才是重点她们那些表情要让真人做会做到脸部抽筋的
作者: corlos (ナニソレ、イミワカンナ)   2021-10-15 10:36:00
3d才行 2d大部分要切表情 只抓眉毛跟嘴巴
作者: kerycheng (kk)   2021-10-15 10:38:00
我记得齁的2D有做表情键能切换表情
作者: guogu   2021-10-15 10:38:00
2d目前是因为主流是live2d 其实变化是在一个轴上移动
作者: aria0520 (紫)   2021-10-15 10:39:00
face detecion其实各种model的准确度都差不多了主要的差别是在live2d的调教上例如反馈调太高就会像舞龙舞狮
作者: guogu   2021-10-15 10:40:00
目前主流让你觉得表情丰富的2d基本上都有做表情切换
作者: moritsune (君をのせて)   2021-10-15 10:40:00
太精准就没有why is she angry这种meme了
作者: aria0520 (紫)   2021-10-15 10:41:00
iphone没有内建人脸情绪辨识的model api所以变成这就要v这边去做 有人觉得他们会为了这个去搞个ai team专门train 情绪model吗 应该是不会
作者: Amychen (amychen)   2021-10-15 10:41:00
我也很怀念miko的手手= =
作者: aria0520 (紫)   2021-10-15 10:42:00
更别提情绪类的model目前来说准确度实在低
作者: shigurew (shigure)   2021-10-15 10:42:00
你要想情绪model有了又如何,直播中有什么特殊的情绪?
作者: rabbit61677 (rabbits)   2021-10-15 10:42:00
设备有技术也有,但还要考虑长时间直播舒适度吧
作者: aria0520 (紫)   2021-10-15 10:43:00
所以目前情况 表情按钮还是比较好上手的解决方案
作者: tmwolf (鲁神)   2021-10-15 10:43:00
眼镜差蛮多的,因为光点会影响mapping
作者: Cishang (辞..)   2021-10-15 10:43:00
你把脸部贴满侦测装备应该就可以惹
作者: CactusFlower (仙人掌花)   2021-10-15 10:43:00
靠北 舞龙舞狮害我呛到wwww
作者: shigurew (shigure)   2021-10-15 10:44:00
有哪个V会一直又哭又生气又笑的,90%都只有普通&笑而已
作者: aria0520 (紫)   2021-10-15 10:44:00
这就有被V拿去玩梗 "我们再怎么难过 也还是带着笑容"
作者: guogu   2021-10-15 10:44:00
不要说ai 人都不一定能精准判断别人情绪了
作者: EAFV (流浪猫)   2021-10-15 10:45:00
单纯是holo技术不足 技术纯熟的公司连掉根睫毛都可以捕捉
作者: aria0520 (紫)   2021-10-15 10:45:00
这就看你用哪种face detection,基于ai的solution眼镜没什么影响 基于结构光的mapping可能会有
作者: D2Diyus (想买的书太多了)   2021-10-15 10:45:00
建模师的手法好像也有影响的样子
作者: aria0520 (紫)   2021-10-15 10:46:00
个人觉得live2d方的调教影响远大于detection端
作者: guogu   2021-10-15 10:47:00
我是建议可以去玩玩看免费的live2d啦 就会懂问题在哪了
作者: aria0520 (紫)   2021-10-15 10:48:00
要让情绪类model完全反馈需要作出很浮夸的动作就是现阶段是不如一个表情按钮
作者: guogu   2021-10-15 10:49:00
live2d产生的限制其实比捕捉端大非常多
作者: as3366700 (Evan)   2021-10-15 11:12:00
一个哀凤而已是要捕捉多精确,更专业的捕捉设备戴着打游戏是在自虐吧
作者: minagi (美凪)   2021-10-15 11:12:00
人的表情没有皮这么大
作者: eas06u4 (支那五毛勿干预我国内政)   2021-10-15 11:34:00
纯嘘二楼言论科技进步很多了 带着才能实况的是鸽子封包吗
作者: rabbit61677 (rabbits)   2021-10-15 11:46:00
https://youtu.be/Qb-yKoZfI-A我是觉得穿这样长时间直播很累啦
作者: aria0520 (紫)   2021-10-15 11:48:00
靠这个好强喔
作者: rabbit61677 (rabbits)   2021-10-15 11:49:00
这种比较偏向动作表演性质的,打游戏我觉得没必要
作者: suiminkusuri (姜烧猪肉我的最爱)   2021-10-15 12:17:00
比起表情比较好奇除了早期35是刻意的之外,有几个v常常有种头抬很高用下巴看人的感觉(?)
作者: guogu   2021-10-15 12:19:00
那种喔 就镜头摆的位置造成的吧 可以校正
作者: aria0520 (紫)   2021-10-15 12:19:00
那就是iphone角度没摆准的问题有些人可能用手机支架放著 从下往上照
作者: roger840410 (roger)   2021-10-15 12:39:00
反正做成案按钮操控表情也没人知道 技术成本又低
作者: toulio81 (恩...)   2021-10-15 13:02:00
感觉操控的比较好,像是有些人发些比较不礼貌的SC,要是直接反应很难把嫌悪脸藏住
作者: kanzaki0s (神崎零真)   2021-10-15 13:21:00
holo的软件不太行 到现在还是有人像舞龙舞狮 用facerig的个人势动起来都比较顺
作者: storyo11413 (小便)   2021-10-15 14:31:00
人脸追踪辨识技术都着重在瞳孔和鼻子而已
作者: ncuephysics (量子佛法陈俊智师兄)   2021-10-15 15:17:00
师兄反而喜欢舞龙舞狮的样子
作者: d0922030 (CAV药丸)   2021-10-15 16:33:00
科技一定行啦 只是成本跟最后的效果好不好又是一回事vt可以按钮选表情我觉得是一个有趣的事 比较希望手手可以拿出来玩

Links booklink

Contact Us: admin [ a t ] ucptt.com