※ 引述《XI (MAN)》之铭言
: https://www.chinatimes.com/newspapers/20221028000240-260204?chdtv
: Meta英翻台 全靠闽南语剧
: 04:10 2022/10/28 工商时报 何英炜
: https://images.chinatimes.com/newsphoto/2022-10-28/1024/A13A00_P_02_01.jpg
: Meta AI软件工程师陈鹏仁,是该公司UST部门的主要研发人员,负责语音对语音即时翻译
: ,第一个成功做出来的语系为闽南语。来自台湾的他,也透过闽南语的绘本,教小孩熟悉
: 闽南语。图/业者提供
阿肥外商码农大金粉啦~
先说一下,过往这块语音转语音技术都是需要经过phoneme或是tri-phone转换后,然后有些
会转成s2t的文字任务再转换逆向回去。
然后老师去年有一篇Paper是Audio Albert跟直接语音转换语音表达式有关的,这边看到Met
a的新闻单纯想到也许Meta闽南语有用到这块的预训练模型(或是没有?)?
另外就是近几年其实这块ML/DL领域都扩充到multi-domain或是multi-models,特别是图像N
LP混合模型(CLIP),其实像这种dataset缺乏的领域做这样的混合预训练,再做到multi lan
gua或许表现可以更可靠。
以上