Google的AI视频翻译技术Universal Translator:不但能同步口译成各种语言,连人物嘴型都能配合
· 2023-05-22

通过科技的帮助,现在我们遇到不熟悉的外语时,已经有很多技术可以辅助我们理解。


通过科技的帮助,现在我们遇到不熟悉的外语时,已经有很多技术可以辅助我们理解。


最早,像是一些线上翻译网站,可以帮我们翻译文本;之后,我们在YouTube增至到可以有即时识别语音的功能,把语音先转成文本,然后再翻译成不同的字幕。


然后又有Google Lens,可以拍照之后就把图片中的外国文本转换成你认识的文本,出国的时候遇到看不懂的菜单、海报特别好用。



再来就是ChatGPT的加入,利用AI翻译更多更长的文本,也变成轻松简单。


现在,Google不但打算要攻下同步口译这一块,而且他们打算连说话者的嘴型都要改变。


先前在2023 I/O开发者大会上,Google披露了这项他们正在开发的技术,名为Universal Translator。


顾名思义,该工具旨在将视频不但从一种语言翻译成另一种语言,同时保留整体基调和氛围。这意味着该技术不仅可以将视频从一种语言翻译成另一种语言,还可以模仿说话者的声音、语气和面部表情,人物说话的时候,视频会根据目标语言的发音同步改变口型。


如下图所示,Universal Translator首先检测单词并进行翻译。然后,它会检查说话者的语气以及他们强调的内容。结合这两个方面后,它会生成目标语言的语音。最后,它会根据AI生成的语音的发音同步视频中说话者的口型。



不过,考虑到此工具可能被滥用来创建假新闻,目前Google并不开放给一般人使用,表示将限制对Universal Translator的使用权限。因此,只有Google授权合作伙伴才能将其用于建设性项目,而一般用户暂时无缘。


热门文章
超级PAC筹资4800万美元:体育博彩势力加码
游戏风向
BETFAIR 网络攻击80万用户资料泄露
游戏风向
2027 Global Game Connect(GGC)斯里兰卡招商全面开启!业务人脉尽在掌握!
灰度头条
横跨全球6个城市,灰度8场派对邀你共看世界杯,重塑高质量社交新场景
灰度头条
JILI 宣布与全球板球传奇 AB de Villiers(ABD)达成重磅战略合作
体育游戏
张侨伟参议员排除全面禁止,敦促菲律宾规范网络赌博
东南亚资讯
灰度在iGB L!VE 2026展位T70和你相约7月,一起点燃伦敦的热情!
灰度头条
越南在线博彩业政策收紧 催生市场新机遇
东南亚资讯
巴西颁布新法赋权央行封锁非法博彩账户及 Pix 交易
支付动态
灰度世界杯嘉年华狂欢派对吉隆坡站即将开启,业务拓展人脉社交从马来西亚开始
灰度头条
斯里兰卡博弈产业大转型,官方:剑指南亚拉斯维加斯
游戏风向
密西西比州众议院委员会推进提议增加赌场税的法案
游戏风向
新泽西州7月博彩收入创6.06亿美元新高,颁布禁令
游戏风向
越南博彩管控逐步放宽,惟本土需求仍显乏力
东南亚资讯
GGC Awards 2026 璀璨科伦坡:致敬 iGaming 行业的领航者与创新力量
灰度头条
首页
游戏
合作
发现
我的