Google的AI视频翻译技术Universal Translator:不但能同步口译成各种语言,连人物嘴型都能配合
· 2023-05-22

通过科技的帮助,现在我们遇到不熟悉的外语时,已经有很多技术可以辅助我们理解。


通过科技的帮助,现在我们遇到不熟悉的外语时,已经有很多技术可以辅助我们理解。


最早,像是一些线上翻译网站,可以帮我们翻译文本;之后,我们在YouTube增至到可以有即时识别语音的功能,把语音先转成文本,然后再翻译成不同的字幕。


然后又有Google Lens,可以拍照之后就把图片中的外国文本转换成你认识的文本,出国的时候遇到看不懂的菜单、海报特别好用。



再来就是ChatGPT的加入,利用AI翻译更多更长的文本,也变成轻松简单。


现在,Google不但打算要攻下同步口译这一块,而且他们打算连说话者的嘴型都要改变。


先前在2023 I/O开发者大会上,Google披露了这项他们正在开发的技术,名为Universal Translator。


顾名思义,该工具旨在将视频不但从一种语言翻译成另一种语言,同时保留整体基调和氛围。这意味着该技术不仅可以将视频从一种语言翻译成另一种语言,还可以模仿说话者的声音、语气和面部表情,人物说话的时候,视频会根据目标语言的发音同步改变口型。


如下图所示,Universal Translator首先检测单词并进行翻译。然后,它会检查说话者的语气以及他们强调的内容。结合这两个方面后,它会生成目标语言的语音。最后,它会根据AI生成的语音的发音同步视频中说话者的口型。



不过,考虑到此工具可能被滥用来创建假新闻,目前Google并不开放给一般人使用,表示将限制对Universal Translator的使用权限。因此,只有Google授权合作伙伴才能将其用于建设性项目,而一般用户暂时无缘。


熱門文章
2027 Global Game Connect(GGC)斯里蘭卡招商全面啟動!業務人脈盡在掌握!
灰度頭條
巴西擬將博弈稅率提高至24% 稅收將用於社保與醫療領域
合規與政策
橫跨全球6個城市,灰度8場派對邀你共看世界盃,重塑高質量社交新場景
灰度頭條
西班牙監管機構警告在線賭博平臺存在身份盜竊行為
合規與政策
新澤西州7月博彩收入創6.06億美元新高,頒布禁令
合規與政策
超級PAC籌資4800萬美元:體育博彩勢力加碼
合規與政策
印第安納州在線賭場法案在眾議院委員會停滯不前
合規與政策
菲律賓網絡賭博和加密貨幣仍構成持續的洗錢風險
東南亞資訊
斯里蘭卡博弈產業大轉型,官方:劍指南亞拉斯維加斯
合規與政策
JILI 宣佈與全球板球傳奇 AB de Villiers(ABD)達成重磅戰略合作
體育遊戲
亞洲遊戲市場觀察:15大市場熱門遊戲與用戶趨勢
網路遊戲
越南在線博彩業政策收緊 催生市場新機遇
東南亞資訊
菲律賓博彩技術賽道迎來新變局,B2B 供應模式加速滲透
東南亞資訊
哈薩克計劃對線上賭場促銷活動進行處罰
合規與政策
英國確認各垂直行業的賭博稅稅率
合規與政策
首頁
遊戲
合作
發現
我的