5 月 11 日消息，在 2023 I / O 開發者大會上，谷歌宣布正在開發一項名為 Universal Translator 的實驗技術。
顧名思義，該工具旨在將視頻從一種語言翻譯成另一種語言，同時保留整體基調和氛圍。這意味著該技術不僅可以將音頻從一種語言翻譯成另一種語言，還可以模仿說話者的聲音、語氣和面部表情，人物說話視頻會根據目標語言的發音同步改變口型。
如上圖所示，Universal Translator 首先檢測單詞并進行翻譯。然后，它會檢查說話者的語氣以及他們強調的內容。結合這兩個方面后，它會生成目標語言的語音。最后，它會根據 AI 生成的語音的發音同步視頻中說話者的口型。
考慮到此工具可能被濫用來創建虛假視頻，谷歌表示將限制對 Universal Translator 的訪問。因此，只有谷歌授權合作伙伴才能將其用于建設性項目，而普通用戶無法使用。
