ElevenLabs 推出 AI 翻譯配音功能,可保留原說話者的聲音和情感
10 月 11 日消息,周二,AI 文本轉語音公司 ElevenLabs 推出了 AI 配音(AI Dubbing)功能,這是一項可以將口語內容轉換為另一種語言,同時保留原說話者的聲音、語言模式、情感和語調的功能。
據官方介紹,AI 配音功能旨在讓全球觀眾用自己的母語享受他們喜歡的內容,只需幾分鐘就可以完成轉換。
AI 配音功能結合了 ElevenLabs 的多語言語音合成、聲音克隆、文本和音頻處理技術,以在創建翻譯時保留原始內容的性質。
在發布會上,ElevenLabs 的首席執行官兼聯合創始人 Mati Staniszewski 分享了他在童年時期經歷的后期配音內容的負面體驗,以及新技術如何解決這個問題。Staniszewski 說,“我在波蘭長大,我們看的英語電影都是由一個旁白配音的。這意味著每個演員都有同樣的聲音,這讓觀影體驗大打折扣。人工智能配音的發布是我們在消除這些內容語言障礙方面邁出的最大一步,將幫助觀眾享受他們想要的任何內容,無論他們說什么語言。”
IT之家注意到,AI 配音功能目前支持 Eleven Multilingual v2 模型支持的 20 多種語言,包括英語、日語、中文、德語、印地語、法語、韓語、葡萄牙語、意大利語、西班牙語、印度尼西亞語、荷蘭語、土耳其語、菲律賓語、波蘭語、瑞典語、保加利亞語、羅馬尼亞語、阿拉伯語、捷克語、希臘語、芬蘭語、克羅地亞語、馬來語、斯洛伐克語、丹麥語、泰米爾語和烏克蘭語。
AI 配音功能從今天開始對所有用戶開放,具體價格取決于想要配音的角色數量。