ElevenLabs 推出AI配音翻譯工具,打破語言障礙

ElevenLabs 推出AI配音翻譯工具,打破語言障礙

ElevenLabs,一家全球領先的語音人工智慧技術公司,於10月10日宣布推出其創新的「AI Dubbing」功能。這項語音翻譯工具能在幾分鐘內將口語內容轉換成其他語言,同時保留原始講者的聲音。該工具的推出標誌著公司致力於消除語言障礙和促進內容普遍可訪問性的最新里程碑。

AI Dubbing 功能允許創作者、教育工作者和媒體公司通過幾次點擊就能觸及全球受眾。這一工具不僅保留了講者的身份和原始語音模式,還能讓超過20種不同語言的受眾聽到相同演員的聲音,並以原始錄音的特徵和細微之處傳遞台詞。

ElevenLabs 的 AI Dubbing 結合了多語言語音合成、語音克隆、文本和音頻處理的研究,增強了翻譯內容的真實性,使其更易於廣泛受眾接受,同時保留原始傳遞的精髓。目前 AI Dubbing 功能支持 Eleven Multilingual v2 模型當前的20多種語言的語音翻譯,包括中文、印地語、葡萄牙語、西班牙語、日語、烏克蘭語、波蘭語和阿拉伯語等。

該公司還開發了自己的方法來檢測不同講者的聲音和去除背景噪音的方法,區分音樂和噪音與對話。這意味著該工具可以有效處理包含多個講者的音頻或視頻,確保每個聲音在不同語言中都保持清晰可辨。

通過自動化配音過程並確保高質量輸出,ElevenLabs 簡化了創作者、教育工作者和媒體公司的多語言內容創建。目前,只有6%的世界人口是英語母語者,75%的人不會說任何英語,這次發布意味著每個視頻現在都可以快速、低成本地提供給全球受眾。

這一發布緊隨 ElevenLabs 最近推出的「Projects」之後 – 一個用於生成和編輯長篇音頻的先進工作流程,支持各種編輯功能,如講者分配、暫停插入和段落重生。通過這一新增功能,ElevenLabs 繼續致力於打破語言障礙,使任何語言和聲音的內容都能普遍訪問。

免費試用:https://elevenlabs.io/dubbing

Leave a Reply

Your email address will not be published. Required fields are marked *