ElevenLabs 推出AI配音翻譯工具,打破語言障礙

ElevenLabs,一家全球領先的語音人工智慧技術公司,於10月10日宣布推出其創新的「AI Dubbing」功能。這項語音翻譯工具能在幾分鐘內將口語內容轉換成其他語言,同時保留原始講者的聲音。該工具的推出標誌著公司致力於消除語言障礙和促進內容普遍可訪問性的最新里程碑。

ElevenLabs 推出AI配音翻譯工具,打破語言障礙

ElevenLabs,一家全球領先的語音人工智慧技術公司,於10月10日宣布推出其創新的「AI Dubbing」功能。這項語音翻譯工具能在幾分鐘內將口語內容轉換成其他語言,同時保留原始講者的聲音。該工具的推出標誌著公司致力於消除語言障礙和促進內容普遍可訪問性的最新里程碑。

AI Dubbing 功能允許創作者、教育工作者和媒體公司通過幾次點擊就能觸及全球受眾。這一工具不僅保留了講者的身份和原始語音模式,還能讓超過20種不同語言的受眾聽到相同演員的聲音,並以原始錄音的特徵和細微之處傳遞台詞。

ElevenLabs 的 AI Dubbing 結合了多語言語音合成、語音克隆、文本和音頻處理的研究,增強了翻譯內容的真實性,使其更易於廣泛受眾接受,同時保留原始傳遞的精髓。目前 AI Dubbing 功能支持 Eleven Multilingual v2 模型當前的20多種語言的語音翻譯,包括中文、印地語、葡萄牙語、西班牙語、日語、烏克蘭語、波蘭語和阿拉伯語等。

該公司還開發了自己的方法來檢測不同講者的聲音和去除背景噪音的方法,區分音樂和噪音與對話。這意味著該工具可以有效處理包含多個講者的音頻或視頻,確保每個聲音在不同語言中都保持清晰可辨。

通過自動化配音過程並確保高質量輸出,ElevenLabs 簡化了創作者、教育工作者和媒體公司的多語言內容創建。目前,只有6%的世界人口是英語母語者,75%的人不會說任何英語,這次發布意味著每個視頻現在都可以快速、低成本地提供給全球受眾。

這一發布緊隨 ElevenLabs 最近推出的「Projects」之後 - 一個用於生成和編輯長篇音頻的先進工作流程,支持各種編輯功能,如講者分配、暫停插入和段落重生。通過這一新增功能,ElevenLabs 繼續致力於打破語言障礙,使任何語言和聲音的內容都能普遍訪問。

免費試用:https://elevenlabs.io/dubbing

Read more

Meta 收購語音新創 Play AI:加速佈局 AI 聲音技術與超級智慧計畫

Meta 收購語音新創 Play AI:加速佈局 AI 聲音技術與超級智慧計畫

Meta 正式收購語音 AI 新創公司 Play AI,進一步強化其在人工智慧領域的投資與佈局。根據 Bloomberg 報導,Meta 已向媒體證實這項收購,並透露 Play AI 的全體團隊將於下週加入 Meta。 Play AI 是一家專注於開發自然人聲合成技術的創業公司,透過 AI 模型生成逼真的語音,並打造一個簡便的語音創作平台。Meta 在內部備忘錄中指出,Play AI 的技術與平台非常契合 Meta 的未來發展藍圖,尤其是在 AI 虛擬角色(AI Characters)、Meta AI 助理、可穿戴裝置(Wearables)、以及音頻內容創作等應用上。 0:00 /0:34 1× 收購金額未公開,顯示 Meta