Spotify 推出 AI 語音翻譯,保留Podcast主持人聲音應用在不同的語言!
Spotify推出了一項新的AI驅動的語音翻譯功能,該功能使用Podcast主持人的聲音在其他語言中重現。該公司已與少數Podcast主持人合作,使用其新工具將他們的英語節目翻譯成西班牙語,並計劃在未來幾週內推出法語和德語翻譯。

Spotify推出了一項新的AI驅動的語音翻譯功能,該功能使用Podcast主持人的聲音在其他語言中重現。該公司已與少數Podcast主持人合作,使用其新工具將他們的英語節目翻譯成西班牙語,並計劃在未來幾週內推出法語和德語翻譯。首批節目將來自一些大名鼎鼎的人物,包括Dax Shepard、Monica Padman、Lex Fridman、Bill Simmons和Steven Bartlett。Spotify計劃將該組擴大到包括The Ringer的The Rewatchables和即將上映的Trevor Noah的節目。
這項翻譯功能的核心是OpenAI的語音轉錄工具Whisper,該工具既可以轉錄英語演講,也可以將其他語言翻譯成英語。但Spotify的工具不僅僅是語音到文本的翻譯 - 該功能將主持人翻譯成不同的語言,並使用自己的聲音的合成版本重現它。
“通過匹配創作者自己的聲音,語音翻譯為全球的聽眾提供了以前所未有的更真實的方式來發現和受到新播客者的啟發,”Spotify的個性化副總裁Ziad Sultan在一份聲明中說。
https://open.spotify.com/episode/6S3TPytV81NWmkDArApKYl
OpenAI很可能也是這一新功能的語音複製部分背後的力量,該AI公司今天早上發布了幾項公告,其中包括推出一款工具,該工具可以從僅有的文本和幾秒鐘的樣本語音中創建“像人類一樣的音頻”。OpenAI表示,由於對安全性和隱私的擔憂,它有意限制這款工具的普及程度。
這可能也是Spotify表示翻譯技術目前只與“選定群體”Podcast主持人進行測試的原因之一。該公司沒有詳細說明它計劃如何廣泛提供該工具或何時期望擴展。
(原文出自:https://www.theverge.com/2023/9/25/23888009/spotify-podcast-translation-voice-replication-open-ai)