美國專注於研究人工智慧和深度學習技術開發自然語音的軟體公司 ElevenLabs 推出一款全自動化的 AI 配音和影片翻譯工具「AI Dubbing & Video Translator」,可以將你提供的影片翻譯成 29 種語言。YouTube、TikTok、推特(現 X)、其他 URL 都可以幫你翻譯,只需要等待幾十秒到幾分鐘就可以獲得一段影片。
超方便!全自動化進行 AI 配音和影片翻譯的工具 AI Dubbing & Video Translator
ElevenLabs 推出一款用語音翻譯、語音辨識和錄音配音,只需要幾分鐘就可以將你的內容翻譯成 29 種語言的工具「AI Dubbing & Video Translator」。
!想要體驗 AI Dubbing & Video Translator 的朋友請點擊這裡!
AI 影片翻譯配音
AI Dubbing & Video Translator 可以將你提供的影片裡的聲音從一種語言轉換成另一種語言,同時還保持聲音特徵不變。操作簡單,你只需要「上傳想要翻譯的影片」並「選擇想要翻譯的語言」,它就會自動用 AI 將剩下的翻譯和配音工作完成。
這麼一來不管你是在 YouTube、TikTok、推特(現 X) 或其他平台上有聽不懂的影片你都可以使用 AI Dubbing 來幫你翻譯。這邊提供一段使用 AI Dubbing 來自動翻譯 Apple Vision Pro 導覽的 YouTube 影片。
我們使用 Apple 的 Vision Pro 影片為例,原本的是全英文的內容:
這是「AI Dubbing & Video Translator」上傳影片後,將英文翻成中文的結果,免費版點數不夠,這邊用一分鐘做範例,翻譯的效果還算不錯:
我們也用自己的影片交給 AI Dubbing & Video Translator 翻譯做測試,原始影片:
AI Dubbing & Video Translator 翻譯的效果,轉檔的速度很快,中翻英的部分在內容辨識不如英文準確(而且無法修改內容),而且免費版我覺得聲音不那麼像本尊:
如果訂閱 11 元美金的 Creator 版本的話就會有內容校正檢查的功能,音調也會模仿原始聲調:
ElevenLabs 文本轉語音工具
ElevenLabs 本身是專注於利用人工智慧和深度學習技術來開發自然語音合成和文字轉語音的美國軟體公司,所以它們的網站還提供文字轉語音的工具,這邊也放一段「電腦王阿達主要分享科技新知、3C產品開箱評測、App分享等內容,請按讚並設為最愛才不會遺漏最新資訊。」的文字轉語音範例。ElevenLabs 本身還有許多工具可以使用,大家可以自行去體驗看看。想要體驗的朋友可以點擊!這裡!前往 ElevenLabs 的網站。
效果可以播放下面的範例來試試,挺有趣的:
我也讓用自己的一段錄音後輸入文字讓 AI 模仿,大家可以聽聽看,我是覺得效果很不錯:
當然也可以用我的語調念英文:
大家使用的時候還是要注意 AI Dubbing & Video Translator 有免費額度的使用限制,超過的話要等 30 天才能重新免費使用。不然也可以選擇支付每個月 1 塊美金/11 塊美金來獲得更多權限,價格不算貴(不過這價格是首月的費用,要注意一下)。
要認真使用的朋友可以選擇每個月 99 塊美金/330 塊美金來獲得更多的特權。
我們之前寫過的 AI 打造自己造型的虛擬主播,支援多國語言翻譯的 HeyGen 的技術也是由 ElevenLabs 提供。
我們也測試了用 HeyGen 來翻譯同一段影片,老實說 HeyGen 效果明顯比較好,而且連嘴型也對的上:
整體使用下來 AI Dubbing & Video Translator 這套工具在聲音模仿與念稿的效果不錯,影片翻譯部分外語翻中文效果優異,但中翻英效果就沒有 HeyGen 好(雖然 HeyGen 也是用這一間的服務,但中文語音辨識 HeyGen 較強),不過優點是 AI Dubbing & Video Translator 價格遠比 HeyGen 便宜而且免費點數也可以做幾支短片,如果是一般的聲音模仿或短片製作的話,AI Dubbing & Video Translator 是還不錯的選擇。