ニュース

感情表現を忠実に再現する吹替えAIモデル「Dubbing v2」のAPI提供を開始

 ElevenLabsは8月6日、新しい吹き替えAIモデル「Dubbing v2」をElevenAPI経由で提供開始した。「Dubbing v2」のUI版は5月28日より先行提供されていたが、今回のAPI公開により、開発者や企業が自社プロダクトやワークフローに吹き替え機能を直接組み込めるようになる。

「Dubbing v2」は、感情や演技のトーンをそのまま母国語以外の言語で届けることができる。オリジナルの話者が持つ特有のトーンや間、話し方、息遣い、細やかな感情表現を別の言語へと翻訳する。「Dubbing v2」は日本語や韓国語を含む92言語に対応している。

 API版では、多言語吹き替えの作成から、スクリプトの調整、セグメント単位の再生成までを1つのワークフローで完結できる。エンタープライズ向け機能として、独自に用意したスクリプト(ソーステキスト)や翻訳文を指定し吹き替えを生成できるほか、特定のセグメントのみを修正・再生成可能。また、用途に応じモデルを選択し、同じAPI内でコスト効率や大規模処理を重視する「Dubbing v1」に切り替えることもできる。

 想定される使用例としては、動画クリエイターやゲームスタジオによるキャラクターダイアログ・カットシーンのローカライズ、旅行・宿泊業界などによる多言語マーケティング動画の制作、映画やドラマなど長尺コンテンツの多地域展開などが挙げられる。