イレブンラボがダビングv2をリリース：AIダビングが「映画とテレビのローカリゼーション」の主戦場に

元の話者の音色、口の形、感情を保持しながら、ビデオを数十の言語に自動的に翻訳します。これは、イレブンラボ の吹き替え製品が行っていることであり、海外の映画やテレビのローカリゼーションやコンテンツの中核的な要件でもあります。 5 月 28 日にリリースされた ダビング v2 では、この機能が次のレベルに引き上げられています。

v2 では何がアップグレードされますか?

Dubbing v2 のアップグレードの方向性は、音声の自然さ、音色の忠実度、リップシンクの精度、感情の一貫性、長時間にわたるコンテンツの安定性など、ダビング パイプラインのほぼすべての側面をカバーしており、多言語/多アクセントのサポートを強化しています。海外のコンテンツチームにとって、長編コンテンツの安定性は特に重要です。90 分の映画の場合、80 分でアフレコが軌道から外れると、それまでのすべての努力が無駄になってしまいます。

完全なダビングパイプライン

ダビング v2 は独立した機能ではありません。イレブン v3 音声モデル、スクライブ v2 (ASR) およびその他のテクノロジーと連携して、「認識-翻訳-合成-同期」の完全なダビング パイプラインを形成します。このパイプラインの重要性は、「ダビングができる」ことではなく、「産業化されたバッチダビングができる」ということです。これはまさに、映画やテレビ、教育、企業コンテンツ、海外ゲームなどのシナリオで必要とされるものです。

業界の観点から見ると、AI 吹き替え/ローカリゼーションは イレブンラボの商用化の重要な柱であり、この分野での競争は激化しています。ビデオ翻訳/リップシンク分野では、HeyGen、Synthesia なども力を入れています。 Dubbing v2 のリリースにより、このトラックの敷居はさらに 1 つ上がりました。「音の忠実さ + リップシンク + 長いコンテンツの安定性」が標準になると、競争は「それに匹敵するかどうか」から変わります。 「合うかどうか、早いかどうか、高いか安いか」まで。国内の AI 吹き替えおよびビデオのエクスポート ツール (Alibaba と Byte の吹き替え製品) にとって、これは直接的な圧力であると同時に方向性を思い出させるものです。「多言語コンテンツのグローバル化」が 2026 年の AI オーディオおよびビデオの中核的な応用シナリオであり、このパイプラインを強化できる人がコンテンツを海外に輸出する鍵を握ることになります。

将来的に追跡する価値のあるいくつかの方向性:

1. リップシンクの実際の精度: 複数の言語でのリップシンクの自然さ。
2. 長時間コンテンツの安定性: 長時間ビデオのダビングの失敗率と手動介入の必要性。
3. 価格設定とローカライズ費用: 一括ダビングの単価は大規模な海外展開に対応できますか?
4. 国内ビデオ エクスポート ツールへの対応: Alibaba と Byte の吹き替え製品は、「完全なパイプライン」機能をどのようにフォローアップしますか。