ElevenLabs、元の話し手の声と感情を維持するAI翻訳吹き替え機能を発表

AIテキスト読み上げ会社ElevenLabsは10月11日、火曜日にAI Dubbingを発表した。これは、元の話者の声、言語パターン、感情、イントネーションを維持しながら、話された内容を別の言語に変換できる機能である。

公式紹介によると、AI吹き替え機能は世界中の視聴者が自分の好きなコンテンツを母国語で楽しめるように設計されており、変換はわずか数分で完了するという。

AI 吹き替え機能は、ElevenLabs の多言語音声合成、音声複製、テキスト、オーディオ処理技術を組み合わせて、翻訳を作成する際に元のコンテンツの性質を維持します。

発表イベントでは、ElevenLabs の CEO 兼共同創設者である Mati Staniszewski 氏が、子供の頃に吹き替え後のコンテンツで経験した嫌な経験と、新しいテクノロジーでこの問題を解決できる方法について語りました。 「ポーランドで育った私たちが観た英語の映画はすべて、1人のナレーターによる吹き替えでした。つまり、俳優全員が同じ声で、映画鑑賞の体験が損なわれていたのです」とスタニシェフスキ氏は言う。「AI 吹き替えの開始は、コンテンツの言語障壁を取り除くためのこれまでで最大の一歩であり、視聴者がどの言語を話すかに関係なく、好きなコンテンツを楽しむのに役立ちます。」

IT Homeは、AI吹き替え機能が現在、英語、日本語、中国語、ドイツ語、ヒンディー語、フランス語、韓国語、ポルトガル語、イタリア語、スペイン語、インドネシア語、オランダ語、トルコ語、フィリピン語、ポーランド語、スウェーデン語、ブルガリア語、ルーマニア語、アラビア語、チェコ語、ギリシャ語、フィンランド語、クロアチア語、マレー語、スロバキア語、デンマーク語、タミル語、ウクライナ語など、Eleven Multilingual v2モデルでサポートされている20以上の言語をサポートしていることに気付きました。

AI 吹き替え機能は本日よりすべてのユーザーに提供され、吹き替えたいキャラクターの数に応じて料金が異なります。