最も美しいデジタルガールフレンドをDIYしましょう！ MITが最強の仮想人間ジェネレーターのソースコードを公開、ネイチャー誌に掲載

MITメディアラボの研究者らは、仮想キャラクターを生成するツールをオープンソース化した。このツールは、顔、ジェスチャー、音声、動きの分野で人工知能モデルを組み合わせ、さまざまなオーディオおよびビデオ出力を作成するために使用できます。このツールは、Nature Machine Intelligence に掲載されました。

最近では、人工知能を使ってデジタルヒューマンを作成することがますます簡単になっているように感じます。

最も強力な仮想人間ジェネレーターが Nature のサブジャーナルに掲載されました">

しかし、デジタルヒューマンに関しては、「誤解を招く」ことと、「その背後にあるディープフェイク技術にはプライバシー漏洩の潜在的なリスクがある」という2点に着目したコメントが多く見受けられます。

実際、この技術は、アルバート・アインシュタインを復活させて物理学の授業を教えたり、昔の自分とチャットしたりするなど、前向きな目的にも使用できます。

最も強力な仮想人間ジェネレーターが Nature のサブジャーナルに掲載されました">

このテクノロジーがもたらすプラスの影響を促進するために、MIT メディアラボの研究者は、使いやすいアバター生成パイプラインをオープンソース化しました。

アバター生成パイプラインは、顔、ジェスチャー、音声、アクションの領域の AI モデルを組み合わせて、さまざまなオーディオおよびビデオ出力を作成します。

[[443273]] 最も強力な仮想人間ジェネレーター、Natureのサブジャーナルに掲載">

モナリザ、メアリー・シェリー、マーティン・ルーサー・キング、アルバート・アインシュタイン、ヴィンセント・ヴァン・ゴッホ、ウィリアム・シェイクスピアの AI アニメーション

アバター生成パイプラインは、出力結果に追跡可能で人間が読める透かしも付けます。

このようにして、生成されたコンテンツを実際のビデオコンテンツと区別できるため、悪意のある使用を防ぐことができます。

研究者たちは、教師、学生、医療従事者がこのツールを試してみて、それぞれの分野で役立つかどうか確認してくれることを期待している。

最も強力な仮想人間ジェネレーターが Nature のサブジャーナルに掲載されました">

より多くの学生、教育者、医療従事者、セラピストがこれらの仮想キャラクターを作成し、使用する機会があれば、より多くの人々に役立つ可能性があると研究者らはNature Machine Intelligenceに書いている。

最も強力な仮想人間ジェネレーターが Nature のサブジャーナルに掲載されました">

論文アドレス: https://www.nature.com/articles/s42256-021-00417-9

スタンフォード大学バーチャル・ヒューマン・インタラクション・ラボの創設ディレクター、ジェレミー・ベイレンソン氏は次のように述べています。

「AIと人間がアイデンティティを共有し始めると、素晴らしい世界が実現するでしょう。この論文は、AIが生成したペルソナを教育、健康、親密な関係などにどのように活用できるかを非常にうまく描き出しており、プライバシー侵害や偽のビデオを回避するための実用的なロードマップも提供しています。」

この論文の第一著者は、パティ・マーズ教授の流体界面研究グループの博士課程学生、パット・パタラヌタポン氏です。

「世界中のほとんどの人がディープフェイクからバーチャルヒューマン技術について学んできたが、我々はそれが創造的表現のツールになる可能性を秘めていると考えている」と彼は語った。

[[443274]]

デジタル人間の興味深い使い方

互いに競合する 2 つのニューラル ネットワークを組み合わせた生成的敵対的ネットワーク (GAN) を使用すると、非常にリアルな画像の作成、音声の複製、人間の顔のアニメーション化が容易になります。

Pataranutaporn 氏は Danry 氏とともに、Machinoia と呼ばれるプロジェクトで、生成的な顔のアニメーションの可能性を初めて探求しました。

最も強力な仮想人間ジェネレーターが Nature のサブジャーナルに掲載されました">

統合パイプラインにより、ユーザーはビデオ、音声、またはテキストを入力として提供し、ビデオとリアルタイムの顔フィルターを生成できます。

このプロジェクトでは、パタラヌタポンは、ティーンエイジャー、若者、中年、老人など、さまざまな年齢の自分自身を創造し、さまざまな視点から自分自身と対話できるようにしました。

「この珍しい体験で、私は人間としての自分の歩みに気付かされました」とパタラヌタポン氏は言う。「自分のデータを使って、これまで考えたこともなかった自分についてのことを明らかにするというのは、とても斬新な体験です。」

最も強力な仮想人間ジェネレーターが Nature のサブジャーナルに掲載されました">

研究者らは、自己探求はAIアバターの有益な応用例の一つに過ぎないと述べている。

実験により、仮想人間は学生の学習意欲を高め、認知課題のパフォーマンスを向上させ、従来の教育を補完できることが示されています。

パタラヌタポン氏は、この技術によって「興味や個人の背景に基づいて個別化され、時間の経過とともに変化する」指導が可能になると説明した。

マキノイアの技術は、ビデオ会議中に顔を隠す一方で、表情や感情を保つためにも使用できます。

この技術は、会議中に健康やトラウマ体験などの機密性の高い個人情報を共有する場合に役立つ可能性があります。

最も強力な仮想人間ジェネレーターが Nature のサブジャーナルに掲載されました">

リアルタイムの会議環境でAI生成キャラクターを使用する

Machinoia プロジェクトには、他にも興味深い使用例が数多くあります。

メイズ氏と研究者のロイ・シルクロット氏が共同で指導する今秋のディープフェイク研究室の授業では、学生たちがこの技術を使って、清明節の歴史的な場面を描いた中国絵画の登場人物をアニメ化した。

​​

学生の中にはディープフェイクを使って「別れシミュレーター」を作った人もいた。

​​

法的および倫理的な課題

研究者らは論文の中で、技術の発展に伴い、仮想人間技術の急速な発展が多くの法的、倫理的問題も引き起こしていると指摘した。

たとえば、歴史上の人物を仮想デジタル形式で再現する権利を誰が持つかをどのように決定するのでしょうか?有名人の AI クローンがオンラインで有害な行動を促進した場合、法的責任は誰が負うのでしょうか?人々が人間よりも仮想の存在と交流することを好むようになる危険性はあるでしょうか?

「この研究の目標の一つは、この技術がどのように社会に役立てられるかについて疑問を提起し、オープンな議論を始めることです」とマーズ氏は語った。

「AI仮想人間の技術を共有しながら、それが生成する動画が合成であると明確にラベル付けすることで、より創造的で前向きな使用事例を刺激し、人々がこの技術の潜在的な利点を理解できるようになります」とパタラヌタポン氏は語った。