メタユニバースアバタープロジェクトが暴露されました！ザック・スナイダーのライトセーバーが3秒で512GBのハードドライブに変形

  [[441550]]

Connect 2021カンファレンスで、ザッカーバーグ氏はFacebookの名前をMetaに変更し、メタバースに向けて全力で前進しました。しかし、多くの人々の目には、これはメタバースの単なる PPT に過ぎません。実際、Meta は Codec Avatars プロジェクトに取り組んでおり、髪の毛の一本一本まではっきりと見えるリアルな仮想キャラクターを作成できるようになりました。

ザッカーバーグ氏は「ライトセーバー変身」にも挑戦した。

そうだと思いますか？いやいやいや！

Xiao Zu は Tang Yixin ほどクールではありませんが、少し面白いです。

右手には剣が隠されており、左手にはバーベキューソースのボトルが握られています。

[[441552]]

これは「メタバース」におけるザッカーバーグのアバターです。剣を見せているこの動画は多くの人に転送されました。

Facebook が名前を Meta に変更し、正式にメタバースに参入して以来、「メタバース」という用語は人気を保っています。

「アバター」という言葉は、「メタバース」という言葉と一緒に頻繁に使われます。

簡単に言えば、「アバター」とは仮想世界における人間のイメージを指します。

12月10日、「メタバース」の先駆者であるMetaは、独自の仮想世界プラットフォーム「Horizo​​n Worlds」をオープンした。

ユーザーが Horizo​​n Worlds に入るときは、3D 仮想アバターを作成する必要があります。

ユーザーはアバターを使用して、カスタマイズされた世界で自由に遊ぶことができます。

ただ、ちょっと恥ずかしいのは、これらのアバターの表情が非常に硬いことです。

そのため、現在の 3D 仮想アバターはかろうじて使用可能ではあるものの、「レディ・プレイヤー 1」などの SF 映画に登場するリアルなアバター画像にはまだまだ遠いと言えます。

Codec Avatars プロジェクトは、仮想アバターの分野における Meta の取り組みを表しています。

メタバースはPPTではありません。Metaは本当にそれを行っています

フェイスブックの名前を変えようというザッカーバーグ氏の決意は冗談ではない。

メタバースで真のインタラクションを実現したい場合、仮想アバターはメタバースへの扉を開く仁経と杜経となることができます。

[[441557]]

Codec Avatars プロジェクトの目的は、XR で使用するためにリアルなアバターをキャプチャして表現できるシステムを実装することです。

3D キャプチャと AI テクノロジーをベースにした Codec Avatars を使用すると、ユーザーは独自の仮想アバターをすばやく簡単に構築し、仮想空間でのやり取りを現実世界と同じくらい自然に行うことができます。

当初、このプロジェクトは高品質のヘッドショットのデモンストレーションから始まり、その後、全身アバターの構築へと進みました。

人の体を単にスキャンする以上の大きな課題は、アバターをインタラクティブな環境で使用できるようにシステム全体をリアルタイムで動作させることはもちろん、それをリアルに動かすことです。

Connect 2021 カンファレンスで、研究者 Yaser Sheikh 氏がチームの最新の成果である「フルボディ コーデック アバター」を発表しました。

同氏は、コーデックアバターはより複雑な目の動き、表情、手、体のジェスチャーをサポートするようになったと述べた。

さらに、Meta はさまざまな照明条件や環境下での仮想アバターの髪や肌のリアルなレンダリングも実演しました。

すると、メタバース内で衣服もリアルにシミュレートできるようになります。

引っ張れば伸縮性があり、振ればシワになります。

体のディテールや服装もリアルに復元でき、忠実度の高い仮想空間も実現。

Meta は、すべてのアイテムが現実世界を反映した仮想アパートを構築しました。

このようにして、ユーザーは物理空間と同期して仮想空間でオブジェクトを移動したり、対話したりすることができます。

現時点では、企業が実験用にマップ化された現実世界の環境を構築するには、これが「最良の」シナリオであると思われます。

メタバースに入ると、手動による追跡も同様に重要になります。物理的な世界でやりとりするために腕を振ると、疲れるだけでなく見た目も悪くなります。

そのために、Meta はより繊細で自然なアプローチ、つまり EMG リストバンドを介した XR 入力に取り組んできました。

少し前に、Meta は触覚で作動する手袋も発売しました。これらはすべて、Metaverse での新しいインタラクションを実現するための取り組みです。

Codex アバターはどのように構築されますか?

Meta が Codex アバターの作成を開始するきっかけは 7 年前に遡ります。

2014年、カーネギーメロン大学ロボティクス研究所の3DキャプチャラボであるPanoptic Studioの責任者であるヤセル・シェイク氏は、Oculusの主任科学者であるマイケル・アブラッシュ氏と出会い、意気投合した。

マイケル・アブラッシュ

Yaser Sheikh は 2015 年に Facebook (現 Meta) に入社し、それ以来 Codex Avatars 研究チームを率いています。

ヤセル・シェイク

「リアルなアバターを作成する基礎は測定です」と、Codex Avatars の研究科学者であるトーマス・サイモン氏は語る。

「アバターを説得力のあるリアルなものにするには正確なデータが必要であり、それには適切な測定が必要です。そのため、リアルなアバターを作成するための鍵は、目を細めたり、鼻にしわを寄せたりするなど、人間の表情の物理的な詳細を測定する方法を見つけることです。」

ピッツバーグ研究所の Codec Avatars チームは、エンコーダーとデコーダーという 2 つの主要モジュールを使用して人間の表情を測定します。

まず、エンコーダーはカメラを使用して対象者の行動をキャプチャし、キャプチャした情報を、人の身体的および環境的状態を表す一意のコードに組み立てます。このコードは、必要なときに必要な場所に送信できます。

次にデコーダーはコードをビデオ信号に変換します。

通常のスマートフォンのカメラでも鮮明なビデオを撮影できます。ただし、コーデック アバターは膨大な物理データと複雑なソフトウェアの組み合わせであり、想像以上に複雑です。

Codec Avatars プロジェクトでは、数百台の高解像度カメラを使用して顔の詳細をキャプチャし、各カメラは 1 秒あたり 1 GB の速度でデータをキャプチャします。

これのコンセプトは何ですか?

たとえば、これらのカメラで記録された 3 秒間のデータは、512 GB のディスクを埋めるのに十分です。

Codec Avatars チームは、既存のハードウェア条件の限界である約 15 分間録画を続けました。しかし、可能な限り多くのデータを使用することで、最もリアルな仮想アバターを作成するための基盤も築かれました。

Codec Avatars チームはこのデータを活用して、ビデオから仮想アバターを素早く構築できる AI システムをトレーニングしています。

シェイク氏は「誇張した髪型をした人物の3D肖像画を復元できるようになったほか、脳波収集キャップをかぶった人物の肖像画も復元できる」と語った。

「これは、人間のリアルなデジタルポートレートを自動生成する世界で最も先進的な方法の 1 つです。これは、将来広く採用される可能性のある、仮想対面コミュニケーションの新しい方法を提供します。」

Codec Avatars の出現により、人々は「メタバース」での社会的交流をますます受け入れるようになるでしょう。