AIアルゴリズムがARライブブロードキャスト体験を向上させ、Taobao Maker Festivalのリアルで幻想的な体験をもたらします

2017年7月8日、5日間にわたる第2回Taobao Maker Festivalが杭州国際博覧センターで正式に開幕しました。Taobaoの毎年恒例の最も楽しくて最大のオフラインマーケットであるTaobao Maker Festivalは、新しい技術革新と新しいコンテンツ作成モデルを活用して若者を導き、より多くのコンテンツ、コミュニティ、トレンドを作成し、新しいディスプレイとインタラクティブテクノロジーを通じて彼らの革新と創造性を解き放つよう奨励しています。

7月1日、よくできたリアルな3D招待状「異城上空を飛ぶ」がインターネット上で人気を博しました。3Dアニメーション制作に詳しい友人なら、この3D招待状のメインシーンの開発が、従来のWeb開発でCSSによって実現される疑似（限定）3D効果とは異なり、従来のグラフィック分野のOpenGLベースの開発モデルに近いWebGLを使用して実現されていることにすぐに気づくでしょう。マテリアルレンダリングとシーン設計の面では、アリババ技術チームはコーディングレベルの「マップエディター」を作成することで、マップ全体のパフォーマンスを何度も美化および最適化し、設計されたシーンが完全に復元され、モバイル端末でスムーズに実行できるようにしました。サブシーン設計では、WebGLに基づく3次元インタラクティブテクノロジーの360パノラマビデオが使用され、開発効率が速く、より精巧で没入感のあるシーン体験が得られます。最終的に映画レベルの視覚効果をユーザーに提供するために、このプロジェクトではハリウッドのトップ特殊効果制作チームであるFrameStoreを招待してプロセス全体に参加させ、ハリウッドの視覚効果を使用して非常にクールなTaobao Maker Festivalの招待状を作成しました。

[[196325]]

AIアルゴリズムがタオバオのインタラクティブ体験とARライブ放送の作成を支援

インタラクティブ体験の重要な部分として、今回の Taobao Maker Festival の焦点となった AR ライブ ブロードキャストは、ユーザー エクスペリエンスに多大な力を入れました。こうした交流の背後には、AIアルゴリズムとARライブストリーミングという2つの主要技術分野におけるアリババの技術チームによる画期的な進歩がある。技術的には、AIアルゴリズムに基づいて、システムは3D空間再構築、シーンセグメンテーション、動的歩行者モニタリング、単眼同時位置決めとマッピング、インタラクティブビデオストリーミングなどのテクノロジーを総合的に使用して、現実と仮想がシームレスに融合するファンタジーシーンを作成します。オンラインとオフラインのインタラクションに参加する観客は、ビッグフィッシュとベゴニアの没入感を味わえるだけでなく、小さな怪獣に変身してウルトラマンと格闘したり、お互いに温かいハグを交わしたりすることもできます。

[[196326]]

前世代の VR ライブ放送と比較して、AR ライブ放送はスペースと設備の制限を打破できます。 AIアルゴリズムを継続的に最適化することで、インテリジェントな監視とシーン認識を実現し、現実と仮想を融合したリアルタイムで高度なインタラクティブシーンを構築し、デジタルメディアやエンターテインメントビジネスの普及形態を大幅に拡大します。タオバオメーカーフェスティバルのARライブ放送会場では、アリババの技術チームがビデオストリームを分析し、ライブ映像内の主要人物を検出して抽出し、リモートで送信して仮想インタラクションを実現しました。さらに、奥行き情報に基づくグラフィックス合成技術により、遠隔地の人と現実の人との効果的なインタラクションも実現します。ユーザーは外出することなく、携帯電話を通じてライブ AR インタラクションを視聴および参加でき、現実と幻想が融合した世界を体験できます。

偶然にも、インターネット時代の小売業改革の主な方向である、オンラインとオフラインを融合した「新小売」形式として、無人店舗「タオコーヒー」もタオバオメーカーフェスティバルでデビューしました。 「Tao Coffee」に関係する技術には、本人確認、モバイル決済、人工知能などが含まれます。さらに、今回のタオバオメーカーフェスティバルでは、アリババモバイルテックエンジン（AMTE）の重要な部分として、Weexフレームワークがタオバオメーカーフェスティバルのメイン会場に優れたサポートを提供しました。

アリババグループのCEOである張勇氏は、中国経済とビジネス全体がデジタル経済とニューリテールへと移行していると述べた。 「5つの新」戦略の重点の一つとして、技術革新を活用したニューリテールが今後のビジネス変革の成否の鍵にもなる。昨年のBuy+とVRライブ放送から、インタラクティブアニメーションと純粋な3Dモデリングを採用した今年の飛悦七星江湖招待状、現場のARパノラマインタラクティブライブ放送まで、ブラックテクノロジーに満ちたTaobao Maker Festivalは、テクノロジーが商業価値をもたらすだけでなく、より多くの人々の実生活に利益をもたらし、人々を幸せにし、社会が持続可能な発展を実現できるようにします。

ダブル11 Tmallカーニバルがクラウドコンピューティング、ビッグデータ、電子商取引におけるアリババの最高のインターネット技術力を反映しているのであれば、毎年恒例のタオバオメーカーフェスティバルは、新しい小売シナリオにおけるモバイルやAR/VRなどの新しいインタラクティブ技術のアリババのトレーニングの場となっています。