エスティローダーはAI/AR技術を活用してメイクアップをより洗練させ、近視の人がメイクアップがうまくできないことを心配する必要がなくなる

この化粧品大手は、視覚障害者が簡単に化粧を行えるよう、AIと拡張現実（AR）技術を活用した音声対応の化粧アシスタントアプリをリリースした。

視覚障害のある人がエスティ ローダー製品を使い、自立心と自信を高めるために、私たちはどのように支援できるでしょうか?この実際的な問題に直面して、化粧品大手はAIと拡張現実（AR）技術から答えを探すことにしました。

その結果、音声対応メイクアップアシスタント (VMA) が誕生しました。これは現在英国と米国で提供されており、まもなく世界中で提供される予定です。このプロジェクトにより、エスティ ローダーは 2023 CIO 100 IT Excellence Award を受賞しました。

「私たちは、美容業界における大きなビジネス課題、つまりアクセス可能なソリューションの不足に取り組んでいます」と、エスティ ローダー カンパニーズの上級副社長兼最高情報責任者のマイケル スミスは述べています。「何らかの視覚障害を持つ人は世界中に 22 億人おり、そのうち 200 万人以上が英国にいます。英国は私たちのテストベッドとなります。これは単なるビジネス チャンス以上のものであることを強調することが重要です。これは、世界で最も包括的で多様性のある美容会社になるというエスティ ローダー カンパニーズの使命にも沿っています。エスティ ローダーの決意は、社内の従業員のためであれ、すべての消費者のためであれ、揺るぎません。」

エスティ ローダー カンパニーズのイノベーションおよび新興技術担当副社長クリストファー エイダン氏は、視覚障害者は日常生活のありふれた作業をこなすために他人の助けに頼らなければならないことが多いと付け加えた。この目的のため、VMA は、エスティ ローダーの既存の拡張現実没入型アプリケーション (ARIA) プラットフォームを使用して、AR/AI と機械学習 (ML) アルゴリズムを使用してユーザーの顔のメイクを分析したいと考えています。その後、VMA は音声ガイダンスを通じてユーザーが理想的な外観を作成できるように支援します。

VMA は、デバイス上でユーザーが事前に設定した設定を通じて音声制御を可能にするモバイル アプリです。音声と発話速度は、アクセシビリティの設定オプションを通じてカスタマイズできます。

AI技術を正しく使う

Aidan 氏が率いる技術チームがこのようなアプリケーションを構築するのにそれほど時間はかかりませんでしたが、最初に乗り越えなければならなかったハードルは実現可能性調査を完了することでした。包括性を基本理念とするテクノロジー プロジェクトとして、チームは、顔の形、大きさ、肌の色、その他の固有の特徴など、潜在的なユーザーのさまざまな顔の特徴にアプリが対応する必要があることに気付きました。 AIがこれらの身体的特徴に適応し、髪型などの他の多様性指標と組み合わせて正しく応答できるようにするために、モデルのトレーニングプロセスは当初予想されていたよりもはるかに複雑になります。言い換えれば、トレーニング コーパスの多様性をより高める必要があるということです。

当初の設計では、自撮り写真でそれを捉え、分析アルゴリズムを使用して塗布の一貫性を評価し、ユーザーにメイクアップのガイダンスを提供することが期待されていました。しかし、アプリがユーザーの顔をスキャンしてリアルタイムのビデオを生成できることをチームが発見するのにそれほど時間はかかりませんでした。たとえば、ビデオでユーザーのファンデーションや口紅が均一に塗られていないことが示された場合、アプリは修正が必要な特定の領域について音声による説明と指示を提供し、視覚障害のあるユーザーが次に何をすべきかを理解するのに役立ちます。メイクが繊細で完璧な場合、アプリはユーザーにそれ以上の調整は不要であることを通知するプロンプトも表示します。

さらに、エイダンと彼のチームにとっての優先事項は、視覚障害者コミュニティと直接つながることです。 「私たちは、お客様独自のニーズは何か、お客様の悩みは何か、お客様の好みは何か、そしてエスティ ローダー製品に何を期待しているかを本当に理解したかったのです。そのために、パネルを集めて質問し、メイクアップやテクノロジーに関するお客様の個人的な体験に耳を傾けました。」

さらに、治験チームのメンバーの中には完全に目が見えていない人もいれば、視力が弱い人もいれば、周辺視野がまだ健全な人もいました。彼らとの交流やコミュニケーションを通じて、エイダンのチームは直接の経験と洞察をまとめ上げ、当初信頼できると信じていた仮定に疑問を投げかけることができました。

エイダン氏は、「当初は、より自然でパーソナライズされた音声の方が間違いなく人気が出るだろうと考えていましたが、ユーザー調査により、親しみやすさが最も重要な要素であることが判明しました。言い換えれば、ユーザーは、まるで古い友人のように、自分の携帯電話にプリセットされている音声と同じ/似た音声を聞きたいと考えているのです」と述べています。

Aidan のチームは、エスティ ローダーの社内外の支援団体、アクセシビリティ/インクルージョンの専門家パネルなどとも協力し、これらの洞察とパイロット グループからのフィードバックを組み合わせて、VMA 開発プロセスを形作りました。その後、チームはユーザー調査を組み合わせて、アプリの命名から音声/トーンのデザインまで、各段階で作業を完了します。

「視覚障害者コミュニティからのフィードバックは、仮想アシスタントの音声速度の調整といった小さなことにも関わらず、設計、構築、テストの各段階を通じて私たちの決定に反映されました」とエイダンは説明します。

進行中

チームは、今年 1 月に英国で初めてアプリをリリースして以来、アプリに関する市場のフィードバックを継続的に監視しています。エイダン氏は、リリース前に徹底的にテストしたにもかかわらず、ユーザーは依然として新たな問題を発見したと指摘した。

「ユーザーから寄せられた質問の多くは、初期のテストでは誰も考えなかった質問であることがわかりました。たとえば、「アプリを削除したいのですが、どうすればよいですか? 正常に削除できたかどうか、どうすれば確認できますか?」といった質問です。

スミス氏は、エスティ ローダーが顧客からのフィードバックを通じて VMA の成功を測定していると説明した。現時点では、市場からのフィードバックは非常に肯定的かつ建設的です。

「あるユーザーは『このアプリが大好きで、これなしでは生きていけない』と言っていました」とスミス氏は言う。「ユーザーはこのアプリのおかげで力を得たと感じ、他人に頼らなければならないというネガティブな感情にとらわれることなく、新製品を試したり質問したりできるのです。」さらに重要なのは、このアプリは判断を下すのではなく、単に客観的に現実を復元するだけだということです。 ”

スミス氏はまた、VMA アプリは視覚障害者だけでなく、他の人たちにも役立つと指摘した。生活の中で大人の指導を受けられなかったり、大人に助けを求めたくない若いユーザーも、この便利なアプリケーションを通じてメイクのデザイン方法を理解し、学ぶことができます。

彼は次のように結論づけました。「私は他の CIO に、より使いやすく、より包括的な製品を構築するよう求めます。製品の機能と対象者において常に包括性を考慮することによってのみ、すべての人に利益をもたらす結果を達成できるのです。」