フォーカス分析: 動画向けAIと画像向けAIの違い

フォーカス分析: 動画向けAIと画像向けAIの違い

[51CTO.com クイック翻訳] 画像処理と比較すると、ビデオから洞察を抽出したり、AI 技術を使用したりすると、新たな課題が生じる一方で、かなりの最適化のメリットも得られます。ビデオ AI は、ビデオ映像から特定のフレームを抽出し、各フレームに対してコンピューター ビジョン アルゴリズムを実行するだけだという誤解があります。このアプローチは確かに機能しますが、真の分析的洞察は得られません。本日の記事では、単一のビデオ フレームを処理するこのアプローチの欠点の例をいくつか見ていきます。ただし、スペースの制限により、これらの欠点を克服するために必要な他のアルゴリズムについては詳しく説明しません。興味のある方は、このような目標を達成できるさまざまな特定のビデオ アルゴリズムを提供する Video Indexer を参照してください。

ビデオに映っている人々

次の[ビデオ]の最初の25秒を見てみましょう。

この 25 秒間、ダグは常に画面に表示されていることに注意してください。

ダグのビデオ出演のタイムラインを描くと、次のようになります。

このプロセス中、ダグはカメラの方を向いていないことに注意してください。動画の7秒目で彼はエミリーを見つめており、23秒目にも同じことが起こります。

ビデオのその時間帯に顔検出を実行すると、Doug の顔は検出されません (次のスクリーンショットを参照)。

つまり、各ビデオフレームに対して顔検出のみを実行すると、上記のようなタイムラインを描画することはできません。このようなタイムラインを取得するには、ビデオセグメント全体で顔を追跡し、その中に表示される顔の横顔ビューを考慮できる必要があります。 Video Indexer は顔を追跡できるため、先ほど示したタイムライン全体を表示できます。

光学文字認識を使用してトピック/キーワードを抽出

次の2つのフレームをご覧ください。

[[220618]]

これら 2 つのフレームは、講演者がステージ上でスピーチをしているビデオからのもので、講演者の背後の壁に「Microsoft」という単語が現れたり消えたりしています。私たち人間の視聴者は、確かに「Microsoft」と書かれていることは容易に推測できます。しかし、これら 2 つの画像に対して OCR を実行すると、出力は「Microsc」と「crosoft」のみになります。ビデオ編集でビデオ フレームの完全なシーケンスを処理すると、このような不完全な単語が多数生成されます。映像から正確で完全な語彙を正常に抽出するには、この部分的な語彙にアルゴリズムを適用する必要があります。 Video Indexer はこの機能を有効にし、ビデオからのより優れた分析情報を提供します。

顔認識

顔認識システムは、さまざまな人間のオブジェクトのトレーニング画像のセットを含む顔データベースで構成されています。また、クエリ画像から顔の特徴を抽出し、顔のデータベースと照合するためのクエリ機能も提供します。クエリ関数の出力には、信頼度値とともに一致する可能性のあるリストが含まれます。クエリ関数の出力品質は、顔データベースとクエリ画像の実際の品質によって異なります。

ビデオ処理シナリオでは、複数のビデオ フレームが含まれ、キャラクターはさまざまな頭の姿勢と照明条件で表示されます。確かに、各キャラクターが登場するフレームごとに顔認識システムにクエリを実行することはできますが、このアプローチでは顔のマッチングの結論が異なり、フレーム間で信頼度の値に大きな差が生じる可能性があります。つまり、顔の一致結果を決定するには、追加のロジック レイヤーを使用する必要があります。最適化の手段として、対象となる顔認識システムのクエリに適したフレームのサブセットを選択し、システムへの実際のクエリ数を減らすことができます。

ビデオを処理する際に、複数のビデオ フレームからの人物のトレーニング画像を使用して変化する傾向を分類することで、顔データベースを構築および強化することもできます。さらに、フレーム間で文字を追跡するロジックを構築し、ヒューリスティックを使用して変更を評価することもできます。 Video Indexer でもこの機能を実現できるため、ユーザーは現在のビデオからより高品質の顔データベースを構築できるようになります。

元のタイトル: ビデオ向け AI と画像向け AI の違い

AIに関するその他のコンテンツについては、公式アカウント「AI Pusher」をフォローしてください。

[51CTOによる翻訳。パートナーサイトに転載する場合は、元の翻訳者と出典を51CTO.comとして明記してください]

<<:  ユーザーの検索ログに基づくマルチタスク学習による商品タイトル圧縮手法

>>:  JDロジスティクスは知能を高めつつ、宅配業者から仕事を奪っている

ブログ    
ブログ    

推薦する

AIと機械学習を活用してビジネスを完全に自動化する5つの優れた方法

アプリケーションソフトウェアや機器の更新に伴い、製品の品質に対するユーザーの要求はますます高くなり、...

人工知能は進歩しすぎているのでしょうか?この記事を読めば、誰もが人工知能の歴史を理解できる

人工知能は常に人々に非常に高級感を与えます。人々に役立つものの意味と価値を理解する必要があります。 ...

ガートナー 2019 人工知能成熟サイクルのトレンド

このガートナーのハイプサイクルは、AIが企業に及ぼすさまざまな影響を強調しています。ガートナーの 2...

Google AI の 7 つの「型破りな」遊び方。どれも一日中遊べる

AI は真面目な仕事しかできないなんて誰が言ったのでしょうか? Google は最近、顔を見ながら生...

AIが復活! GPT-3を使用して亡くなった婚約者を複製し、アメリカ人男性は愛する人をデジタル形式で永遠に生きさせました

「死は本当の消滅ではないが、忘却は永遠の消失である。」なくなってしまったとしても忘れないでください。...

...

...

COVID-19パンデミックの影響を受けて、世界のエッジAIソフトウェア市場は急速な発展を遂げている

MarketsandMarkets は、エッジ AI ソフトウェア市場が 2019 年から 2021...

人工知能と5Gの完璧な組み合わせは人類に全く新しい体験をもたらすかもしれない

世界の経済レベルと科学レベルが継続的に向上するにつれて、人類の科学技術分野における成果はますます顕著...

「製造」から「スマート」な製造へ、産業用インターネットが最良の選択となる

新インフラ政策の導入以来、データセンター、5G、ビッグデータの開発が最も頻繁に言及されていますが、産...

避けるべきビジネス インテリジェンス実装の悪い例トップ 10

ビジネス インテリジェンスは、あらゆる業界のグローバル企業の従来のワークロードを変革しています。ビジ...

産業用IoTにおける機械学習の応用

産業用IoTにおける機械学習の応用産業用 IoT (IIoT) に機械学習を適用すると、企業の予測分...

...

...

...