次の方法で共有


監視型人物検出および顔照合の分析情報を取得する

重要

顔識別、カスタマイズ、および著名人認識機能のアクセスは、責任ある AI 原則をサポートするために、適格性と使用条件に基づいて制限されます。 顔識別、カスタマイズ、および著名人認識機能は、Microsoft の管理対象の顧客とパートナーのみが利用できます。 顔認識受付フォームを使用して利用申請を行ってください。

監視型人物検出と顔照合では、メディア ファイル内の人物を自動的に検出し、照合します。 監視型人物検出と顔照合は、人物、服装、正確な出現時間枠に関する情報を表示するように設定できます。

Web ポータルでは、[分析情報] タブの分類された一覧に結果の分析情報が表示されます。タブには、各ユーザーとその ID のサムネイルが含まれています。 人物のサムネイルをクリックすると、一致した人物 (人物分析情報の対応する顔) が表示されます。 分析情報は、JSON ファイル内の分類された一覧にも生成されます。 ファイルには、人物のサムネイル ID、ファイルに表示される時間の割合、Wiki リンク (著名人の場合)、信頼度が含まれます。

観察された人の検出、検出された衣類、一致した顔のユース ケース

  • キャンペーンやトレーラーの作成時など、特定の有名人に関する分析情報を得るために組織アーカイブ内の一致する人物をディープ検索することで、効率を向上させます。
  • たとえば、ニュースやスポーツ エージェンシーのフットボールの試合のアーカイブで赤いシャツを着た人を検索するなど、機能ストーリーを作成するときの効率が向上しました。
  • 特定の人物がビデオに映っている法廷証拠のように、同一の検出対象人物の ID を使用して、長いビデオから概要を作成します。
  • 顧客がショッピング センター内の複数の通路をどのように移動するのか、レジの待ち時間など、時間の経過に伴う傾向を学習して分析します。

Advanced -Video + audio indexing プリセットを選択してファイルのインデックスを作成する際に、>および検出された服の機能を利用できます。

Web ポータルで分析情報 JSON を表示する

ビデオをアップロードしてインデックスを作成したら、Web ポータルから JSON 形式で分析情報をダウンロードします。

  1. Library タブを選択します。
  2. 目的のメディアを選択します。
  3. [ ダウンロード] を選択し、[ Insights (JSON)] を選択します。 JSON ファイルが新しいブラウザー タブで開きます。
  4. 応答例で説明されているキー ペアを見つけます。

API の使用

  1. ビデオ インデックスの取得要求を使用します。 &includeSummarizedInsights=falseを渡す。
  2. 応答例で説明されているキー ペアを見つけます。

応答の例

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "d09ad62e-e0a4-42e5-8ca9-9a640c686596",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "short"
                }
            }
        ],
        "matchingFace": {
            "id": 1310,
            "confidence": 0.3819
        },
        "instances": [
            {
                "adjustedStart": "0:00:34.8681666",
                "adjustedEnd": "0:00:36.0026333",
                "start": "0:00:34.8681666",
                "end": "0:00:36.0026333"
            },
            {
                "adjustedStart": "0:00:36.6699666",
                "adjustedEnd": "0:00:36.7367",
                "start": "0:00:36.6699666",
                "end": "0:00:36.7367"
            },
            {
                "adjustedStart": "0:00:37.2038333",
                "adjustedEnd": "0:00:39.6729666",
                "start": "0:00:37.2038333",
                "end": "0:00:39.6729666"
            }
        ]
    }
]

重要

すべてのVI機能の 透明度に関する注意事項の概要 をお読みください。 各分析情報には、独自の透明性に関するメモもあります。

監視型人物検出と顔照合のメモ

  • 人物は、通常、小さく映っている場合は検出されません (人物の最小の高さは 100 ピクセル)。
  • 最大フレーム サイズはフル ハイ ビジョン (FHD) です。
  • 低品質のビデオ (暗い照明条件など) は、検出結果に影響を与える可能性があります。
  • 推奨フレーム レート (少なくとも 30 FPS)。
  • 推奨されるビデオ入力は、1 つのフレームに含まれる人物が最大 10 人です。 この機能では、1 つのフレーム内にそれより多くの人物がいても処理できますが、検出結果としては、フレーム内の検出の信頼度が高い人物が最大 10 人取得されます。
  • 服装が似ている人物 (たとえば、ユニフォームを着ている人物、スポーツの試合の選手) は、ID 番号が同じ同一人物として検出される可能性があります。
  • 障害物 – 障害物(シーンや自己、または他の人による障害物)があると、エラーが発生する可能性があります。
  • ポーズ: ポーズ (背面/前面) が異なることが理由で、トラックが分割される可能性があります
  • 衣服の検出は人物の身体の可視性に依存するため、人物が完全に見える場合は精度が高くなります。 人が服を着ない場合は、エラーが発生する可能性があります。 このシナリオや可視性の低い他のシナリオでは、長いパンツやスカートやドレスなどの結果が得られる場合があります。

監視型人物検出と顔照合のコンポーネント

コンポーネント 定義
ソース ファイル ユーザーは、インデックス作成のためにソース ファイルをアップロードします。
検出 メディア ファイルが追跡され、観察対象の人物とその衣服が検出されます。 たとえば、長袖のシャツ、ドレス、長いパンツなどです。 検出するには、人物の完全な上半身がメディアに表示される必要があります。
ローカルのグループ化 識別された観察対象の顔は、ローカル グループにフィルター処理されます。 1人の人物が複数回検出された場合、その人物のために複数の観測された顔のインスタンスが作成されます。
照合と分類 観察対象の人物のインスタンスは、顔と照合されます。 既知の著名人がいる場合は、観察された人物に名前が付けられます。 任意の数の観察対象の人物インスタンスを同じ顔に照合できます。
信頼度値 観察対象の各人物の推定信頼度レベルは、0 ~ 1 の範囲で計算されます。 信頼度スコアは、結果の精度の確実性を表しています。 たとえば、82% の確実性はスコア 0.82 として表されます。

サンプル コード

VIのすべてのサンプルを見る