Nachverfolgen beobachteter Personen in einem Video

Wichtig

Aufgrund der Ankündigung zur Einstellung von Azure Media Services kündigt Azure AI Video Indexer Anpassungen an. Siehe Änderungen im Zusammenhang mit der Einstellung von Azure Media Service (AMS), um zu verstehen, was dies für Ihr Azure AI Video Indexer-Konto bedeutet. Weitere Informationen finden Sie im Leitfaden zur Vorbereitung auf die Einstellung von AMS: VI-Update und -Migration.

Azure AI Video Indexer erkennt beobachtete Personen in Videos und stellt Informationen bereit, z. B. den Ort der Person im Videoframe und den genauen Zeitstempel (Start, Ende), wenn eine Person angezeigt wird. Die API gibt die Begrenzungsfeldkoordinaten (in Pixel) für jede erkannte Personeninstanz zurück, einschließlich Erkennungssicherheit.

Einige Szenarien, in denen die Funktion nützlich sein kann:

  • Post-Event-Analyse: Erkennen und nachverfolgen von Bewegungen einer Person, um einen Unfall oder ein Verbrechen nach dem Ereignis besser analysieren zu können (z. B. Explosion, Banküberfall, Vorfall).
  • Verbessern Sie die Effizienz beim Erstellen von Rohdaten für Inhaltsersteller, wie Videowerbung, Nachrichten oder Mannschaftsspiele (z. B. das Auffinden von Personen, die ein rotes Hemd in einem Videoarchiv tragen).
  • Erstellen eine Zusammenfassung anhand eines langen Videos, z. B. einen Gerichtsbeweis für das Auftreten einer bestimmten Person in einem Video, unter Verwendung der gleichen erkannten Personen-ID.
  • Lernen und analysieren Sie Trends im Laufe der Zeit, z. B. wie sich Kunden in einem Einkaufszentrum durch die Gänge bewegen oder wie viel Zeit sie in der Kassenschlange verbringen.

Wenn ein Video beispielsweise eine Person enthält, listet der Erkennungsvorgang das Erscheinen dieser Person zusammen mit ihren Koordinaten in den Videoframes auf. Sie können diese Funktion verwenden, um den Weg der Person in einem Video zu bestimmen. Sie können außerdem ermitteln, ob mehrere Instanzen derselben Person einem Video enthalten sind.

Das neu hinzugefügte Feature zur Nachverfolgung beobachteter Personen ist beim Indizieren Ihrer Datei verfügbar, indem Sie die Option> "Erweitertes Video" oder "Erweitertes Video+ Audio" (unter "Video + Audioindizierung") auswählen. Die Standardindizierung schließt dieses neue erweiterte Modell nicht ein.

Screenshot der beobachteten Personenverfolgung

Wenn Sie Insights Ihres Videos auf der Videoindexer-Website anzeigen, wird die Beobachtete Personen-Nachverfolgung auf der Seite mit allen erkannten Personenminiaturansichten angezeigt. Sie können eine Miniaturansicht einer Person auswählen und sehen, wo die Person im Videoplayer erscheint.

Die folgende JSON-Antwort veranschaulicht, was video Indexer beim Nachverfolgen beobachteter Personen zurückgibt:

    {
    ...
    "videos": [
        {
            ...
            "insights": {
                ...
                "observedPeople": [{
                    "id": 1,
                    "thumbnailId": "560f2cfb-90d0-4d6d-93cb-72bd1388e19d",
                    "instances": [
                        {
                            "adjustedStart": "0:00:01.5682333",
                            "adjustedEnd": "0:00:02.7027",
                            "start": "0:00:01.5682333",
                            "end": "0:00:02.7027"
                        }
                    ]
                },
                {
                    "id": 2,
                    "thumbnailId": "9c97ae13-558c-446b-9989-21ac27439da0",
                    "instances": [
                        {
                            "adjustedStart": "0:00:16.7167",
                            "adjustedEnd": "0:00:18.018",
                            "start": "0:00:16.7167",
                            "end": "0:00:18.018"
                        }
                    ]
                },]
            }
            ...
            }
    ]
}

Einschränkungen und Voraussetzungen

Weitere Informationen finden Sie unter Überlegungen und Einschränkungen bei der Auswahl eines Anwendungsfalles.