Aktivieren der Personenabgleichs-Erkenntnis

Wichtig

Aufgrund der Ankündigung zur Einstellung von Azure Media Services kündigt Azure AI Video Indexer Anpassungen an. Siehe Änderungen im Zusammenhang mit der Einstellung von Azure Media Service (AMS), um zu verstehen, was dies für Ihr Azure AI Video Indexer-Konto bedeutet. Weitere Informationen finden Sie im Leitfaden zur Vorbereitung auf die Einstellung von AMS: VI-Update und -Migration.

Hinweis

Der Zugriff auf Funktionen zur Gesichtserkennung, Anpassung und Erkennung von Prominenten ist auf der Grundlage von Berechtigungs- und Nutzungskriterien beschränkt, um unsere Prinzipien der verantwortungsbewussten KI zu unterstützen. Funktionen zur Gesichtserkennung, Anpassung und Erkennung von Prominenten sind nur für von Microsoft verwaltete Kunden und Partner verfügbar. Verwenden Sie das Aufnahmeformular für die Gesichtserkennung, um sich für den Zugriff zu bewerben.

Azure AI Video Indexer vergleicht beobachtete Personen, die im Video mit den entsprechenden Gesichtern erkannt wurden ("Personen"-Einblick). Um den Abgleichsalgorithmus zu erstellen, werden die Begrenzungsrahmen für beide Gesichter und die erfassten Personen räumlich entlang des Videos zugeordnet. Die API gibt den Zuverlässigkeitsgrad jeder Übereinstimmung zurück.

Im Folgenden sind einige Szenarios aufgeführt, bei denen dieses Feature von Nutzen ist:

• Verbessern der Effizienz bei der Erstellung von Rohdaten für Inhaltsautoren, wie etwa bei Videowerbung, Nachrichten oder Sportsendungen (z. B. der Suche nach allen Aufnahmen einer bestimmten Person in einem Videoarchiv).
• Analyse nach einem Ereignis: Erkennen und Nachverfolgen der Bewegungen einer Person, um einen Unfall oder ein Verbrechen nach dem Ereignis (z. B. Explosion, Banküberfall, sonstiger Zwischenfall) besser analysieren zu können.
• Erstellen einer Zusammenfassung eines langen Videos, wobei die Abschnitte eingeschlossen werden sollen, in denen die betreffende Person vorkommt

Das Feature Übereinstimmende Person ist verfügbar, wenn Sie Ihre Datei indizieren, indem Sie Erweitert ->Video- und Audioindizierung auswählen.

Hinweis

Die Standardindizierung umfasst dieses erweiterte Modell nicht.

Wenn Sie die "Matched"-Person auf der Azure AI Video Indexer-Website anzeigen möchten, wechseln Sie zu "Anzeigen -> Einblicke anzeigen" –> wählen Sie die Option "Alle" oder "Alle anzeigen ">-Benutzerdefinierte Ansicht" ->Zugeordnete Gesichter aus.

Wenn Sie sich entscheiden, Einblicke Ihres Videos auf der Azure AI Video Indexer-Website zu sehen, könnte die übereinstimmende Person aus dem beobachteten Personen Tracking-Einblick angezeigt werden. Beim Auswählen einer Miniaturansicht einer Person wurde die übereinstimmende Person verfügbar.

Wenn Sie die Kleidung von Personen, die erfasst wurde, in der Zeitachse Ihres Videos auf der Video Analyzer for Media-Website anzeigen möchten, wechseln Sie zu Ansicht ->Erkenntnisse anzeigen, und wählen Sie die Option Alle oder Ansicht ->Benutzerdefinierte Ansicht>Observed People (Beobachtete Personen) aus.

Wenn Sie nach einer bestimmten Person anhand des Namens suchen, können Sie alle Darstellungen der jeweiligen Person mithilfe der Suchleiste der Insights Ihres Videos im Azure AI Video Indexer zurückgeben.

JSON-Codebeispiel

Die folgende JSON-Antwort veranschaulicht, was der Azure AI Video Indexer zurückgibt, wenn beobachtete Personen nachverfolgt werden, denen zugeordnete Personen zugeordnet sind:

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "d09ad62e-e0a4-42e5-8ca9-9a640c686596",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "short"
                }
            }
        ],
        "matchingFace": {
            "id": 1310,
            "confidence": 0.3819
        },
        "instances": [
            {
                "adjustedStart": "0:00:34.8681666",
                "adjustedEnd": "0:00:36.0026333",
                "start": "0:00:34.8681666",
                "end": "0:00:36.0026333"
            },
            {
                "adjustedStart": "0:00:36.6699666",
                "adjustedEnd": "0:00:36.7367",
                "start": "0:00:36.6699666",
                "end": "0:00:36.7367"
            },
            {
                "adjustedStart": "0:00:37.2038333",
                "adjustedEnd": "0:00:39.6729666",
                "start": "0:00:37.2038333",
                "end": "0:00:39.6729666"
            }
        ]
    }
]

Einschränkungen und Voraussetzungen

Es ist wichtig, die Einschränkungen des Features „Zugeordnete Person“ zu berücksichtigen, um die Auswirkungen von Fehlübereinstimmungen zwischen Personen oder Personen, die keine Übereinstimmungen haben, zu vermeiden oder abzuschwächen.

Voraussetzung für die Übereinstimmung ist, dass die Person, die bei „Beobachtete Gesichter“ angezeigt wird, erkannt wurde und in der Erkenntnis „Personen“ gefunden werden kann.
Pose: Die Trackingmethoden eignen sich am besten zum Erfassen von beobachteten Personen, die am häufigsten im Vordergrund erscheinen.
Hindernisse: Es gibt keine Übereinstimmung zwischen Personen und beobachteten Personen, wenn Hindernisse vorhanden sind (Personen oder Gesichter, die sich gegenseitig überlappen).
Räumliche Zuordnung pro Frame: Es gibt keine Übereinstimmung, wenn verschiedene Personen in kurzer Zeit an der gleichen räumlichen Position relativ zum Frame erscheinen.

Hier finden Sie weitere Informationen zu den Einschränkungen des Features „Beobachtete Personen“: Nachverfolgen beobachteter Personen in einem Video.