Tenere traccia delle persone osservate in un video

Importante

A causa dell'annuncio di ritiro Servizi multimediali di Azure, Azure AI Video Indexer annuncia le modifiche alle funzionalità di Azure AI Video Indexer. Vedere Modifiche correlate al ritiro di Servizi multimediali di Azure (AMS) per comprendere cosa significa per l'account Video Indexer di Azure per intelligenza artificiale. Vedere la guida alla preparazione per il ritiro di AMS: aggiornamento VI e migrazione.

Azure AI Video Indexer rileva le persone osservate nei video e fornisce informazioni come la posizione della persona nel fotogramma video e il timestamp esatto (inizio, fine) quando viene visualizzata una persona. L'API restituisce le coordinate del riquadro delimitatore (in pixel) per ogni istanza di persona rilevata, inclusa la probabilità di rilevamento.

Alcuni scenari in cui questa funzionalità potrebbe essere utile:

  • Analisi post-evento: rilevare e tenere traccia del movimento di una persona per analizzare meglio un incidente o un evento post-crimine (ad esempio, esplosione, rapina di banca, incidente).
  • Migliorare l'efficienza durante la creazione di dati non elaborati per gli autori di contenuti, ad esempio video advertising, notizie o giochi sportivi (ad esempio, trovare le persone che indossano una camicia rossa in un archivio video).
  • Creare un riepilogo da un lungo video, come le prove giudiziarie dell'aspetto di una persona specifica in un video, usando lo stesso ID della persona rilevata.
  • Impara e analizza le tendenze nel tempo, ad esempio come i clienti si spostano tra le corsie in un centro commerciale o quanto tempo spendono nelle linee di checkout.

Ad esempio, se un video contiene una persona, l'operazione di rilevamento elenca le apparizioni della persona insieme alle coordinate nei fotogrammi video. È possibile usare questa funzionalità per determinare il percorso della persona in un video. Consente inoltre di determinare se sono presenti più istanze della stessa persona in un video.

La funzionalità di rilevamento utenti osservati appena aggiunta è disponibile durante l'indicizzazione del file scegliendo l'opzioneAvanzate video> o Avanzate video e audio preimpostato (in Video + indicizzazione audio). L'indicizzazione standard non includerà questo nuovo modello avanzato.

Screenshot di rilevamento delle persone osservate

Quando si sceglie di visualizzare informazioni dettagliate del video nel sito Web di Video Indexer, il rilevamento osservato Persone verrà visualizzato nella pagina con tutte le anteprime delle persone rilevate. È possibile scegliere un'anteprima di una persona e vedere dove viene visualizzata la persona nel lettore video.

La risposta JSON seguente illustra il risultato restituito da Video Indexer durante il rilevamento delle persone osservate:

    {
    ...
    "videos": [
        {
            ...
            "insights": {
                ...
                "observedPeople": [{
                    "id": 1,
                    "thumbnailId": "560f2cfb-90d0-4d6d-93cb-72bd1388e19d",
                    "instances": [
                        {
                            "adjustedStart": "0:00:01.5682333",
                            "adjustedEnd": "0:00:02.7027",
                            "start": "0:00:01.5682333",
                            "end": "0:00:02.7027"
                        }
                    ]
                },
                {
                    "id": 2,
                    "thumbnailId": "9c97ae13-558c-446b-9989-21ac27439da0",
                    "instances": [
                        {
                            "adjustedStart": "0:00:16.7167",
                            "adjustedEnd": "0:00:18.018",
                            "start": "0:00:16.7167",
                            "end": "0:00:18.018"
                        }
                    ]
                },]
            }
            ...
            }
    ]
}

Limitazioni e presupposti

Per altre informazioni, vedere Considerazioni e limitazioni quando si sceglie un caso d'uso.