Abilitare l'abbigliamento in primo piano di una persona osservata

Quando si indicizza un video usando le impostazioni video avanzate di Azure AI Video Indexer, è possibile visualizzare l'abbigliamento in primo piano di una persona osservata. Le informazioni dettagliate forniscono momenti all'interno del video in cui le persone chiave sono in primo piano e chiaramente visibili. Includono le coordinate delle persone, il timestamp e il fotogramma dello scatto. Queste informazioni dettagliate consentono annunci contestuali in-video di alta qualità. Ad esempio, quando gli annunci di abbigliamento pertinenti vengono confrontati con l'ora specifica all'interno del video in cui vengono visualizzati.

Questo articolo illustra come visualizzare le informazioni dettagliate sull'abbigliamento in primo piano e come vengono classificate le immagini di abbigliamento in primo piano.

Visualizzare un video introduttivo

È possibile guardare il seguente breve video che spiega come visualizzare e utilizzare le informazioni sull'abbigliamento evidenziato.

Visualizzazione dell'abbigliamento in primo piano

Le informazioni dettagliate sull'abbigliamento in primo piano sono disponibili per l'indicizzazione del file scegliendo l'opzione Avanzato - video > o Avanzato - video + audio preimpostato (sotto l'indicizzazione Video e audio). L'indicizzazione standard non include queste informazioni dettagliate.

Le immagini di abbigliamento in primo piano sono classificate in base ad alcuni dei fattori seguenti: momenti chiave del video, durata della visualizzazione della persona, emozioni basate su testo ed eventi audio. Le informazioni dettagliate analizzano il fotogramma più classificato per ciascuna scena, consentendo di produrre annunci contestuali in tutte le scene del video. Il file JSON viene classificato in base alla sequenza delle scene nel video, con ogni scena che ha come risultato il fotogramma con la valutazione più alta.

Nota

Le informazioni dettagliate sull'abbigliamento in primo piano possono essere visualizzate solo dal file di artefatto e le informazioni dettagliate non sono disponibili nel sito Web di Azure AI Video Indexer.

1. Nell'angolo in alto a destra selezionare per scaricare il file ZIP dell'artefatto: Download ->Artifact (ZIP)
2. Apri featuredclothing.zip.

Il file .zip contiene due oggetti:

• featuredclothing.map.json - Il file contiene capi di abbigliamento presentati, con le seguenti proprietà:

  • id – indice di classificazione ("id": 1 è l'abbigliamento più importante).
  • confidence – il punteggio degli abiti in primo piano.
  • frameIndex – la miglior struttura dell'abbigliamento.
  • timestamp : corrispondente al frameIndex.
  • opBoundingBox – rettangolo delimitante della persona.
  • faceBoundingBox – riquadro di delimitazione del volto della persona, se rilevato.
  • fileName – dove viene salvato il miglior modello dell'abbigliamento.
  • sceneID - la scena in cui viene visualizzata la scena.

  Un esempio di abbigliamento selezionato con "sceneID": 1.

  "instances": [
    	{
      		"confidence": 0.07,
  			"faceBoundingBox": {},
  			"fileName": "frame_100.jpg",
      		"frameIndex": 100,
      		"opBoundingBox": {
          			"x": 0.09062,
          			"y": 0.4,
  				"width": 0.11302,
          			"height": 0.59722
  				},
     			 "timestamp": "0:00:04",
      		"personName": "Observed Person #1",
      		"sceneId": 1
    	}
  

• featuredclothing.frames.map : questa cartella contiene immagini dei migliori fotogrammi in cui sono presenti gli abiti in evidenza, corrispondenti alla proprietà fileName in ogni istanza di featuredclothing.map.json.

Limitazioni e presupposti

È importante notare le limitazioni dell'abbigliamento presentato al fine di evitare o attenuare gli effetti di falsi rilevamenti di immagini con bassa qualità o bassa pertinenza. 

• Precondizione per l'abbigliamento selezionato è che la persona che indossa i vestiti deve essere trovata nelle informazioni sulle persone osservate.
• Se il volto di una persona che indossa l'abbigliamento menzionato non viene rilevato, i risultati non includono la rappresentazione del contorno dei volti.
• Se una persona in un video indossa più di un outfit, l'algoritmo seleziona il suo outfit migliore come un'unica immagine di abbigliamento in primo piano.
• In caso di posa, le tracce sono ottimizzate per gestire le persone osservate che più spesso appaiono sul fronte.
• È possibile che si verifichino rilevamenti errati quando le persone si sovrappongono.
• I fotogrammi contenenti persone sfocate sono più soggetti a risultati di bassa qualità.

Per altre informazioni, vedere le limitazioni delle persone osservate.