Ativar a roupa em destaque de uma pessoa observada (pré-visualização)

Ao indexar um vídeo utilizando as definições avançadas do Azure Video Indexer, pode visualizar a roupa em destaque de uma pessoa observada. A informação fornece informações sobre itens-chave usados por indivíduos dentro de um vídeo e o tempo de marcação em que a roupa aparece. Isto permite publicidade contextual em vídeo de alta qualidade, onde os anúncios de roupa relevantes são combinados com o tempo específico dentro do vídeo em que são vistos.

Este artigo discute como ver a visão da roupa em destaque e como as imagens de roupa em destaque são classificadas.

A visão de roupa em destaque está disponível ao indexar o seu ficheiro escolhendo a opção Advanced -> Vídeo avançado ou vídeo avançado + predefinição áudio (em vídeo + indexação áudio). A indexação padrão não incluirá esta introspeção.

Esta imagem representa uma opção de vídeo de indexação.

As imagens de roupa em destaque são classificadas com base em alguns dos seguintes fatores: momentos-chave do vídeo, emoções gerais de texto ou áudio. A id propriedade indica o índice de classificação. Por exemplo, "id": 1 significa a roupa mais importante em destaque.

Nota

A roupa em destaque atualmente só pode ser vista a partir do arquivo de artefactos.

  1. No canto direito-superior, selecione para descarregar o ficheiro zip do artefacto: Download ->Artifact (ZIP)
  2. Abra featuredclothing.zip.

O ficheiro .zip contém dois objetos:

  • featuredclothing.map.json - o ficheiro contém instâncias de cada vestuário em destaque, com as seguintes propriedades:

    • id – índice de classificação ("id": 1 é a roupa mais importante).
    • confidence – a partitura da roupa em destaque.
    • frameIndex – a melhor moldura da roupa.
    • timestamp – correspondente ao frameIndex.
    • opBoundingBox – caixa de delimitação da pessoa.
    • faceBoundingBox – caixa de delimitação do rosto da pessoa, se detetada.
    • fileName – onde a melhor moldura da roupa é guardada.

    Um exemplo da roupa em destaque com "id": 1.

    "instances": [
      	{
      		"confidence": 0.98,
      		"faceBoundingBox": {
      			"x": 0.50158,
      			"y": 0.10508,
      			"width": 0.13589,
      			"height": 0.45372
      		},
      		"fileName": "frame_12147.jpg",
      		"frameIndex": 12147,
      		"id": 1,
      		"opBoundingBox": {
      			"x": 0.34141,
      			"y": 0.16667,
      			"width": 0.28125,
      			"height": 0.82083
      		},
      		"timestamp": "00:08:26.6311250"
      	},
    
  • featuredclothing.frames.map – esta pasta contém imagens dos melhores quadros em que a roupa em destaque apareceu, correspondendo à fileName propriedade em cada instância em featuredclothing.map.json.

Limitações e pressupostos

É importante notar as limitações da roupa em destaque para evitar ou mitigar os efeitos de deteções falsas de imagens com baixa qualidade ou baixa relevância. 

  • Pré-condição para a roupa em destaque é que a pessoa que usa a roupa pode ser encontrada na visão das pessoas observadas.
  • Se o rosto de uma pessoa que usa a roupa em destaque não for detetado, os resultados não incluirão a caixa de limites dos rostos.
  • Se uma pessoa num vídeo usa mais do que uma roupa, o algoritmo seleciona a sua melhor roupa como uma única imagem de roupa em destaque.
  • Quando colocados, as faixas são otimizadas para lidar com pessoas observadas que aparecem mais frequentemente na frente.
  • Podem ocorrer deteções erradas quando as pessoas se sobrepõem.
  • Os quadros que contêm pessoas desfocadas são mais propensos a resultados de baixa qualidade.

Para mais informações, consulte as limitações das pessoas observadas.

Passos seguintes