Share via


Habilite a perceção da pessoa correspondente

Importante

Devido ao anúncio de desativação dos Serviços de Mídia do Azure, o Azure AI Video Indexer anuncia ajustes nos recursos do Azure AI Video Indexer. Consulte Alterações relacionadas à aposentadoria do Azure Media Service (AMS) para entender o que isso significa para sua conta do Azure AI Video Indexer. Consulte o guia Preparando para a aposentadoria do AMS: VI atualização e migração.

Nota

O acesso a recursos de identificação facial, personalização e reconhecimento de celebridades é limitado com base em critérios de elegibilidade e uso, a fim de apoiar nossos princípios de IA responsável. Os recursos de identificação facial, personalização e reconhecimento de celebridades estão disponíveis apenas para clientes e parceiros gerenciados pela Microsoft. Use o formulário de admissão de Reconhecimento Facial para solicitar acesso.

O Azure AI Video Indexer faz a correspondência entre as pessoas observadas que foram detetadas no vídeo e os rostos correspondentes (perspetiva "Pessoas"). Para produzir o algoritmo de correspondência, as caixas delimitadoras para os rostos e as pessoas observadas são atribuídas espacialmente ao longo do vídeo. A API retorna o nível de confiança de cada correspondência.

A seguir estão alguns cenários que se beneficiam desse recurso:

  • Melhore a eficiência ao criar dados brutos para criadores de conteúdo, como publicidade em vídeo, notícias ou jogos esportivos (por exemplo, encontre todas as aparências de uma pessoa específica em um arquivo de vídeo).
  • Análise pós-evento — detete e rastreie o movimento de uma pessoa específica para analisar melhor um acidente ou crime pós-evento (por exemplo, explosão, assalto a banco, incidente).
  • Crie um resumo de um vídeo longo, para incluir as partes em que a pessoa específica aparece.

O recurso Pessoa correspondente está disponível ao indexar seu arquivo escolhendo a predefinição de indexação Advanced ->Video + audio.

Nota

A indexação padrão não inclui este modelo avançado.

Vídeo avançado ou predefinição avançada de vídeo + áudio

Para exibir a pessoa correspondente no site do Azure AI Video Indexer , vá para Exibir ->Mostrar Insights -> selecione a opção Todos ou Exibir ->Modo de Exibição Personalizado ->Rostos Mapeados.

Quando você escolhe ver informações do seu vídeo no site do Azure AI Video Indexer , a pessoa correspondente pode ser visualizada a partir da visão de rastreamento de Pessoas Observadas. Ao escolher uma miniatura de uma pessoa, a pessoa correspondente ficou disponível.

Veja as pessoas correspondentes a partir da perceção Pessoas Observadas

Se você quiser ver as roupas detetadas pelas pessoas na Linha do tempo do seu vídeo no site do Video Indexer, vá para Exibir ->Mostrar Insights e selecione a opção Todos ou Exibir ->Visualização personalizada ->Pessoas Observadas.

Procurar uma pessoa específica pelo nome, retornando todas as aparências da pessoa específica é habilitado usando a barra de pesquisa do Insights do seu vídeo no Azure AI Video Indexer.

Exemplo de código JSON

A seguinte resposta JSON ilustra o que o Azure AI Video Indexer retorna ao rastrear pessoas observadas que mapearam pessoas associadas:

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "d09ad62e-e0a4-42e5-8ca9-9a640c686596",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "short"
                }
            }
        ],
        "matchingFace": {
            "id": 1310,
            "confidence": 0.3819
        },
        "instances": [
            {
                "adjustedStart": "0:00:34.8681666",
                "adjustedEnd": "0:00:36.0026333",
                "start": "0:00:34.8681666",
                "end": "0:00:36.0026333"
            },
            {
                "adjustedStart": "0:00:36.6699666",
                "adjustedEnd": "0:00:36.7367",
                "start": "0:00:36.6699666",
                "end": "0:00:36.7367"
            },
            {
                "adjustedStart": "0:00:37.2038333",
                "adjustedEnd": "0:00:39.6729666",
                "start": "0:00:37.2038333",
                "end": "0:00:39.6729666"
            }
        ]
    }
]

Limitações e pressupostos

É importante observar as limitações da pessoa mapeada, para evitar ou mitigar os efeitos de partidas perdidas entre pessoas ou pessoas que não têm correspondências.

A pré-condição para a correspondência é que a pessoa que aparece nos rostos observados foi detetada e pode ser encontrada no People insight.
Pose: As faixas são otimizadas para lidar com pessoas observadas que na maioria das vezes aparecem na frente.
Obstruções: Não há correspondência entre rostos e pessoas observadas onde há obstrução (pessoas ou rostos sobrepostos uns aos outros).
Alocação espacial por quadro: Não há correspondência quando diferentes pessoas aparecem na mesma posição espacial em relação ao quadro em um curto espaço de tempo.

Veja as limitações de Pessoas observadas: rastreie pessoas observadas em um vídeo