Rastrear pessoas observadas em um vídeo

Importante

Devido ao anúncio de desativação dos Serviços de Mídia do Azure, o Azure AI Video Indexer anuncia ajustes nos recursos do Azure AI Video Indexer. Consulte Alterações relacionadas à aposentadoria do Azure Media Service (AMS) para entender o que isso significa para sua conta do Azure AI Video Indexer. Consulte o guia Preparando para a aposentadoria do AMS: VI atualização e migração.

O Azure AI Video Indexer deteta pessoas observadas em vídeos e fornece informações como a localização da pessoa no quadro de vídeo e o carimbo de data/hora exato (início, fim) quando uma pessoa aparece. A API retorna as coordenadas da caixa delimitadora (em pixels) para cada instância de pessoa detetada, incluindo a confiança de deteção.

Alguns cenários em que esse recurso pode ser útil:

• Análise pós-evento—detete e rastreie o movimento de uma pessoa para analisar melhor um acidente ou crime pós-evento (por exemplo, explosão, assalto a banco, incidente).
• Melhore a eficiência ao criar dados brutos para criadores de conteúdo, como publicidade em vídeo, notícias ou jogos esportivos (por exemplo, encontrar pessoas vestindo uma camisa vermelha em um arquivo de vídeo).
• Crie um resumo de um vídeo longo, como provas judiciais da aparição de uma pessoa específica em um vídeo, usando o ID da mesma pessoa detetada.
• Aprenda e analise tendências ao longo do tempo, por exemplo: como os clientes se movem pelos corredores de um shopping center ou quanto tempo passam nas filas de caixa.

Por exemplo, se um vídeo contiver uma pessoa, a operação de deteção listará as aparências da pessoa juntamente com suas coordenadas nos quadros de vídeo. Você pode usar essa funcionalidade para determinar o caminho da pessoa em um vídeo. Ele também permite determinar se há várias instâncias da mesma pessoa em um vídeo.

O recurso de rastreamento de pessoas observadas recém-adicionado está disponível ao indexar seu arquivo, escolhendo a opção Avançado ->Vídeo avançado ou Predefinição avançada de vídeo + áudio (em Indexação de vídeo + áudio). A indexação padrão não incluirá este novo modelo avançado.

Quando você optar por ver as Informações do seu vídeo no site do Video Indexer , o Rastreamento de Pessoas Observadas aparecerá na página com todas as miniaturas de pessoas detetadas. Você pode escolher uma miniatura de uma pessoa e ver onde a pessoa aparece no player de vídeo.

A seguinte resposta JSON ilustra o que o Video Indexer retorna ao rastrear pessoas observadas:

    {
    ...
    "videos": [
        {
            ...
            "insights": {
                ...
                "observedPeople": [{
                    "id": 1,
                    "thumbnailId": "560f2cfb-90d0-4d6d-93cb-72bd1388e19d",
                    "instances": [
                        {
                            "adjustedStart": "0:00:01.5682333",
                            "adjustedEnd": "0:00:02.7027",
                            "start": "0:00:01.5682333",
                            "end": "0:00:02.7027"
                        }
                    ]
                },
                {
                    "id": 2,
                    "thumbnailId": "9c97ae13-558c-446b-9989-21ac27439da0",
                    "instances": [
                        {
                            "adjustedStart": "0:00:16.7167",
                            "adjustedEnd": "0:00:18.018",
                            "start": "0:00:16.7167",
                            "end": "0:00:18.018"
                        }
                    ]
                },]
            }
            ...
            }
    ]
}

Limitações e pressupostos

Para obter mais informações, consulte Considerações e limitações ao escolher um caso de uso.