Personalizar um modelo de pessoa no Azure AI Video Indexer

Nota

O acesso a recursos de identificação facial, personalização e reconhecimento de celebridades é limitado com base em critérios de elegibilidade e uso, a fim de apoiar nossos princípios de IA responsável. Os recursos de identificação facial, personalização e reconhecimento de celebridades estão disponíveis apenas para clientes e parceiros gerenciados pela Microsoft. Use o formulário de admissão de Reconhecimento Facial para solicitar acesso.

Os rostos que não são reconhecidos pelo Azure AI Video Indexer ainda são detetados, mas não são nomeados. Você pode criar modelos de pessoa personalizados e habilitar o Azure AI Video Indexer para reconhecer rostos que não são reconhecidos por padrão. Você pode construí-los emparelhando o nome de uma pessoa com arquivos de imagem do rosto da pessoa.

Você pode criar modelos de várias pessoas por conta. Por exemplo, se o conteúdo da sua conta se destinar a ser classificado em canais diferentes, convém criar um modelo de pessoa separado para cada canal.

Nota

Cada modelo de pessoa suporta até 1 milhão de pessoas e cada conta tem um limite de modelos de 50 pessoas.

Você pode usar um modelo de pessoa ao carregar/indexar ou reindexar um vídeo fornecendo o ID do modelo de pessoa. Treinar um novo rosto para um vídeo atualiza o modelo personalizado associado.

Se você não precisar do suporte ao modelo de várias pessoas, não atribua um ID de modelo de pessoa ao seu vídeo ao carregar/indexar ou reindexar. O Azure AI Video Indexer usará o modelo de pessoa padrão em sua conta.

Pré-requisitos

• Uma conta do Azure
• Uma conta do Azure AI Video Indexer

Portal Web

Nota

O acesso a recursos de identificação facial, personalização e reconhecimento de celebridades é limitado com base em critérios de elegibilidade e uso, a fim de apoiar nossos princípios de IA responsável. Os recursos de identificação facial, personalização e reconhecimento de celebridades estão disponíveis apenas para clientes e parceiros gerenciados pela Microsoft. Use o formulário de admissão de Reconhecimento Facial para solicitar acesso.

Criar um novo modelo de Pessoa

1. Selecione o botão + Adicionar modelo .
2. Digite o nome do modelo e selecione o botão de verificação .
3. Selecione o botão do menu da lista e escolha + Adicionar pessoa.

Adicionar uma nova pessoa a um modelo de Pessoa

1. Selecione o botão do menu de lista ao lado do modelo de pessoa ao qual você deseja adicionar o rosto.
2. Selecione + Adicionar pessoa no menu.
3. Digite o nome da pessoa e selecione o botão de seleção .
4. Escolha a partir do seu explorador de ficheiros ou arraste e largue as imagens do rosto.

O Azure AI Video Indexer permite adicionar várias pessoas com o mesmo nome em um modelo de pessoa. No entanto, é recomendável que você dê nomes exclusivos para cada pessoa em seu modelo para usabilidade e clareza.

O Azure AI Video Indexer pode detetar ocorrências dessa pessoa nos vídeos futuros que você indexa e nos vídeos atuais que você já indexou, usando o modelo de pessoa ao qual você adicionou esse novo rosto. O reconhecimento da pessoa em seus vídeos atuais pode levar algum tempo para entrar em vigor, pois este é um processo em lote.

Renomear um modelo de Pessoa

Você pode renomear qualquer modelo de pessoa em sua conta, incluindo o modelo de pessoa padrão. Mesmo que você renomeie seu modelo de pessoa padrão, ele ainda serve como o modelo de pessoa padrão em sua conta.

1. Selecione o botão de menu ao lado do modelo de pessoa que você deseja renomear.
2. Selecione Renomear no menu.
3. Selecione o nome atual do modelo.
4. Digite o novo nome e selecione o botão de verificação .

Excluir um modelo de Pessoa

Você pode excluir qualquer modelo de pessoa, exceto o modelo de pessoa padrão.

1. Selecione Excluir no menu. Você é avisado sobre a permanência da ação.
2. Se tiver certeza, selecione Excluir novamente.

Nota

Você poderá editar os nomes dos rostos nos vídeos associados somente depois de reindexá-los usando o modelo de outra pessoa. Se você reindexar sem especificar um modelo de pessoa, o modelo padrão será usado.

Gestão central de modelos Person na sua conta

1. Selecione o botão de personalização do modelo de conteúdo à esquerda da página.
2. Selecione a guia Pessoas .

O modelo de Pessoa Padrão contém quaisquer rostos que você possa ter editado ou alterado nas informações de seus vídeos para os quais você não especificou um modelo de pessoa personalizado durante a indexação. Se você criou outros modelos de pessoa, eles também estão listados nesta página.

Renomear uma pessoa

1. Selecione o botão do menu da lista e escolha Renomear no menu da lista.
2. Selecione o nome atual da pessoa e digite o novo nome.
3. Selecione o botão de verificação .

Excluir uma pessoa

1. Selecione o botão do menu da lista e escolha Excluir no menu da lista. Um pop-up informa que essa ação excluirá a pessoa e que essa ação não pode ser desfeita.
2. Se tiver certeza, selecione Excluir novamente.

Verificar se uma pessoa já existe

Você pode usar a pesquisa para verificar se uma pessoa já existe no modelo.

Gerir uma pessoa

Se você selecionar Gerenciar, verá a janela de detalhes da Pessoa com todos os rostos a partir dos quais esse modelo de pessoa está sendo treinado. Esses rostos vêm de ocorrências dessa pessoa em vídeos que usam esse modelo de pessoa ou de imagens que você carregou manualmente.

Adicionar um rosto

Você pode adicionar mais rostos à pessoa selecionando Adicionar imagens.

Excluir um rosto

Selecione a imagem que deseja excluir e clique em Excluir.

Renomear e excluir uma pessoa

Você pode usar o painel de gerenciamento para renomear a pessoa e excluí-la do modelo de pessoa.

Usar um modelo de pessoa para indexar um vídeo

Você pode usar um modelo de pessoa para indexar seu novo vídeo atribuindo o modelo de pessoa durante o upload do vídeo.

Para usar seu modelo de pessoa em um novo vídeo, siga estas etapas:

1. Selecione o botão Carregar.
2. Arraste e solte seu arquivo de vídeo ou procure seu arquivo.
3. Selecione a seta Opções avançadas .
4. Selecione a lista suspensa e selecione o modelo de pessoa que você criou.
5. Selecione a opção Carregar na parte inferior da página.

Se você não especificar um modelo de Pessoa durante o carregamento, o Azure AI Video Indexer indexará o vídeo usando o modelo de Pessoa Padrão em sua conta.

Usar um modelo de pessoa para reindexar um vídeo

Para usar um modelo de pessoa para reindexar um vídeo em sua coleção, vá para sua biblioteca na home page do Azure AI Video Indexer e passe o mouse sobre o nome do vídeo que você deseja reindexar.

Você vê opções para editar, excluir e reindexar seu vídeo.

1. Selecione a opção para reindexar seu vídeo.
2. Selecione a lista suspensa de modelo de pessoa e selecione o modelo de pessoa que você deseja usar.
3. Selecione o botão Reindexar .

Todas as novas edições feitas nos rostos detetadas e reconhecidas no vídeo que você acabou de reindexar são salvas no modelo Pessoa que você usou para reindexar o vídeo.

Gerir pessoas nos seus vídeos

Você pode gerenciar os rostos que são detetados e as pessoas que são reconhecidas nos vídeos que você indexa editando e excluindo rostos.

A exclusão de um rosto remove um rosto específico das informações do vídeo.

A edição de um rosto renomeia um rosto que é detetado e possivelmente reconhecido no seu vídeo. Quando edita um rosto no vídeo, esse nome é guardado como uma entrada de pessoa no modelo de pessoa que foi atribuído ao vídeo durante o carregamento e a indexação.

Se você não atribuir um modelo de pessoa ao vídeo durante o upload, sua edição será salva no Modelo de pessoa padrão da sua conta.

Editar um rosto

Nota

Se um modelo de Pessoa tiver duas ou mais pessoas diferentes com o mesmo nome, você não poderá marcar esse nome nos vídeos que usam esse modelo de pessoa. Você só poderá fazer alterações nas pessoas que compartilham esse nome na guia Pessoas da página de personalização do modelo de conteúdo no Azure AI Video Indexer. Por esse motivo, é recomendável que você dê nomes exclusivos para cada pessoa no seu modelo de Pessoa.

1. Selecione o vídeo com o qual deseja trabalhar na sua biblioteca.
2. Selecione a guia Informações e selecione o ícone de lápis .
3. Selecione qualquer um dos rostos detetados e altere seus nomes de "#X desconhecido" (ou o nome que foi atribuído anteriormente ao rosto).
4. Digite o novo nome e selecione o ícone de verificação . Esta ação salva o novo nome e reconhece e nomeia todas as ocorrências desse rosto em seus outros vídeos atuais e nos vídeos futuros que você carregar.

O reconhecimento do rosto em seus outros vídeos atuais pode levar algum tempo para entrar em vigor, pois este é um processo em lote.

Se você nomear um rosto com o nome de uma pessoa existente no modelo de pessoa que o vídeo está usando, as imagens de rosto detetadas desse vídeo dessa pessoa se fundirão com o que já existe no modelo. Se você nomear um rosto com um novo nome, uma nova entrada de pessoa será criada no modelo de pessoa que o vídeo está usando.

Excluir um rosto

1. Selecione o vídeo com o qual deseja trabalhar na sua biblioteca.
2. Selecione o painel Informações e selecione o ícone de lápis.
3. Selecione a opção Excluir abaixo do nome do rosto. Esta ação remove o rosto detetado do vídeo. O rosto da pessoa ainda é detetado nos outros vídeos em que aparece, mas você pode excluir o rosto desses vídeos também depois que eles forem indexados.

Se a pessoa foi nomeada, ela continua a existir no modelo de pessoa que foi usado para indexar o vídeo do qual você excluiu o rosto, a menos que você exclua especificamente a pessoa do modelo de pessoa.

Obtenha uma indicação da qualidade do seu modelo de pessoas

Você pode obter uma indicação sobre a qualidade do seu modelo personalizado de pessoas (ruim, justo, bom). A qualidade é determinada pelo número de imagens usadas para rotular com quanto mais imagens você usar para rotular uma pessoa, maior a probabilidade de identificar a pessoa corretamente. Por exemplo, a probabilidade de identificar uma pessoa com 24 imagens rotuladas é maior do que a probabilidade de identificar uma pessoa com 2 imagens rotuladas. Você pode ver o número de imagens usadas para rotular cada pessoa em sua página de modelo de pessoas personalizada.

Escolha o modelo de pessoas personalizado como padrão

Você pode escolher um modelo de pessoas personalizado como padrão no nível de usuário da conta VI, para que você não precise continuar selecionando o nome do modelo para cada upload de vídeo. Isso economiza tempo e esforço ao carregar vídeos que precisam ser analisados pelo seu modelo de pessoas personalizado.

Agrupe pessoas desconhecidas no vídeo

Você pode ver as pessoas desconhecidas em seus vídeos agrupadas por sua semelhança de aparência. Ele ajuda você a rotular as pessoas desconhecidas de forma fácil e rápida, e melhora a precisão do seu modelo de pessoas personalizado. Por exemplo, pode ajudá-lo a rotular uma celebridade local ou um político local. Você pode ver o agrupamento de pessoas desconhecidas em sua página de personalização. Escolha pessoas e, em seguida, navegue até a guia pessoas desconhecidas.

Resultados da pesquisa com pontuação máxima de confiança para o nome da pessoa identificada

Você pode pesquisar o nome de uma pessoa identificada e obter o carimbo de data/hora para quando a pessoa aparece no vídeo, juntamente com a pontuação máxima de confiança. Ele ajuda você a decidir quais vídeos são os mais relevantes para explorar. Por exemplo, você pode pesquisar por "John Smith" e obter os vídeos em que John Smith é reconhecido pelo seu modelo de pessoas personalizado e a pontuação de confiança para cada vídeo.

API

Criar um novo modelo de pessoa

Use a solicitação Criar modelo de pessoa.

Resposta de exemplo

{
    "id": "227654b4-912c-4b92-ba4f-641d488e3720",
    "name": "Example Person Model"
}

Em seguida, use o valor id para o parâmetro personModelId ao carregar um vídeo para indexar ou reindexar um vídeo.

Excluir um modelo de pessoa

Para excluir um modelo de pessoa personalizado da conta especificada, use a solicitação Excluir Modelo de Pessoa.

Depois que o modelo de pessoa for excluído com êxito, o índice dos vídeos atuais que estavam usando o modelo excluído permanecerá inalterado até que você os reindexe. Após a reindexação, os rostos que foram nomeados no modelo excluído não serão reconhecidos pelo Azure AI Video Indexer em seus vídeos atuais que foram indexados usando esse modelo, mas os rostos ainda são detetados. Os vídeos indexados que usam o modelo excluído usam o modelo de pessoa padrão da sua conta. Os rostos nomeados do modelo excluído no modelo padrão da sua conta continuam a ser reconhecidos nos vídeos.

Resposta de exemplo

Não há resposta quando o modelo de pessoa é excluído com êxito.

Obtenha modelos para todas as pessoas

Para obter todos os modelos de Pessoa na conta especificada, use a solicitação Get-Person-Models .

A resposta fornece uma lista de todos os modelos de Pessoa na sua conta e cada um dos seus nomes e IDs.

[
    {
        "id": "59f9c326-b141-4515-abe7-7d822518571f",
        "name": "Default"
    }, 
    {
        "id": "9ef2632d-310a-4510-92e1-cc70ae0230d4",
        "name": "Test"
    }
]

Você pode escolher qual modelo deseja usar para um vídeo usando o id valor do modelo Person para o personModelId parâmetro ao carregar um vídeo para indexar ou reindexar um vídeo.

Atualizar um rosto

Use a solicitação Atualizar rosto de vídeo .

Esta solicitação permite que você atualize um rosto em seu vídeo com um nome usando o ID do vídeo e ID do rosto. Em seguida, esta ação atualiza o modelo de pessoa ao qual o vídeo foi associado ao carregar/indexar ou reindexar. Se nenhum modelo de pessoa tiver sido atribuído, ele atualizará o modelo de pessoa padrão da conta.

Em seguida, o sistema reconhece as ocorrências do mesmo rosto em seus outros vídeos atuais que compartilham o mesmo modelo de pessoa. O reconhecimento do rosto em seus outros vídeos atuais pode levar algum tempo para entrar em vigor, pois este é um processo em lote.

Atualizar nomes de celebridades

Você pode atualizar um rosto que o Azure AI Video Indexer reconheceu como uma celebridade com um novo nome. O novo nome que você der terá precedência sobre o reconhecimento de celebridade embutido.

Gerenciando modelos de várias pessoas

O Azure AI Video Indexer dá suporte a vários modelos de pessoa por conta por meio da API do Azure AI Video Indexer.

Se sua conta fornecer casos de uso diferentes, convém criar modelos de várias pessoas por conta. Por exemplo, se o seu conteúdo estiver relacionado a esportes, você pode criar um modelo de pessoa separado para cada esporte (futebol, basquete, futebol e assim por diante).

Cada conta tem um limite de modelos de 50 pessoas. Se você não precisar do suporte ao modelo de várias pessoas, não atribua um ID de modelo de pessoa ao seu vídeo ao carregar/indexar ou reindexar. Nesse caso, o Azure AI Video Indexer usa o modelo de pessoa personalizado padrão em sua conta.

Otimize a capacidade do seu modelo de reconhecer uma pessoa

Para otimizar a capacidade do seu modelo de reconhecer a pessoa, carregue o maior número possível de imagens diferentes e de diferentes ângulos. Para obter os melhores resultados, use imagens de alta resolução.