Personalizar um modelo de pessoa no Azure AI Video Indexer

Importante

O prazo para migrar o conteúdo do Azure Video Indexer devido à desativação dos Serviços de Mídia do Azure já passou. Consulte o guia de desativação para obter mais informações.

Observação

O acesso a recursos de identificação facial, personalização e reconhecimento de celebridades é limitado com base em critérios de qualificação e uso para dar suporte aos nossos princípios de IA Responsável. Os recursos de identificação facial, personalização e reconhecimento de celebridades só estão disponíveis para clientes e parceiros gerenciados da Microsoft. Use o Formulário de admissão de reconhecimento facial para solicitar acesso.

Os rostos que não são reconhecidos pelo Azure AI Video Indexer ainda são detectados, mas não são nomeados. Você pode criar modelos de pessoa personalizados e habilitar o Azure AI Video Indexer para reconhecer rostos que não são reconhecidos por padrão. Você pode construí-los emparelhando o nome de uma pessoa com arquivos de imagem do rosto da pessoa.

Você pode criar vários modelos de pessoa por conta. Por exemplo, se o conteúdo da sua conta for classificado em canais diferentes, convém criar um modelo de pessoa separado para cada canal.

Observação

Cada modelo de pessoa suporta até 1 milhão de pessoas e cada conta tem um limite de 50 modelos de pessoa.

Você pode usar um modelo de pessoa ao carregar/indexar ou reindexar um vídeo fornecendo a ID do modelo da pessoa. O treinamento de um novo rosto para um vídeo atualiza o modelo personalizado associado.

Se você não precisar do suporte a modelos de várias pessoas, não atribua um ID de modelo de pessoa ao seu vídeo ao carregar/indexar ou reindexar. O Azure AI Video Indexer usará o modelo de pessoa padrão em sua conta.

Pré-requisitos

• Uma conta do Azure
• Uma conta do Azure AI Video Indexer

Portal da Web

Observação

O acesso a recursos de identificação facial, personalização e reconhecimento de celebridades é limitado com base em critérios de qualificação e uso para dar suporte aos nossos princípios de IA Responsável. Os recursos de identificação facial, personalização e reconhecimento de celebridades só estão disponíveis para clientes e parceiros gerenciados da Microsoft. Use o Formulário de admissão de reconhecimento facial para solicitar acesso.

Criar um novo modelo de Pessoa

1. Selecione o botão + Adicionar modelo .
2. Insira o nome do modelo e selecione o botão de verificação .
3. Selecione o botão de menu de lista e escolha + Adicionar pessoa.

Adicionar uma nova pessoa a um modelo de Pessoa

1. Selecione o botão de menu de lista ao lado do modelo de pessoa ao qual você deseja adicionar o rosto.
2. Selecione + Adicionar pessoa pelo menu.
3. Digite o nome da pessoa e selecione o botão de verificação .
4. Escolha no seu explorador de arquivos ou arraste e solte as imagens do rosto.

O Azure AI Video Indexer permite que você adicione várias pessoas com o mesmo nome em um modelo de pessoa. No entanto, é recomendável que você forneça nomes exclusivos para cada pessoa no modelo para usabilidade e clareza.

O Azure AI Video Indexer pode detectar ocorrências dessa pessoa nos vídeos futuros que você indexar e nos vídeos atuais que você já indexou, usando o modelo de pessoa ao qual você adicionou esse novo rosto. O reconhecimento de uma pessoa nos vídeos atuais pode demorar um tempo até entrar em vigor, pois esse é um processo em lote.

Renomear um modelo de Pessoa

Você pode renomear qualquer modelo de pessoa em sua conta, incluindo o modelo de pessoa padrão. Mesmo que você renomeie seu modelo de pessoa padrão, ele ainda servirá como o modelo de pessoa padrão em sua conta.

1. Selecione o botão de menu ao lado do modelo de pessoa que você deseja renomear.
2. Selecione Renomear no menu.
3. Selecione o nome atual do modelo.
4. Digite o novo nome e selecione o botão de verificação .

Excluir um modelo de Pessoa

Você pode excluir qualquer modelo de pessoa, exceto o modelo de pessoa padrão.

1. Selecione Excluir no menu. Você é avisado sobre a permanência da ação.
2. Se tiver certeza, selecione Excluir novamente.

Observação

Você poderá editar os nomes dos rostos nos vídeos associados somente depois de reindexá-los usando outro modelo de pessoa. Se você reindexar sem especificar um modelo de pessoa, o modelo padrão será usado.

Gerenciamento central de modelos de Pessoa na sua conta

1. Selecione o botão de personalização do modelo de conteúdo à esquerda da página.
2. Selecione a guia Pessoa.

O modelo de Pessoa Padrão contém todos os rostos que você possa ter editado ou alterado nos insights de seus vídeos para os quais você não especificou um modelo de pessoa personalizado durante a indexação. Se você criou modelos de outras pessoas, eles também serão listados nesta página.

Renomear uma pessoa

1. Selecione o botão de menu de lista e escolha Renomear no menu de lista.
2. Selecione o nome atual da pessoa e digite o novo nome.
3. Selecione o botão de verificação .

Excluir uma pessoa

1. Selecione o botão de menu de lista e escolha Excluir no menu de lista. Um item pop-up informará que essa ação exclui a pessoa e que essa ação não pode ser desfeita.
2. Se tiver certeza, selecione Excluir novamente.

Verificar se uma pessoa já existe

Você pode usar a pesquisa para verificar se uma pessoa já existe no modelo.

Gerenciar uma pessoa

Se você selecionar Gerenciar, verá a janela de detalhes da pessoa com todos os rostos dos quais esse modelo de pessoa está sendo treinado. Esses rostos vêm de ocorrências dessa pessoa em vídeos que usam esse modelo de pessoa ou de imagens que você carregou manualmente.

Adicionar um rosto

Você pode adicionar mais rostos à pessoa selecionando Adicionar imagens.

Excluir um rosto

Selecione a imagem que deseja excluir e clique em Excluir.

Renomear e excluir uma pessoa

Você pode usar o painel de gerenciamento para renomear a pessoa e excluí-la do modelo de pessoa.

Usar um modelo de pessoa para indexar um vídeo

Você pode usar um modelo de pessoa para indexar seu novo vídeo atribuindo o modelo de pessoa durante o upload do vídeo.

Para usar seu modelo de pessoa em um novo vídeo, execute as seguintes etapas:

1. Selecione o botão Carregar.
2. Arraste e solte seu arquivo de vídeo ou procure seu arquivo.
3. Selecione a seta Opções avançadas.
4. Selecione a lista suspensa e selecione o modelo de pessoa que você criou.
5. Selecione a opção Carregar na parte inferior da página.

Se você não especificar um modelo de Pessoa durante o upload, o Azure AI Video Indexer indexará o vídeo usando o modelo de Pessoa Padrão em sua conta.

Usar um modelo de pessoa para reindexar um vídeo

Para usar um modelo de pessoa para reindexar um vídeo em sua coleção, acesse sua biblioteca na home page do Azure AI Video Indexer e passe o mouse sobre o nome do vídeo que você deseja reindexar.

Você verá opções para editar, excluir e reindexar o vídeo.

1. Selecione a opção de reindexar o vídeo.
2. Selecione a lista suspensa do modelo de pessoa e selecione o modelo de pessoa que você deseja usar.
3. Selecione o botão Reindexar .

Todas as novas edições feitas nos rostos detectados e reconhecidos no vídeo que você acabou de reindexar são salvas no modelo Pessoa que você usou para reindexar o vídeo.

Gerenciar pessoas nos vídeos

Você pode gerenciar os rostos detectados e as pessoas que são reconhecidas nos vídeos indexados ao editar e excluir rostos.

A exclusão de um rosto remove um rosto específico dos insights do vídeo.

Editar um rosto renomeia um rosto que é detectado e possivelmente reconhecido no vídeo. Quando você edita um rosto em seu vídeo, esse nome é salvo como uma entrada de pessoa no modelo de pessoa que foi atribuído ao vídeo durante o upload e a indexação.

Se você não atribuir um modelo de pessoa ao vídeo durante o envio, sua edição será salva no modelo de pessoa padrão da sua conta.

Editar um rosto

Observação

Se um modelo de pessoa tiver duas ou mais pessoas diferentes com o mesmo nome, você não poderá marcar esse nome nos vídeos que usam esse modelo de pessoa. Você só poderá fazer alterações nas pessoas que compartilham esse nome na guia Pessoas da página de personalização do modelo de conteúdo no Azure AI Video Indexer. Assim, é recomendável que você forneça nomes exclusivos para cada pessoa no modelo de Pessoa.

1. Selecione o vídeo com o qual deseja trabalhar na sua biblioteca.
2. Selecione a guia Insights e selecione o ícone de lápis .
3. Selecione um dos rostos detectados e altere seus nomes de "Desconhecido nº X" (ou o nome atribuído anteriormente ao rosto).
4. Digite o novo nome e selecione o ícone de verificação . Essa ação salvará o novo nome e reconhecerá e nomeará todas as ocorrências desse rosto nos outros vídeos atuais e nos vídeos futuros que você carregar.

O reconhecimento do rosto nos outros vídeos atuais pode levar algum tempo para entrar em vigor, pois esse é um processo em lote.

Se você nomear um rosto com o nome de uma pessoa existente no modelo de pessoa que o vídeo está usando, as imagens de rosto detectadas desse vídeo dessa pessoa se fundirão com o que já existe no modelo. Se você nomear um rosto com um novo nome, uma nova entrada de pessoa será criada no modelo de pessoa que o vídeo está usando.

Excluir um rosto

1. Selecione o vídeo com o qual deseja trabalhar na sua biblioteca.
2. Selecione o painel Insights e selecione o ícone de lápis.
3. Selecione a opção Excluir abaixo do nome do rosto. Essa ação removerá o rosto detectado do vídeo. O rosto da pessoa ainda é detectado nos outros vídeos em que ele aparece, mas você também pode excluir o rosto desses vídeos depois que eles forem indexados.

Se a pessoa foi nomeada, ela continuará a existir no modelo de pessoa que foi usado para indexar o vídeo do qual você excluiu o rosto, a menos que você exclua especificamente a pessoa do modelo de pessoa.

Obtenha uma indicação da qualidade do seu modelo de pessoal

Você pode obter uma indicação sobre a qualidade do seu modelo de pessoas personalizado (ruim, regular, bom). A qualidade é determinada pelo número de imagens usadas para rotular com o Por exemplo, a probabilidade de identificar uma pessoa com 24 imagens rotuladas é maior do que a probabilidade de identificar uma pessoa com 2 imagens rotuladas. Você pode ver o número de imagens usadas para rotular cada pessoa em sua página de modelo de pessoas personalizada.

Escolha o modelo de pessoas personalizado como padrão

Você pode escolher um modelo de pessoas personalizado como padrão no nível de usuário da conta VI, para que não precise ficar selecionando o nome do modelo para cada upload de vídeo. Isso economiza tempo e esforço ao enviar vídeos que precisam ser analisados pelo seu modelo de pessoas personalizado.

Agrupar pessoas desconhecidas no vídeo

Você pode ver as pessoas desconhecidas em seus vídeos agrupadas por semelhança de aparência. Ele ajuda você a rotular as pessoas desconhecidas com facilidade e rapidez e melhora a precisão do seu modelo de pessoas personalizado. Por exemplo, pode ajudá-lo a rotular uma celebridade local ou um político local. Você pode ver o agrupamento de pessoas desconhecidas em sua página de personalização. Escolha pessoas e navegue até a guia de pessoas desconhecidas .

Resultados da pesquisa com pontuação máxima de confiança para o nome da pessoa identificada

Você pode pesquisar o nome de uma pessoa identificada e obter o carimbo de data/hora de quando a pessoa aparece no vídeo, juntamente com a pontuação máxima de confiança. Ele ajuda você a decidir quais vídeos são os mais relevantes para explorar. Por exemplo, você pode pesquisar por "John Smith" e obter os vídeos em que John Smith é reconhecido por seu modelo de pessoas personalizado e pela pontuação de confiança de cada vídeo.

API

Criar um novo modelo de pessoa

Use a solicitação Criar Modelo de Pessoa.

Exemplo de resposta

{
    "id": "227654b4-912c-4b92-ba4f-641d488e3720",
    "name": "Example Person Model"
}

Em seguida, você usa o valor de ID para o parâmetro personModelId ao Carregar um vídeo no índice ou reindexar um vídeo.

Excluir um modelo de pessoa

Para excluir um modelo de pessoa personalizado da conta especificada, use a solicitação Excluir Modelo de Pessoa.

Depois que o modelo de pessoa for excluído com sucesso, o índice de seus vídeos atuais que estavam usando o modelo excluído permanecerá inalterado até que você os reindexe. Após a reindexação, os rostos que foram nomeados no modelo excluído não serão reconhecidos pelo Azure AI Video Indexer em seus vídeos atuais que foram indexados usando esse modelo, mas os rostos ainda serão detectados. Os vídeos indexados que usam o modelo excluído usam o modelo de pessoa padrão da sua conta. Os rostos nomeados do modelo excluído no modelo padrão da sua conta continuam a ser reconhecidos nos vídeos.

Exemplo de resposta

Não há resposta quando o modelo de pessoa é excluído com êxito.

Obtenha todos os modelos de pessoas

Para obter todos os modelos de Pessoa na conta especificada, use a solicitação Get-Person-Models .

A resposta fornece uma lista de todos os modelos de Pessoa em sua conta e cada um de seus nomes e IDs.

[
    {
        "id": "59f9c326-b141-4515-abe7-7d822518571f",
        "name": "Default"
    }, 
    {
        "id": "9ef2632d-310a-4510-92e1-cc70ae0230d4",
        "name": "Test"
    }
]

Você pode escolher qual modelo deseja usar para obter um vídeo usando o valor de id do modelo de Pessoa para o parâmetro personModelId ao carregar um vídeo no índice ou reindexar um vídeo.

Atualizar um rosto

Use a solicitação Atualizar rosto de vídeo.

Essa solicitação permite que você atualize um rosto em seu vídeo com um nome usando o ID do vídeo e o ID do rosto. Essa ação atualiza o modelo de pessoa ao qual o vídeo foi associado ao carregar/indexar ou reindexar. Se nenhum modelo de pessoa tiver sido atribuído, ele atualizará o modelo de pessoa padrão da conta.

O sistema então reconhece as ocorrências do mesmo rosto em seus outros vídeos atuais que compartilham o mesmo modelo de pessoa. O reconhecimento do rosto nos outros vídeos atuais pode levar algum tempo para entrar em vigor, pois esse é um processo em lote.

Atualizar nomes de celebridades

Você pode atualizar um rosto que o Azure AI Video Indexer reconheceu como uma celebridade com um novo nome. O novo nome que você fornecer terá precedência sobre o reconhecimento de celebridades interno.

Gerenciando modelos de várias pessoas

O Azure AI Video Indexer dá suporte a vários modelos de pessoa por conta por meio da API do Azure AI Video Indexer.

Se sua conta fornecer casos de uso diferentes, talvez você queira criar vários modelos de pessoa por conta. Por exemplo, se o conteúdo estiver relacionado a esportes, você poderá criar um modelo de pessoa separado para cada esporte (futebol, basquete, futebol e assim por diante).

Cada conta tem um limite de 50 modelos de pessoas. Se você não precisar do suporte a vários modelos de pessoas, não atribua um ID de modelo de pessoa ao seu vídeo ao carregar/indexar ou reindexar. Nesse caso, o Azure AI Video Indexer usa o modelo de pessoa personalizada padrão em sua conta.

Otimizar a capacidade do modelo de reconhecer uma pessoa

Para otimizar a capacidade do modelo de reconhecer a pessoa, carregue o maior número possível de imagens diferentes e de diferentes ângulos. Para obter resultados ideais, use imagens de alta resolução.