Personalizar um modelo de pessoa no Azure AI Video Indexer

Nota

O acesso a recursos de identificação facial, personalização e reconhecimento de celebridades é limitado com base em critérios de elegibilidade e uso, a fim de apoiar nossos princípios de IA responsável. Os recursos de identificação facial, personalização e reconhecimento de celebridades estão disponíveis apenas para clientes e parceiros gerenciados pela Microsoft. Use o formulário de admissão de Reconhecimento Facial para solicitar acesso.

Os rostos que o Azure AI Video Indexer não reconhece ainda são detetados, mas não são nomeados. Você pode criar modelos de pessoa personalizados e habilitar o Azure AI Video Indexer para reconhecer rostos que não são reconhecidos por padrão. Você pode construí-los emparelhando o nome de uma pessoa com arquivos de imagem do rosto da pessoa.

Você pode criar vários modelos de pessoas por conta. Por exemplo, se o conteúdo da sua conta se destinar a ser classificado em canais diferentes, convém criar um modelo de pessoa separado para cada canal.

Nota

Cada modelo de pessoa suporta até 1 milhão de pessoas e cada conta tem um limite de modelos de 50 pessoas.

Você pode usar um modelo de pessoa ao carregar/indexar ou reindexar um vídeo fornecendo o ID do modelo de pessoa. Treinar um novo rosto num vídeo atualiza o modelo associado personalizado.

Se você não precisar do suporte ao modelo de várias pessoas, não atribua um ID de modelo de pessoa ao seu vídeo ao carregar/indexar ou reindexar. O Azure AI Video Indexer usa o modelo de pessoa padrão em sua conta.

Pré-requisitos

• Uma conta do Azure
• Uma conta do Azure AI Video Indexer

Portal Web

Criar um novo modelo de Pessoa

1. Selecione o botão + Adicionar modelo .
2. Digite o nome do modelo e selecione o botão de verificação .
3. Selecione o botão do menu da lista e escolha + Adicionar pessoa.

Adicionar uma nova pessoa a um modelo de Pessoa

1. Selecione o botão do menu de lista ao lado do modelo de pessoa ao qual você deseja adicionar o rosto.
2. Selecione + Adicionar pessoa no menu.
3. Digite o nome da pessoa e selecione o botão de seleção .
4. Escolha a partir do seu explorador de ficheiros ou arraste e solte as imagens de rosto.

O Azure AI Video Indexer permite adicionar várias pessoas com o mesmo nome em um modelo de pessoa. No entanto, recomendamos que você dê nomes exclusivos a cada pessoa em seu modelo para usabilidade e clareza.

O Azure AI Video Indexer pode detetar ocorrências da pessoa nos vídeos futuros que você indexa e nos vídeos atuais que você já indexou, usando o modelo de pessoa ao qual você adicionou o novo rosto. O reconhecimento da pessoa nos seus vídeos atuais pode levar algum tempo a produzir efeito, uma vez que é um processo em lote.

Renomear um modelo de Pessoa

Você pode renomear qualquer modelo de pessoa em sua conta, incluindo o modelo de pessoa padrão. Mesmo que você renomeie seu modelo de pessoa padrão, ele ainda serve como o modelo de pessoa padrão em sua conta.

1. Selecione o botão de menu ao lado do modelo de pessoa que você deseja renomear.
2. Selecione Renomear no menu.
3. Selecione o nome atual do modelo.
4. Digite o novo nome e selecione o botão de verificação .

Excluir um modelo de Pessoa

Você pode excluir qualquer modelo de pessoa, exceto o modelo de pessoa padrão.

1. Selecione Eliminar a partir do menu. Você é alertado sobre o carácter permanente da ação.
2. Se tiver certeza, selecione Excluir novamente.

Nota

Você pode editar os nomes dos rostos nos vídeos associados somente depois de reindexá-los usando o modelo de outra pessoa. Se você reindexar sem especificar um modelo de pessoa, o modelo padrão será usado.

Gerenciamento centralizado de modelos de pessoa na sua conta

1. Selecione o botão de personalização do modelo de conteúdo à esquerda da página.
2. Selecione a guia Pessoas.

O modelo de Pessoa Padrão contém todos os rostos que você editou ou alterou anteriormente nas informações de seus vídeos para os quais você não especificou um modelo de pessoa personalizado durante a indexação. Se você criou outros modelos de pessoa, eles também estão listados nesta página.

Renomear uma pessoa

1. Selecione o botão do menu da lista e escolha Renomear no menu da lista.
2. Selecione o nome atual da pessoa e digite o novo nome.
3. Selecione o botão de verificação .

Excluir uma pessoa

1. Selecione o botão do menu da lista e escolha Excluir no menu da lista. Um pop-up informa que essa ação exclui a pessoa e que essa ação não pode ser desfeita.
2. Se tiver certeza, selecione Excluir novamente.

Verificar se uma pessoa já existe

Você pode usar a pesquisa para verificar se uma pessoa já existe no modelo.

Gerir uma pessoa

Se você selecionar Gerenciar, verá a janela de detalhes da Pessoa com todos os rostos a partir dos quais esse modelo de pessoa está sendo treinado. Esses rostos vêm de ocorrências dessa pessoa em vídeos que usam esse modelo de pessoa ou de imagens que você carregou manualmente.

Adicionar um rosto

Você pode adicionar mais rostos à pessoa selecionando Adicionar imagens.

Excluir um rosto

Selecione a imagem que deseja excluir e selecione Excluir.

Renomear e excluir uma pessoa

Renomeie a pessoa e exclua a pessoa do modelo de pessoa na área Gerenciar .

Usar um modelo de pessoa para indexar um vídeo

Você pode usar um modelo de pessoa para indexar seu novo vídeo atribuindo o modelo de pessoa durante o upload do vídeo.

Para usar seu modelo de pessoa em um novo vídeo, siga estas etapas:

1. Selecione o botão Carregar.
2. Arraste e solte seu arquivo de vídeo ou procure seu arquivo.
3. Selecione a seta Opções avançadas .
4. Selecione a lista suspensa e selecione o modelo de pessoa que você criou.
5. Selecione a opção Carregar na parte inferior da página.

Se você não especificar um modelo de Pessoa durante o carregamento, o Azure AI Video Indexer indexará o vídeo usando o modelo de Pessoa Padrão em sua conta.

Usar um modelo de pessoa para reindexar um vídeo

Para usar um modelo de pessoa para reindexar um vídeo em sua coleção, vá para sua biblioteca na home page do Azure AI Video Indexer e passe o mouse sobre o nome do vídeo que você deseja reindexar.

Você vê opções para editar, excluir e reindexar seu vídeo.

1. Selecione a opção reindexar seu vídeo.
2. Selecione a lista suspensa de modelo de pessoa e selecione o modelo de pessoa que você deseja usar.
3. Selecione Reindexar.

Todas as novas edições feitas nos rostos detetadas e reconhecidas no vídeo são salvas no modelo Pessoa que você usou para reindexar o vídeo.

Gerir pessoas nos seus vídeos

Você gerencia todos os rostos detetados e pessoas reconhecidas editando-os e excluindo-os em seus vídeos indexados.

A exclusão de um rosto remove um rosto específico das análises do vídeo.

A edição de um rosto renomeia o rosto detetado e possivelmente reconhecido no seu vídeo. Quando edita um rosto no vídeo, esse nome é guardado como uma entrada de pessoa no modelo de pessoa que foi atribuído ao vídeo durante o carregamento e a indexação.

Se você não atribuir um modelo de pessoa ao vídeo durante o upload, sua edição será salva no Modelo de pessoa padrão da sua conta.

Editar um rosto

Nota

Se um modelo de Pessoa tiver duas ou mais pessoas diferentes com o mesmo nome, não será possível marcar esse nome nos vídeos que usam esse modelo de pessoa. Você só pode fazer alterações em pessoas que compartilham esse nome na guia Pessoas da página de personalização do modelo de conteúdo no Azure AI Video Indexer. Por esse motivo, recomendamos que você dê nomes exclusivos a cada pessoa no seu modelo de Pessoa.

1. Selecione o vídeo com o qual deseja trabalhar na sua biblioteca.
2. Selecione o separador Insights e selecione o ícone do lápis.
3. Selecione qualquer um dos rostos detetados e altere seus nomes de #X desconhecido (ou o nome que foi atribuído anteriormente ao rosto).
4. Digite o novo nome e selecione o símbolo de verificação . A ação salva o novo nome. Ele reconhece e nomeia todas as ocorrências do rosto nos seus vídeos atuais restantes e nos vídeos futuros que carregares.

O reconhecimento do rosto em seus outros vídeos atuais pode levar algum tempo para entrar em vigor porque é um processo em lote.

Se você atribuir um nome a um rosto que corresponda a uma pessoa existente no modelo de pessoa do vídeo, as imagens de rosto detetadas do vídeo serão combinadas com as imagens existentes no modelo. Se você nomear um rosto com um novo nome, uma nova entrada de pessoa será criada no modelo de pessoa que o vídeo está usando.

Excluir um rosto

1. Selecione o vídeo com o qual deseja trabalhar na sua biblioteca.
2. Selecione o painel Informações e selecione o símbolo de lápis.
3. Selecione a opção Excluir abaixo do nome do rosto. Esta ação remove o rosto detetado do vídeo. O rosto da pessoa ainda é detetado nos outros vídeos em que aparece. Você também pode excluir o rosto desses vídeos depois que eles forem indexados.

Se a pessoa foi nomeada, ela continua a existir no modelo de pessoa que foi usado para indexar o vídeo do qual você excluiu o rosto, a menos que você exclua especificamente a pessoa do modelo de pessoa.

Obtenha uma indicação da qualidade do seu modelo de pessoas

Pode obter uma indicação sobre a qualidade do seu modelo personalizado de utilizadores (ruim, razoável, bom). A qualidade é determinada pelo número de imagens usadas para rotular com quanto mais imagens você usar para rotular uma pessoa, maior a probabilidade de identificar a pessoa corretamente. Por exemplo, a probabilidade de identificar uma pessoa com 24 imagens rotuladas é maior do que a probabilidade de identificar uma pessoa com duas imagens rotuladas. Você pode ver o número de imagens usadas para rotular cada pessoa em sua página de modelo de pessoas personalizada.

Escolha o modelo de pessoas personalizado como padrão

Você pode escolher um modelo de pessoas personalizado como padrão no nível de usuário da conta VI, para que você não precise continuar selecionando o nome do modelo para cada upload de vídeo. Poupa-lhe tempo e esforço quando carrega vídeos que precisam de ser analisados pelo seu modelo de pessoas personalizado.

Agrupe pessoas desconhecidas no vídeo

Você pode ver as pessoas desconhecidas em seus vídeos agrupadas por sua semelhança de aparência. Ele ajuda você a rotular as pessoas desconhecidas de forma fácil e rápida, e melhora a precisão do seu modelo de pessoas personalizado. Por exemplo, pode ajudá-lo a rotular uma celebridade local ou um político local. Você pode ver o agrupamento de pessoas desconhecidas em sua página de personalização. Escolha pessoas e depois navegue até ao separador pessoas desconhecidas.

Resultados da pesquisa com pontuação máxima de confiança para o nome da pessoa identificada

Você pode pesquisar o nome de uma pessoa identificada e obter o timestamp de quando a pessoa aparece no vídeo, juntamente com a pontuação máxima de confiança. Ele ajuda você a decidir quais vídeos são os mais relevantes para explorar. Por exemplo, você pode pesquisar John Smith e obter os vídeos em que John Smith é reconhecido pelo seu modelo de pessoas personalizado, assim como a pontuação de confiança de cada vídeo.

API

Criar um novo modelo de pessoa

Faça uma solicitação de API 'Criar Modelo de Pessoa'.

Resposta de exemplo

{
    "id": "227654b4-912c-4b92-ba4f-641d488e3720",
    "name": "Example Person Model"
}

Em seguida, use o valor id para o parâmetro personModelId ao carregar um vídeo para indexar ou reindexar um vídeo.

Excluir um modelo de pessoa

Para excluir um modelo de pessoa personalizado da conta especificada, use uma solicitação da API Excluir Modelo de Pessoa .

Depois que o modelo de pessoa for excluído com êxito, o índice dos vídeos atuais que estavam usando o modelo excluído permanecerá inalterado até que você os reindexe. Quando reindexado, o Azure AI Video Indexer não reconhece os rostos nomeados do modelo excluído em seus vídeos atuais quando eles foram indexados usando o modelo. No entanto, os rostos ainda são detetados. Os vídeos indexados que usam o modelo excluído usam o modelo de pessoa padrão da sua conta. Os rostos nomeados do modelo excluído no modelo padrão da sua conta continuam a ser reconhecidos nos vídeos.

Resposta de exemplo

Não há resposta quando o modelo de pessoa é excluído com êxito.

Obtenha modelos de todas as pessoas

Para obter todos os modelos de Pessoa na conta especificada, use a solicitação Get-Person-Models .

A resposta fornece uma lista de todos os modelos de Pessoa na sua conta e cada um dos seus nomes e IDs.

[
    {
        "id": "59f9c326-b141-4515-abe7-7d822518571f",
        "name": "Default"
    }, 
    {
        "id": "9ef2632d-310a-4510-92e1-cc70ae0230d4",
        "name": "Test"
    }
]

Você pode escolher qual modelo deseja usar para um vídeo usando o id valor do modelo Person para o personModelId parâmetro ao carregar um vídeo para indexar ou reindexar um vídeo.

Atualizar um rosto

Use a solicitação Atualizar Rosto de Vídeo.

Esta solicitação permite que você atualize um rosto em seu vídeo com um nome usando o ID do vídeo e ID do rosto. Em seguida, a ação atualiza o modelo de pessoa ao qual o vídeo foi associado ao carregar/indexar ou reindexar. Se nenhum modelo de pessoa tiver sido atribuído, ele atualizará o modelo de pessoa padrão da conta.

Em seguida, o sistema reconhece as ocorrências do mesmo rosto em seus outros vídeos atuais que compartilham o mesmo modelo de pessoa. O reconhecimento do rosto em seus outros vídeos atuais pode levar algum tempo para entrar em vigor porque é um processo em lote.

Atualizar nomes de celebridades

Você pode atualizar um rosto que o Azure AI Video Indexer reconheceu como uma celebridade com um novo nome. O novo nome que atribui tem precedência sobre o reconhecimento de celebridade incorporado.

Gerenciando modelos de várias pessoas

O Azure AI Video Indexer oferece suporte a vários modelos de pessoas por conta através da API do Azure AI Video Indexer.

Se sua conta fornecer casos de uso diferentes, convém criar modelos de várias pessoas por conta. Por exemplo, se o seu conteúdo estiver relacionado a esportes, você pode criar um modelo de pessoa separado para cada esporte (futebol, basquete, futebol e assim por diante).

Cada conta tem um limite de 50 modelos de pessoa. Se você não precisar do suporte ao modelo de várias pessoas, não atribua um ID de modelo de pessoa ao seu vídeo ao carregar/indexar ou reindexar. Nesse caso, o Azure AI Video Indexer usa o modelo de pessoa personalizado padrão em sua conta.

Otimizar a capacidade de reconhecer uma pessoa

Para otimizar a capacidade do seu modelo de reconhecer a pessoa, carregue o maior número possível de imagens diferentes e de diferentes ângulos. Para obter os melhores resultados, use imagens de alta resolução.