Compartilhar via

Personalizar um modelo de linguagem com o Azure AI Video Indexer

O Azure AI Video Indexer dá suporte ao reconhecimento automático de fala por meio da integração com o Serviço de Fala Personalizada da Microsoft. Você pode personalizar o modelo de linguagem carregando o texto de adaptação. Este texto vem do domínio cujo vocabulário você gostaria que o mecanismo usasse para se adaptar. Depois de treinar seu modelo, novas palavras que aparecem no texto de adaptação são reconhecidas, assumindo a pronúncia padrão, e o modelo de linguagem aprende novas sequências prováveis de palavras. Confira a lista de linguagens compatíveis com o Azure AI Video Indexer em idiomas com suporte.

Por exemplo, Kubernetes (no contexto do serviço kubernetes do Azure), é uma palavra altamente específica. Como a palavra é nova para o Azure AI Video Indexer, ela é reconhecida como "comunidades" (devido à sonoridade). Treine o modelo para reconhecê-lo como Kubernetes. Em outros casos, as palavras existem, mas o modelo de linguagem não espera que elas apareçam em um determinado contexto. Por exemplo, o serviço de contêiner não é uma sequência de duas palavras que um modelo de linguagem não específico reconheceria como um conjunto específico de palavras.

Há duas maneiras de personalizar um modelo de linguagem:

  • Opção 1: edite a transcrição gerada pelo Video Indexer de IA do Azure. Ao editar e corrigir a transcrição, você está treinando um modelo de linguagem para fornecer melhores resultados no futuro.
  • Opção 2: carregar arquivos de texto para treinar o modelo de idioma. O arquivo pode conter uma lista de palavras, pois você gostaria que elas aparecessem na transcrição do Video Indexer. Ou pode conter as palavras relevantes incluídas naturalmente em frases e parágrafos. À medida que melhores resultados são obtidos com a última abordagem, recomendamos que o arquivo de upload contenha frases completas ou parágrafos relacionados ao seu conteúdo.

Importante

Não inclua as palavras ou frases transcritas incorretamente (por exemplo, comunidades) no arquivo de envio, pois isso é contraproductivo ao efeito desejado. Inclua apenas as palavras como você gostaria que elas aparecessem (por exemplo, Kubernetes).

Otimize seu modelo de linguagem personalizado

O Azure AI Video Indexer aprende com base em probabilidades de combinações de palavras, portanto, para aprender melhor:

  • Forneça exemplos reais suficientes de frases como elas seriam faladas.
  • Coloque apenas uma frase por linha, não mais. Caso contrário, o sistema aprenderá probabilidades entre frases.
  • Não há problema em usar uma palavra como uma frase para destacá-la em relação a outras, mas o sistema aprende melhor com frases completas.
  • Ao introduzir novas palavras ou acrônimos, se possível, dê exemplos de uso em uma frase completa para dar o máximo de contexto possível para o sistema.
  • Tente colocar várias opções de adaptação e ver como elas funcionam para você.
  • Evite a repetição da mesma frase várias vezes. Ela pode criar viés em relação ao restante da entrada.
  • Evite incluir símbolos incomuns (~, # @ % &) porque eles são descartados. As frases em que aparecem também são descartadas.
  • Evite colocar entradas muito grandes, como centenas de milhares de frases, porque isso dilui o efeito de amplificação.

Pré-requisitos

  • Uma conta do Azure
  • Uma conta do Azure AI Video Indexer

Criar um modelo de linguagem

  1. Acesse o site do Azure AI Video Indexer e entre.
  2. Para personalizar um modelo em sua conta, selecione o botão Personalização de modelo de conteúdo na esquerda da página.
  3. Selecione a guia Idioma. Você verá uma lista de idiomas suportados.
  4. Na linguagem desejada, selecione Adicionar modelo.
  5. Digite o nome do modelo de linguagem e pressione Enter. Essa etapa cria o modelo e oferece a opção de carregar arquivos de texto no modelo.
  6. Para adicionar um arquivo de texto, selecione Adicionar arquivo. O explorador de arquivos é aberto.
  7. Navegue até o arquivo de texto e selecione-o. Você pode adicionar vários arquivos de texto a um modelo de linguagem. Você também pode adicionar um arquivo de texto selecionando o botão ... no lado direito do modelo de linguagem e selecionando Adicionar arquivo.
  8. Depois que você terminar de carregar os arquivos de texto, selecione a opção verde Treinar.

O processo de treinamento pode levar alguns minutos. Depois que o treinamento é feito, Trained aparece ao lado do modelo. Você pode visualizar, baixar e excluir o arquivo do modelo.

Usando um modelo de linguagem em um novo vídeo

Para usar seu modelo de linguagem em um novo vídeo, execute uma das seguintes ações:

  1. Selecione Carregar na parte superior da página.
  2. Solte o arquivo de áudio ou vídeo ou procure o arquivo.
  3. Selecione um modelo de idioma que você criou na lista de idiomas de origem do vídeo .
  4. Selecione a opção Carregar na parte inferior da página e seu novo vídeo será indexado usando seu modelo de linguagem.

Usando um modelo de linguagem para reindexar

  1. Entre na home page do Azure AI Video Indexer .
  2. Selecione as reticências (...) no vídeo e selecione Indexar novamente.
  3. Selecione a lista de idiomas de origem de vídeo e selecione um modelo de idioma que você criou na lista.
  4. Selecione Indexar novamente e seu vídeo será reindexado usando seu modelo de linguagem.

Editar um modelo de linguagem

Você pode editar um modelo de linguagem alterando seu nome, adicionando arquivos a ele e excluindo arquivos dele. Se você adicionar ou excluir arquivos do modelo de idioma, deverá treinar o modelo novamente selecionando a opção Treinar verde.

Renomear o modelo de linguagem

Você pode alterar o nome do modelo de linguagem selecionando reticências (...) no lado direito do modelo de linguagem e selecionando Renomear. Insira o novo nome.

Adicionar arquivos

  1. Selecione Adicionar arquivo. O explorador de arquivos é aberto.
  2. Navegue até o arquivo de texto e selecione-o. Você pode adicionar vários arquivos de texto a um modelo de linguagem.

Você também pode adicionar um arquivo de texto selecionando o botão de reticências (...) no lado direito do modelo de linguagem e selecionando Adicionar arquivo.

Excluir arquivos

Essa ação remove completamente o arquivo do modelo de linguagem.

  1. Selecione o botão de reticências no lado direito da linha Identidade.
  2. Selecione Excluir. Uma nova janela será exibida informando que a exclusão não pode ser desfeita.
  3. Selecione a opção Excluir na nova janela.

Excluir um modelo de linguagem

Essa ação remove completamente o modelo de linguagem da sua conta. Qualquer vídeo que estava usando o modelo de linguagem excluído mantém o mesmo índice até que você reindexe o vídeo. Se você reindexar o vídeo, poderá atribuir um novo modelo de linguagem ao vídeo. Caso contrário, o Azure AI Video Indexer usará seu modelo padrão para reindexar o vídeo.

  1. Selecione o botão de reticências (...) no lado direito do modelo de linguagem.
  2. Selecione Excluir. Uma nova janela será exibida informando que a exclusão não pode ser desfeita.
  3. Selecione a opção Excluir na nova janela.

Personalize modelos de linguagem corrigindo transcrições

O Azure AI Video Indexer personaliza modelos de linguagem com base nas correções reais que os usuários fazem nas transcrições de seus vídeos. Ele captura todas as linhas que você corrigiu na transcrição do seu vídeo e as adiciona a um arquivo de texto chamado From transcript edits. Essas edições são usadas para treinar novamente o modelo de linguagem usado para indexar o vídeo.

As edições que foram feitas na linha do tempo do widget também estão incluídas.

Se você não especificou um modelo de idioma ao indexar este vídeo, todas as edições desse vídeo serão armazenadas em um modelo de idioma padrão chamado Account adaptations no idioma detectado do vídeo.

Caso várias edições tenham sido feitas na mesma linha, somente a última versão da linha corrigida será usada para atualizar o modelo de linguagem.

Observação

Somente correções textuais são usadas para a personalização. As correções que não envolvem palavras reais (por exemplo, marcas ou espaços de pontuação) não são incluídas.

  1. Selecione o vídeo que você deseja editar na sua biblioteca.
  2. Selecione a aba Linha do tempo.
  3. Selecione o ícone de lápis para editar a transcrição desejada.
  4. Você verá as correções de transcrição aparecerem na guia Idioma da página de personalização do modelo de conteúdo. Para examinar o arquivo de "Das edições de transcrição" para cada um dos seus modelos de linguagem, selecione-o para abri-lo.