Partilhar via

Exibir detalhes do modelo de fluxo de trabalho de orquestração

  • Artigo

Após a conclusão do treinamento do modelo, você pode visualizar os detalhes do modelo e ver o desempenho dele em relação ao conjunto de testes. Observar o desempenho do seu modelo é chamado de avaliação. O conjunto de testes consiste em dados que não foram introduzidos no modelo durante o processo de treinamento.

Nota

Usar a opção Dividir automaticamente o conjunto de testes dos dados de treinamento pode resultar em resultados de avaliação de modelo diferentes cada vez que você treina um novo modelo, pois o conjunto de teste é selecionado aleatoriamente a partir de suas declarações. Para certificar-se de que a evaulação é calcualizada no mesmo conjunto de teste toda vez que você treina um modelo, certifique-se de usar a opção Usar uma divisão manual de dados de treinamento e teste ao iniciar um trabalho de treinamento e definir seu conjunto de testes ao adicionar seus enunciados.

Pré-requisitos

Antes de visualizar a avaliação de um modelo, você precisa:

  • Um projeto de fluxo de trabalho de orquestração.
  • Um modelo treinado com sucesso

Consulte o ciclo de vida de desenvolvimento do projeto para obter mais informações.

Detalhes do modelo

Na página de detalhes do modelo, você poderá ver todos os seus modelos, com seu status de treinamento atual e a data em que foram treinados pela última vez.

  1. Aceda à página do seu projeto no Language Studio.

  2. Selecione Desempenho do modelo no menu do lado esquerdo da tela.

  3. Nesta página, você só pode visualizar os modelos treinados com sucesso, a pontuação F1 para cada modelo e a data de validade do modelo. Você pode selecionar o nome do modelo para obter mais detalhes sobre seu desempenho.

  4. Você pode encontrar as métricas de avaliação no nível do modelo em Visão geral e as métricas de avaliação no nível de intenção. Consulte Métricas de avaliação para obter mais informações.

    Uma captura de tela das métricas de desempenho do modelo no Language Studio

  5. A matriz de confusão para o modelo está localizada sob a matriz de confusão do conjunto de testes. Você pode ver a matriz de confusão para intenções.

    Nota

    Se você não vê nenhuma das intenções que você tem em seu modelo exibido aqui, é porque elas não estavam em nenhum dos enunciados que foram usados para o conjunto de teste.

Carregar ou exportar dados do modelo

Para carregar os dados do modelo:

  1. Selecione qualquer modelo na página de avaliação do modelo.

  2. Selecione o botão Carregar dados do modelo.

  3. Confirme se você não tem nenhuma alteração não salva que precisa capturar na janela exibida e selecione Carregar dados.

  4. Aguarde até que os dados do modelo terminem de ser carregados novamente no projeto. Após a conclusão, você será redirecionado de volta para a página de design do esquema.

Para exportar os dados do modelo:

  1. Selecione qualquer modelo na página de avaliação do modelo.

  2. Selecione o botão Exportar dados do modelo. Aguarde até que o instantâneo JSON do seu modelo seja baixado localmente.

Excluir modelo

Para excluir seu modelo do Language Studio:

  1. Selecione Desempenho do modelo no menu do lado esquerdo.

  2. Selecione o nome do modelo que deseja excluir e selecione Excluir no menu superior.

  3. Na janela exibida, selecione OK para excluir o modelo.

Próximos passos

  • Ao analisar o desempenho do seu modelo, saiba mais sobre as métricas de avaliação usadas.
  • Se estiver satisfeito com o desempenho do seu modelo, pode implementá-lo