Exibir detalhes do modelo de fluxo de trabalho de orquestração

  • Artigo

Depois que o treinamento do modelo for concluído, é possível exibir os detalhes do modelo e ver como ele é executado no conjunto de teste. Observar o nível de desempenho do seu modelo é chamado de avaliação. O conjunto de testes consiste em dados que não foram introduzidos no modelo durante o processo de treinamento.

Observação

Usar a opção Dividir automaticamente o conjunto de teste dos dados de treinamento pode resultar em diferentes resultados de avaliação de modelo sempre que você treina um novo modelo, pois o conjunto de teste é selecionado aleatoriamente nos enunciados. Para garantir que a avaliação seja calculada no mesmo conjunto de testes sempre que você treina um modelo, use a opção Usar uma divisão manual de dados de treinamento e de teste ao iniciar um trabalho de treinamento e definir o Conjunto de teste ao adicionar os enunciados.

Pré-requisitos

Para exibir a avaliação de um modelo, é necessário:

Confira o ciclo de vida de desenvolvimento de projetos para obter mais informações.

Detalhes do modelo

Na página Exibir detalhes do modelo, é possível ver todos os seus modelos, com seu status de treinamento atual e a data em que eles foram treinados pela última vez.

  1. Acesse a página do projeto no Language Studio.

  2. Selecione Desempenho do modelo no menu à esquerda da tela.

  3. Nesta página, você só pode exibir os modelos treinados com êxito, a pontuação F1 de cada modelo e a data de expiração do modelo. Você pode selecionar o nome do modelo para obter mais detalhes sobre seu desempenho.

  4. Você pode encontrar as métricas de avaliação de nível de modelo em Visão geral e as métricas de avaliação de nível de intenção. Para saber mais, confira Métricas de avaliação.

    Uma captura de tela das métricas de desempenho do modelo no Language Studio

  5. A matriz de confusão do modelo está em Matriz de confusão do conjunto de testes. Você pode ver a matriz de confusão para intenções.

    Observação

    Caso se não veja nenhuma das intenções que tenha em seu modelo exibido aqui, isso ocorre porque eles não estavam em nenhum dos enunciados que foram usados para o conjunto de teste.

Carregar ou exportar dados do modelo

Para carregar os dados do modelo:

  1. Selecione qualquer modelo na página de avaliação do modelo.

  2. Clique no botão Carregar dados do modelo.

  3. Verifique se você não tem nenhuma alteração não salva que precise capturar na janela exibida e selecione Carregar dados.

  4. Aguarde até que os dados do modelo terminem de carregar de volta em seu projeto. Após a conclusão, você será redirecionado de volta para a página Design de esquema.

Para exportar seus dados de modelo:

  1. Selecione qualquer modelo na página de avaliação do modelo.

  2. Clique no botão Exportar dados do modelo. Aguarde o instantâneo JSON do modelo ser baixado localmente.

Excluir modelo

Para excluir seu modelo de dentro do Language Studio:

  1. Selecione Desempenho do modelo no menu à esquerda.

  2. Clique no nome do modelo que você quer excluir e clique em Excluir no menu superior.

  3. Na janela exibida, clique em OK para excluir o modelo.

Próximas etapas