Ver resultados da avaliação de um agente (pré-visualização)

[Este artigo é uma documentação de pré-lançamento e está sujeito a alterações.]

Depois de realizar uma avaliação, reveja os resultados para ver o desempenho do seu agente em todas as conversas. Os resultados mostram pontuações de qualidade e permitem-lhe abrir conversas individuais para ver as respostas do agente.

Important

• Esta é uma funcionalidade de pré-visualização pronta para produção.
• As pré-visualizações prontas para produção estão sujeitas a termos de utilização suplementares.

Ver resultados da execução

Para ver os resultados das corridas:

1. Abra o seu agente no Copilot Studio.
2. Selecione o separador Avaliar.
3. Nos resultados recentes, selecione uma avaliação com um teste anterior para visualizar os seus resultados.

OS resultados apresentam a seguinte informação:

• Resultado do teste: Uma tabela que mostra cada conversa com o número de mensagens entre o utilizador e o agente, e a pontuação geral de qualidade. Selecione uma conversa para ver mais detalhes.

• Resumo da avaliação: um resumo da sua avaliação global em todos os métodos de teste. Inclui as seguintes informações:

  • Classificação: a classificação global das conversas que passaram no método de teste de qualidade geral.
  • Duração: o tempo que demorou a concluir a avaliação.
  • Casos de teste: o número de casos de teste na sua avaliação global.
  • Tipo de dados: o tipo de conjunto de testes. Apenas o tipo de dados Conversa está disponível.
  • Perfil de utilizador: o perfil de utilizador que executou a avaliação.

Revise um caso de teste

Para rever um caso de teste:

1. Na página de resultados da execução, selecione uma conversa para expandir os seus detalhes.

2. Reveja os Detalhes do caso de teste:

   • Mensagens do utilizador: as mensagens de teste enviadas ao agente.
   • Respostas do agente: As respostas reais do agente.
   • Qualidade geral: Como as respostas resultaram no método do teste, seja Aprovado ou Reprovado.

   Use esta informação para identificar onde o seu agente precisa de melhorias.

Comparar execuções

Faça a mesma avaliação várias vezes para comparar os resultados e acompanhar o progresso:

1. Na página de detalhes da avaliação, reveja a lista de execuções com as respetivas pontuações e carimbos de data/hora.
2. Compare as pontuações entre execuções para ver se as alterações do seu agente melhoraram ou degradaram o desempenho.
3. Procura padrões. Por exemplo, se uma categoria de conversas tiver consistentemente uma pontuação baixa, essa área pode precisar de mais instruções ou conhecimento.

Exportar resultados

Resultados da avaliação de exportação para análise adicional:

1. Na página de resultados da execução, selecione os três pontos (...) >Exportar resultados do teste. Também pode selecionar uma avaliação específica e depois selecionar os três pontos (...) >Resultados do teste de exportação no canto superior direito.
2. Descarregue os resultados como um ficheiro CSV que inclui todas as conversas, respostas e pontuações.

Agir com base nos resultados

Com base nos resultados da sua avaliação:

• Baixa classificação de qualidade geral: reveja e refine as instruções do seu agente. Consulte Configurar detalhes e instruções do agente (pré-visualização).
• Uso de ferramentas em falta ou incorreto: Verifique se as ferramentas têm descrições claras e que as instruções do seu agente indicam quando as deve usar. Consulte Descrição geral das ferramentas para agentes (pré-visualização).
• Informação incorreta: Certifique-se de que as fontes de conhecimento relevantes foram adicionadas e configuradas corretamente. Consulte Adicionar conhecimento a um agente (pré-visualização).

Informações adicionais

• Avalie um agente
• Criar um conjunto de testes para um agente
• Executar uma avaliação para um agente
• Pré-visualizar e testar um agente