Editar um conjunto de teste

[Este artigo é uma documentação de pré-lançamento e está sujeito a alterações.]

Durante ou após a criação de um conjunto de teste, pode editar os casos de teste alterando a formulação das perguntas, escolhendo diferentes métodos de teste ou modificando as respostas esperadas conforme necessário. Pode selecionar vários casos de teste para editá-los em massa marcando as caixas de seleção ao lado de cada caso de teste.

Pode escolher entre três métodos de teste, também conhecidos como classificadores, para avaliar as respostas do agente: qualidade, semelhança, correspondência de texto. Para obter mais informações sobre os diferentes métodos de teste, consulte Métodos de teste.

Importante

Este artigo contém a documentação de visualização do Microsoft Copilot Studio e está sujeito a alterações.

As funcionalidades de pré-visualização não se destinam a utilização em produção e podem ter funcionalidades restritas. Esses recursos estão disponíveis antes de um lançamento oficial para que você possa obter acesso antecipado e fornecer feedback.

Se você estiver criando um agente pronto para produção, consulte Visão geral do Microsoft Copilot Studio.

Editar os detalhes de um conjunto de teste

Pode alterar os detalhes básicos de um conjunto de teste e qual a conta que ele usa para autenticação.

1. Na página de Avaliação do seu agente, selecione o conjunto de testes.

2. No conjunto de teste, selecione o caso de teste que deseja editar.

3. Opcionalmente, muda o nome do conjunto de teste.

4. Selecione Gerir perfil para adicionar uma conta, ou selecione o perfil atual para gerir ligações ou escolha um perfil diferente. O teste automatizado utiliza a autenticação da conta de teste selecionada. Se o seu agente tiver fontes de conhecimento ou ferramentas que requerem autenticação específica, pode selecionar a conta apropriada para o seu teste.

Observação

Quando o Copilot Studio gera casos de teste ou executa uma avaliação, utiliza as credenciais de autenticação de uma conta ligada para aceder às fontes de conhecimento e ferramentas do seu agente. Os casos de teste ou resultados gerados podem incluir informações sensíveis a que a conta ligada tem acesso, e esta informação é visível para todos os criadores que conseguem aceder ao conjunto de teste.

Gerir perfis de utilizador e ligações

Pode executar conjuntos de testes usando a autenticação da conta de um utilizador. Este método de autenticação permite ao seu agente aceder às fontes de conhecimento e às ferramentas de que necessita para cumprir os seus objetivos.

Também pode usar perfis para simular experiências específicas dos utilizadores. Por exemplo, o perfil de utilizador de um diretor pode aceder a fontes de conhecimento diferentes do perfil de utilizador de um estagiário, e o agente deve devolver resultados diferentes.

Os resultados dos testes mostram qual o perfil de utilizador utilizado.

Observação

Quando o Copilot Studio gera casos de teste ou executa uma avaliação, utiliza as credenciais de autenticação de uma conta ligada para aceder às fontes de conhecimento e ferramentas do seu agente. Os casos de teste ou resultados gerados podem incluir informações sensíveis a que a conta ligada tem acesso, e esta informação é visível para todos os criadores que conseguem aceder ao conjunto de teste.

As avaliações de agentes que utilizam autenticação de utilizador requerem acesso através do conector Microsoft Copilot Studio. Se o teu administrador desligar esta ligação, não podes fazer testes usando a ferramenta de avaliação. Para mais informações, consulte conectores e grupos de dados do Copilot Studio.

Para adicionar ou alterar um perfil de utilizador num conjunto de teste:

1. Abre um conjunto de testes e depois seleciona Gerir perfil.

1. Selecione o menu suspenso do Utilizador e, depois:

• Seleciona a conta de utilizador que queres usar, ou
• Selecione Adicionar uma conta e depois inicie sessão na conta.

1. Para ligações com aviso, selecione a ligação. Muda a ligação existente para uma ligação funcional, seleciona Reconectar para tentar restabelecer a ligação existente, ou seleciona Criar nova ligação para tentar uma nova ligação.

Para novas ligações, introduza os detalhes de ligação solicitados e depois selecione Conectar.

1. Quando todas as ligações estiverem a funcionar, selecione Guardar.

Editar casos de teste dentro de um conjunto de teste

1. Na página de Avaliação do seu agente, selecione o conjunto de testes.

2. No conjunto de teste, selecione o caso de teste que deseja editar.

1. No painel direito, altere o texto de uma pergunta editando o texto no campo Pergunta.

1. Selecione o método de teste que pretende utilizar.

• Qualidade:

  • Selecione Qualidade geral para avaliar a resposta com base na relevância, fundamentação e integridade.

  • Selecione Comparar significado para avaliar a resposta com base em quão bem captura o significado da resposta esperada. Em Classificação de aprovação, pode definir o limiar para o que constitui uma classificação de aprovação para uma resposta.

    Na caixa Resposta esperada, forneça a resposta em relação à qual o método de teste avalia a resposta do agente.

• Similaridade: usa uma métrica de semelhança de Cosine para avaliar o quão semelhante é a resposta do agente com a redação e o significado da resposta esperada. Determina uma classificação entre 0 e 1, em que 1 significa que há uma correspondência próxima e 0 significa que não há correspondência alguma. Em Classificação de aprovação, pode definir o limiar para o que constitui uma classificação de aprovação para uma resposta.

  Na caixa Resposta esperada, forneça a resposta em relação à qual o método de teste avalia a resposta do agente.

• Correspondência de texto:

  • Selecione Correspondência exata para avaliar a resposta do agente em relação à resposta esperada, em que uma classificação de aprovação significa que a resposta do agente correspondeu exatamente à resposta esperada definida.

    Na caixa Resposta esperada, forneça a resposta em relação à qual o método de teste avalia a resposta do agente.

  • Selecione Correspondência parcial para avaliar a resposta do agente em relação à resposta esperada, em que uma classificação de aprovação significa que a resposta do agente continha algumas das palavras ou frases da resposta esperada definida.

    Na caixa Resposta esperada, forneça uma frase ou palavra-chave em relação à qual o método de teste avalia a resposta do agente. Para adicionar várias palavras-chave ou frases, selecione Adicionar, selecione o operador e ou ou entre as caixas e forneça a palavra-chave ou frase.

    

1. Selecione Aplicar.

2. Quando terminares as tuas alterações, seleciona Guardar para guardar o teu conjunto de testes ou Avaliar para executar o teste.

Adicionar mais casos de teste a um conjunto de testes

Ao criar ou editar um conjunto de testes, pode adicionar mais casos de teste.

1. Na página de Avaliação do seu agente, selecione o conjunto de testes.

2. Gerar ou adicionar manualmente mais casos de teste.

1. Selecione e edite quaisquer novos casos de teste para adicionar detalhes.

Eliminar um caso de teste ou conjunto de teste

Podes apagar um caso de teste ou conjunto de testes que já não precisas.

1. Vá à página de Avaliação do seu agente.
2. Na secção de conjuntos de teste , pode eliminar um conjunto de testes fazendo qualquer uma das seguintes opções:
   • Selecione os três pontos (...) do cartão do conjunto de teste e depois selecione Eliminar.
   • Selecione o conjunto de teste para o abrir, depois selecione os três pontos (...) no painel Configurar conjunto de teste e depois selecione Eliminar.
3. Na secção de Resultados Recentes , pode eliminar um caso de teste fazendo uma das seguintes opções:
   • Passa o rato sobre o caso de teste que queres eliminar, seleciona os três pontos (...) e depois seleciona Eliminar teste.
   • Selecione o caso de teste para o abrir, depois selecione os três pontos (...) no painel de resumo de Avaliação e depois selecione Eliminar.