Alterar os detalhes de um conjunto de teste

Note

Os recursos deste artigo são alimentados pelo chicote padrão, que utiliza as opções de faturamento descritas em Licenciamento para agentes alimentados pelo chicote padrão. Aprenda como acessar recursos padrão em agentes e fluxos de agentes padrão do Access.

Use conjuntos de teste para avaliar e aprimorar como seu agente lida com cenários de resposta no mundo real. Este artigo explica como modificar o nome e as configurações de um conjunto de teste, gerenciar o perfil de usuário e as conexões usadas para autenticação, editar ou excluir casos de teste individuais e remover conjuntos ou resultados inteiros de teste. Essas etapas ajudam a garantir que as avaliações reflitam os contextos certos dos usuários e mantenham acesso seguro a fontes de conhecimento e ferramentas.

Você tem a opção de três métodos de teste, também conhecidos como classificadores, para avaliar as respostas do agente: qualidade, similaridade e correspondência de texto. Para obter mais informações sobre os diferentes métodos de teste, consulte Métodos de teste.

Editar os detalhes de um conjunto de teste

Você pode alterar os detalhes de um conjunto de teste, como qual conta ela usa para autenticação e os métodos de teste utilizados.

1. Acesse a página de Avaliação do seu agente.

   

2. Selecione o conjunto de testes.

3. No conjunto de testes, selecione o caso de teste que você deseja editar.

4. Opcionalmente, mude o nome do conjunto de teste.

5. Adicione ou modifique os métodos de teste. Cada método de teste mede valores diferentes e requer configurações distintas. Para aprender como configurar cada método de teste, veja Escolher métodos de teste.

   Método de teste	Medidas	Tipo de conjunto de testes	Pontuação	Configurações
   Qualidade geral	Quão boa é a resposta de um caso de teste com base em qualidades específicas	Resposta única ou conversa	Avaliado em uma escala de 0 a 100%	Nenhum
   Comparar significado	Quão bem o significado da resposta do caso de teste corresponde à resposta esperada	Resposta única	Avaliado em uma escala de 0 a 100%	Pontuação de aprovação, resposta esperada
   Uso da ferramenta	Se o caso de teste usou todos ou quaisquer recursos esperados	Resposta única	Aprovado/reprovado	Capacidades esperadas
   Correspondência de palavras-chave	Se o caso de teste usou todas ou algumas das palavras-chave ou frases esperadas	Resposta única ou conversa	Aprovado/reprovado	Palavras-chave ou frases esperadas
   Similaridade de texto	Quão bem o texto da resposta do caso de teste corresponde à resposta esperada	Resposta única	Avaliado em uma escala de 0 a 100%	Pontuação de aprovação, resposta esperada
   Correspondência exata	Se a resposta do caso de teste corresponde exatamente à resposta esperada	Resposta única	Aprovado/reprovado	Resposta esperada
   Personalizado	Se a resposta do caso de teste atende aos seus critérios ou expectativas definidos.	Resposta única ou conversa	Passar/falhar (passa os critérios de rótulo definidos)	Nome, instruções de avaliação, rótulos

6. Selecione Gerenciar perfil para adicionar uma conta ou selecione o perfil atual para gerenciar conexões ou escolha um perfil diferente. Testes automatizados utilizam a autenticação da conta de teste selecionada. Saiba mais em Gerenciar perfis de usuário e conexões.

Note

Quando Copilot Studio gera casos de teste ou executa uma avaliação, ele usa as credenciais de autenticação de uma conta conectada para acessar as fontes de conhecimento e as ferramentas do agente. Os casos de teste gerados podem incluir dados confidenciais que a conta conectada pode acessar. Qualquer fabricante com acesso ao agente também pode visualizar os conjuntos de teste vinculados a esse agente.

Gerencie perfis de usuário e conexões (prévia)

[Esta seção é uma documentação de pré-lançamento e está sujeita a alterações.]

Você pode rodar conjuntos de teste usando a autenticação de uma conta diferente da sua. Esse método de autenticação permite que seu agente acesse as fontes de conhecimento e ferramentas necessárias para cumprir seus objetivos.

Você pode usar perfis para simular experiências específicas do usuário. Por exemplo, o perfil de usuário de um diretor pode acessar fontes de conhecimento diferentes do perfil de usuário de um estagiário, e o agente retorna resultados diferentes.

Importante

Este artigo contém a documentação da versão preliminar do Microsoft Copilot Studio e está sujeito a alterações.

As funcionalidades de pré-visualização não se destinam à utilização de produção e podem ter funcionalidades restritas. Esses recursos estão disponíveis antes de um lançamento oficial para que você possa obter acesso antecipado e fornecer comentários.

Se você estiver criando um agente pronto para produção, confira a visão geral do Microsoft Copilot Studio.

Importante

Ao selecionar um perfil de usuário, você pode revisar e autenticar quaisquer conectores que seu agente utilize. Se você selecionar uma conta além daquela que usa para entrar no Copilot Studio, como uma conta de teste, o Copilot Studio autentica esse perfil de usuário e recupera as conexões existentes do usuário. Você pode configurar, revisar e salvar essas conexões antes de executar uma avaliação.

Os resultados dos testes mostram qual perfil de usuário foi utilizado.

Note

Quando Copilot Studio gera casos de teste ou executa uma avaliação, ele usa as credenciais de autenticação de uma conta conectada para acessar as fontes de conhecimento e as ferramentas do agente. Os casos de teste gerados podem incluir dados confidenciais que a conta conectada pode acessar. Qualquer fabricante com acesso ao agente também pode visualizar os conjuntos de teste vinculados a esse agente.

Avaliações de agentes que utilizam autenticação de usuário exigem acesso por meio do conector Microsoft Copilot Studio. Se seu administrador desligar essa conexão, você não pode rodar testes usando a ferramenta de avaliação. Para obter mais informações, consulte Copilot Studio conectores e grupos de dados.

Para adicionar ou alterar um perfil de usuário em um conjunto de teste:

1. Abra um conjunto de testes e selecione Gerenciar perfil.

   

2. Selecione o menu Usuário dropdown, depois:

   • Selecione a conta de usuário que deseja usar, ou
   • Selecione Adicionar uma conta e faça login na conta.

   

3. Para conexões com aviso, selecione a conexão. Mude a conexão existente para uma conexão funcionando, selecione Reconectar para tentar restabelecer a conexão existente, ou selecione Criar nova conexão para tentar uma nova conexão. As conexões em funcionamento são marcadas com um verd.

4. Para novas conexões, insira os detalhes solicitados e selecione Conectar.

5. Quando todas as conexões estiverem funcionando, selecione Salvar.

6. Quando o perfil Gerenciar e as conexões desaparecerem, selecione Salvar para atualizar o conjunto de testes com o perfil de usuário e as conexões selecionados.

Exclua um conjunto de teste ou resultado de teste

Você pode deletar um caso de teste ou conjunto de testes que não precisa mais.

1. Acesse a página de Avaliação do seu agente.
2. Na seção de conjuntos de teste , exclua um conjunto de teste fazendo um dos seguintes passos:
   • Selecione os três pontos (...) no cartão do conjunto de teste e depois selecione Excluir.
   • Selecione o conjunto de teste para abri-lo, depois selecione os três pontos (...) no painel Configurar conjunto de teste e então selecione Excluir.
3. Na seção Resultados Recentes , exclua um resultado de teste seguindo um dos seguintes passos:
   • Passe o mouse sobre o resultado do teste que você quer deletar, selecione os três pontos (...) e depois selecione Excluir teste.
   • Selecione o resultado do teste para abri-lo, depois selecione os três pontos (...) no painel de resumo de Avaliação e, em seguida, selecione Excluir.