Crear un conjunto de pruebas para un agente (versión preliminar)

[Este artículo es documentación preliminar y está sujeto a modificaciones].

Un conjunto de pruebas es una colección de conversaciones que utilizas para evaluar el rendimiento de tu agente. Cada conversación representa un escenario que quieres que tu agente maneje.

Important

  • Esta es una funcionalidad de previsualización preparada para producción.
  • Las versiones preliminares listas para producción están sujetas a condiciones de uso complementarias.

Prerequisites

Un agente creado y guardado con el arnés GitHub Copilot. Consulte Crear un agente (versión preliminar).

Iniciar una nueva evaluación

Para comenzar una nueva evaluación:

  1. Abrir su agente en Copilot Studio.
  2. Seleccione la pestaña Evaluate (Evaluar).
  3. Selecciona Nueva evaluación.

Seleccione una de estas opciones:

Opción 1: Importar conversaciones de un archivo CSV

  1. En la pestaña Evaluar, en la sección Origen de datos, arrastre un archivo CSV al área de carga o selecciónelo para buscar un archivo.

    Tip

    Seleccione el vínculo CSV para descargar una plantilla con el formato de archivo correcto. El tamaño máximo de archivo es de 5 MB.

  2. Revisa las conversaciones importadas y apóitalas según sea necesario.

  3. En el panel Configurar conjunto de pruebas ubicado a la derecha, ingresa un Nombre para la evaluación.

  4. Selecciona Evaluar para ejecutar la evaluación, o selecciona Guardar para guardarla sin ejecutarla.

Opción 2: Generar conversaciones con IA

  1. En la pestaña «Evaluar», en la sección «Más formas de empezar», selecciona «Conjunto de conversación rápida».
  2. Espera mientras el sistema genera 10 conversaciones basadas en la descripción, instrucciones y temas del agente.
  3. Revisa las conversaciones generadas en la lista Revisa tus casos de prueba.
  4. En el panel Configurar conjunto de pruebas , introduce un Nombre y luego selecciona Evaluar o Guardar.

También puedes generar más conversaciones desde la vista de evaluación. Selecciona Añadir conversaciones>Genera 10 conversaciones. Después de hacer una evaluación inicial, selecciona Añadir conversaciones>Generar 25 conversaciones o Generar 50 conversaciones para generar más.

Opción 3: Escribir conversaciones manualmente

  1. En la pestaña Evaluar, en la sección Más formas de comenzar, seleccione O escribe algunas preguntas tú mismo.
  2. En la lista de Revisar tu caso de prueba , selecciona Añadir>conversaciones Escribir para crear manualmente un caso de prueba.
  3. Agregue una pregunta de usuario para cada conversación. Opcionalmente, añade una respuesta esperada del agente.
  4. En el panel Configurar conjunto de pruebas, introduce un Nombre y selecciona Evaluar o Guardar.

Configurar el conjunto de pruebas

Cuando creas o editas una evaluación, el panel de conjunto de pruebas Configurar incluye estas opciones:

  • Nombre: nombre obligatorio para la evaluación.
  • Método de prueba: El método que puntua las respuestas. Verifica la calidad general de si las respuestas cumplen con estándares de calidad como relevancia y completitud.
  • Perfil de usuario: El perfil autenticado que ejecuta la evaluación. Selecciona Gestionar para configurar qué perfil ejecuta las pruebas.

Editar conversaciones en un conjunto de pruebas

Para editar conversaciones en un conjunto de prueba:

  1. En la pestaña Evaluar, abre un conjunto de pruebas existente desde el desplegable Evaluación.
  2. Seleccione una conversación para editar sus mensajes.
  3. Use el menú desplegable de Agregar conversaciones para agregar más conversaciones.
  4. Haga clic en Guardar cuando haya terminado.