Introducción al análisis

Use análisis para comprender cómo de bien es el rendimiento del agente y para identificar áreas de mejora.

La página Analytics de Copilot Studio muestra datos completos para el agente, desde una introducción a las métricas clave para el análisis de uso detallado de los componentes del agente. Puede explorar en profundidad cada dato para obtener más detalles.

La experiencia de análisis se adapta a los agentes conversacionales y a los agentes autónomos.

Los análisis están disponibles en todas las zonas geográficas. Los datos de análisis están disponibles durante un máximo de 180 días. Los detalles de la sesión y la información de transcripción están disponibles durante los últimos 28 días. Las marcas de fecha y hora en los análisis de datos están en Tiempo Universal Coordinado (UTC). Las marcas de fecha y hora incluyen las horas de inicio y fin del día, las horas de las sesiones y cualquier otro marcador de tiempo en los datos de tu agente.

Nota:

La página Análisis no muestra el análisis de la actividad que ha completado al probar el agente en Copilot Studio mediante el panel de pruebas.

Conceder acceso limitado solo de lectura a análisis

Si usted es el propietario del agente y quiere otorgar acceso únicamente a la página Analytics de su agente, puede hacerlo compartiendo el agente con el rol para compartir Visor de Analytics activado. Si quiere que la persona con la que comparte el agente tenga acceso a la información de la transcripción de la conversación, esa persona deberá tener también la función de seguridad Visor de transcripciones de bots.

Obtenga más información sobre cómo compartir el análisis de un agente.

Importante

Como propietario del agente, solo puede compartir el rol visor de Analytics con individuos y no con grupos de usuarios.

Para acceder a la página Analytics del agente:

1. Abrir su agente en Copilot Studio.
2. Seleccione Análisis en la barra de menús superior.

Resumen

El área Resumen usa Copilot para generar un resumen de inteligencia artificial de información de análisis clave sobre el agente. Seleccione Ver más para ver la lista completa de conclusiones resumidas.

Ayuda a comprender rápidamente los temas comunes y las métricas e identificar áreas para mejorar de su agente, resumiéndolos en una lista con viñetas para el periodo de informes seleccionado. Esto puede incluir métricas de involucración, opiniones y comentarios de los clientes y tendencias desde el último período de informes.

El resumen de comentarios del cliente (versión preliminar) le ayuda a comprender la opinión general de los clientes sobre el agente, como comentarios y opiniones. Las conclusiones se priorizan en función del volumen de comentarios relacionados y su importancia general. Los comentarios de bajo valor o irrelevantes se filtran y los comentarios relacionados se agrupan.

Puede proporcionar comentarios a Microsoft sobre esta sección con los iconos Pulgar hacia arriba y Pulgar hacia abajo. Use el panel Enviar comentarios a Microsoft para agregar un comentario y compartir archivos relacionados. Al proporcionar comentarios descriptivos como este, podemos trabajar juntos para mejorar continuamente nuestro producto.

1. En el panel Enviar comentarios a Microsoft , describa en lenguaje natural lo que le gusta o no le gusta, en función del icono que haya seleccionado para abrir el panel.
2. Elija si desea compartir el mensaje, la respuesta generada, las muestras de contenido relevantes y los archivos de registro adicionales.
3. Seleccione Enviar.

También puede comprobar un resumen de rendimiento de alto nivel en el área Información general y profundizar en su rendimiento.

Usuarios activos

Las métricas de usuario activo proporcionan información sobre el grado en que se está adoptando un agente conversacional y cómo estas evolucionan a lo largo del tiempo. Un usuario activo es un usuario único que interactúó con el agente conversacional al menos una vez durante el período del informe. Copilot Studio Analytics muestra recuentos de usuarios activos durante dos períodos de tiempo predefinidos: usuarios activos diarios (DAU) y usuarios activos mensuales (MAU). El recuento diario comienza y finaliza según un día completo de 24 horas en la zona horaria UTC. El recuento mensual sigue el mes natural, comenzando y finalizando en los primeros y últimos días según la zona horaria UTC.

Importante

La característica Métricas de usuario activo solo se admite si establece el agente para requerir autenticación en Configuración>Autenticación de seguridad>.

El promedio de DAU para el período seleccionado, más su porcentaje de cambio desde el período anterior, aparece como un indicador clave de rendimiento (KPI) en la sección Información general .

Nota:

La fórmula de la métrica calculada media de DAU es: (sum of all full-day active user counts in the period) / (count of full days in the period).

Para ver más detalles sobre los recuentos de usuarios activos diarios y mensuales a medida que tendencia a lo largo del tiempo, seleccione el botón Ver usuarios activos en la esquina superior derecha del panel de información general.

Solo sesiones conversacionales

Analytics para agentes conversacionales en Copilot Studio rastrean la interacción del usuario con el agente e intentan medir cómo de bien maneja el agente las tareas de los usuarios.

El análisis conversacional utiliza los siguientes conceptos y términos:

• Las conversaciones son una interacción continua entre un usuario específico, o un grupo de usuarios, en un canal y tu agente.

• Las conversaciones pueden pausarse y reanudarse más tarde, o transferirse a un representante del servicio al cliente. La conversación puede ser unidireccional, ya sea del cliente al agente, o del agente al cliente, pero más comúnmente es una interacción de ida y vuelta entre el cliente y el agente.

• Un chat se agota después de 30 minutos de inactividad.

• Para los agentes publicados en el canal de telefonía, las conversaciones expiran 3 minutos después de un evento Fin de Conversación.

• Una sola conversación puede contener una o más sesiones de análisis.

• Una sesión de análisis en modo clásico se asocia con el último tema personalizado desencadenado por un usuario. Si la sesión no incluye temas personalizados, es el último tema del sistema que el usuario ha activado directamente.

Solo sesiones de desencadenadores de eventos

Un agente autónomo es un agente con un desencadenador de eventos. Estos agentes solo admiten análisis para agentes con desencadenadores.

Una sesión de análisis para agentes con desencadenadores realiza un seguimiento desde el momento en que un agente recibe un payload de un desencadenador hasta las acciones que el agente ejecuta en respuesta. Estas sesiones de análisis capturan a qué está respondiendo su agente y cómo de bien funciona su agente.

Nota:

Si se genera un error en un desencadenador y el agente no recibe una carga útil del desencadenador, no se puede iniciar una sesión de análisis. Analytics rastrea solo las ejecuciones desencadenadas correctamente.

Vista híbrida: sesiones tanto conversacionales como desencadenadas por eventos

Cuando los datos de tu agente incluyen sesiones para al menos una conversación y al menos una ejecución basada en desencadenantes durante el periodo del informe, la página de Analítica muestra una vista híbrida de métricas relevantes tanto para sesiones conversacionales como autónomas. En esta visión, las secciones de Visión General y Efectividad muestran métricas lado a lado tanto para las sesiones conversacionales como para las que se desencadenan por eventos. La sección Uso permite seleccionar entre conversaciones o ejecuciones, que solo muestra los datos pertinentes. Al seleccionar Todo se muestran todos los datos relacionados con el uso. En la sección Satisfacción se muestran las métricas de satisfacción de las sesiones conversacionales.

Para más información acerca de:

• Métricas mostradas relevantes para las sesiones de conversación, consulte Análisis de la eficacia del agente conversacional.

• Métricas mostradas relevantes para las sesiones desencadenadas por eventos, consulte Análisis del estado del agente autónomo.

Descargar las transcripciones conversacionales

Puedes descargar las transcripciones de las conversaciones unos minutos después de que la conversación finalice o expire. Puedes descargar cualquier período de tiempo dentro de los últimos 29 días. Puede descargarlos en Dataverse mediante el portal de Power Apps y como transcripciones de chat session mediante la aplicación Copilot Studio. Puede pasar hasta una hora después de que la sesión analítica termine antes de que los datos relacionados aparezcan en el panel de análisis.

Nota:

No puede descargar transcripciones de conversación en Dataverse en la aplicación Copilot Studio en Teams. Para revisar y exportar transcripciones en Dataverse, debe registrarse en la aplicación web Copilot Studio. Puede descargar transcripciones de chat de sesión mediante la aplicación Copilot Studio. Para obtener más información, consulte Descargar las transcripciones de las sesiones de agente.

Análisis de uso de temas

En Copilot Studio, un tema define cómo progresa una conversación del agente y representa una parte de una conversación entre un usuario y un agente. El panel de análisis de temas muestra cómo está funcionando un tema concreto, incluida la frecuencia con la que se activa, cómo se resuelven las sesiones que lo incluyen y el grado de satisfacción de los usuarios con esas sesiones. Puede usar estas conclusiones para identificar temas que se escalan o abandonan con frecuencia y, a continuación, priorizarlos para mejorarlos. Para obtener más información sobre los temas y cómo crearlos, consulte Creación y edición de temas.

Nota:

El análisis de temas solo está disponible para agentes en modo clásico y para temas asociados a una sesión de análisis. Si el agente usa la orquestación generativa, utilice en su lugar los resultados de la conversación y los temas en la página Analytics.

Para ver el panel de análisis de temas:

1. Vaya a la página Topic del agente en Copilot Studio.

2. Seleccione el tema que desea analizar. Si no hay temas disponibles, consulte Creación y edición de temas.

3. En la esquina superior derecha de la página Temas, seleccione Más (...) >Análisis.

En el panel de análisis de temas se muestra lo siguiente:

• Resultados del tema: gráfico de resultados de sesión, Escalated, Resolvedy Abandoned, para sesiones en las que se desencadenó este tema. Use este gráfico para evaluar rápidamente el estado del tema. Una alta proporción de Escalated resultados o Abandoned puede significar que el tema necesita mejora.
• Uso total de temas: gráfico de la tendencia de resultados del tema a lo largo del tiempo. Úselo para detectar regresiones, por ejemplo, un pico en sesiones abandonadas después de editar un tema o para confirmar que los cambios recientes mejoraron las tasas de resolución.
• Puntuación de satisfacción del cliente: puntuación basada en las respuestas de encuestas de usuarios de sesiones asociadas a este tema.
• Tendencia de puntuación de satisfacción: gráfico que muestra cómo cambia la puntuación de satisfacción a lo largo del tiempo. Utiliza esta tendencia para identificar los periodos en los que el sentimiento del usuario disminuyó o mejoró.

Para cambiar el intervalo de tiempo, seleccione la lista desplegable intervalo de tiempo en la parte superior del panel de análisis de temas.

Información relacionada

• Medición de la rentabilidad de la inversión (ROI) y el valor empresarial de los agentes de inteligencia artificial