Visão geral do Analytics

Use análises para entender o desempenho do seu agente e identificar áreas de melhoria.

A página Analytics no Copilot Studio mostra dados abrangentes para seu agente, desde uma visão geral das principais métricas até análise detalhada de uso para os componentes do agente. Você pode analisar cada parte dos dados para obter mais detalhes.

A experiência de análise é adaptada para agentes de conversação e para agentes autônomos.

As análises estão disponíveis em todas as áreas geográficas. Os dados de análise estão disponíveis por até 180 dias. Os detalhes da sessão e as informações de transcrição estão disponíveis para os últimos 28 dias. Os carimbos de data e hora nas análises estão em Tempo Universal Coordenado (UTC). Os carimbos de data e hora incluem horários de início e término do dia, horários das sessões e quaisquer outros marcadores de tempo nos dados do seu corretor.

Note

A página Análise não mostra a análise da atividade que você conclui ao testar seu agente no Copilot Studio usando o painel de teste.

Conceder acesso limitado somente para visualização às análises

Se você for o proprietário do agente e quiser conceder acesso apenas à página Análise do seu agente, poderá fazer isso compartilhando o agente com a função de compartilhamento do Visualizador de Análise habilitada. Se você quiser que a pessoa com quem você está compartilhando o agente tenha acesso às informações da transcrição da conversa, ela também deve ter a função de segurança Bot Transcript Viewer.

Saiba mais sobre como compartilhar a análise de um agente.

Importante

Como proprietário de um agente, você só pode compartilhar a função de visualizador do Analytics com indivíduos e não com grupos de usuários.

Para acessar a página análise do seu agente:

1. Abra seu agente no Copilot Studio.
2. Selecione Análise na barra de menus superior.

Resumo

A área Resumo usa o Copilot para gerar um resumo gerado por IA dos insights analíticos chave sobre seu agente. Selecione Exibir Mais para ver a lista completa resumida de insights.

Ele ajuda você a entender rapidamente temas e métricas comuns e identificar áreas de melhoria para seu agente resumindo-os em uma lista com marcadores para o período de relatório selecionado. Isso pode incluir métricas de participação, sentimento do cliente e comentários e tendências desde o último período de relatório.

O resumo de comentários do cliente (versão prévia) ajuda você a entender o sentimento geral do cliente sobre o agente, como feedback e comentários. Os insights são priorizados com base no volume de comentários relacionados e em sua significância geral. Comentários de baixo valor ou irrelevantes são filtrados e os comentários relacionados são agrupados.

Você pode fornecer feedback à Microsoft sobre esta seção com os ícones de Polegar positivo e Polegar negativo. Use o painel Enviar comentários para a Microsoft para adicionar um comentário e compartilhar arquivos relacionados. Ao fornecer comentários descritivos como esse, podemos trabalhar juntos para melhorar continuamente nosso produto.

1. No painel Enviar comentários para a Microsoft, descreva em linguagem natural o que você gosta e o que não gosta, dependendo do ícone que você selecionou para abrir o painel.
2. Escolha se deseja compartilhar prompt, resposta gerada, exemplos de conteúdo relevantes e arquivos de log adicionais.
3. Selecione Enviar.

Você também pode verificar um resumo de desempenho de alto nível na área visão geral e, em seguida, aprofundar-se em seu desempenho.

Usuários ativos

As métricas de usuário ativas fornecem insights sobre o grau em que um agente de conversação está sendo adotado e como isso é tendência ao longo do tempo. Um usuário ativo é um usuário exclusivo que interagiu com o agente de conversa pelo menos uma vez durante o período do relatório. O Copilot Studio Analytics exibe contagens de usuários ativos para dois períodos de tempo predefinidos: DAU (usuários ativos diários) e MAU (usuários ativos mensais). A contagem diária começa e termina de acordo com um dia completo de 24 horas no fuso horário UTC. A contagem mensal segue o mês do calendário, também iniciando e terminando nos primeiros e últimos dias de acordo com o fuso horário UTC.

Importante

O recurso as métricas do usuário ativo só tem suporte se você configurar seu agente para exigir autenticação em Configurações>Segurança>Autenticação.

O DAU médio para o período selecionado, mais sua variação percentual em relação ao período anterior, aparece como um KPI (indicador de desempenho chave) na seção Visão geral .

Note

A fórmula para a métrica calculada média da DAU é: (sum of all full-day active user counts in the period) / (count of full days in the period).

Para ver mais detalhes sobre as contagens de usuários ativos diários e mensais ao longo do tempo, selecione o botão Ver usuários ativos no canto superior direito do painel de visão geral.

Somente sessões de conversa

Análises para agentes conversacionais no Copilot Studio acompanham o engajamento do usuário com seu agente e tentam capturar o quão bem seu agente lida com as tarefas dos usuários.

A análise de conversa usa os seguintes conceitos e termos:

• Conversas são uma interação contínua entre um usuário específico, ou grupo de usuários, em um canal e seu agente.

• As conversas podem pausar e retomar mais tarde ou ser transferidas para um representante do serviço de atendimento ao consumidor. A conversa pode ser unilateral, seja do cliente para o corretor, ou do agente para o cliente, mas é mais comum ser uma interação de vai e vem entre o cliente e o corretor.

• A conversa expira após 30 minutos de inatividade.

• Para agentes publicados para o canal de telefonia, as conversas têm um tempo limite de 3 minutos após um evento Encerrar Conversa.

• Uma única conversa pode conter uma ou mais sessões de análise.

• Uma sessão de análise no modo clássico é associada ao último tópico personalizado acionado por um usuário. Se a sessão não incluir tópicos personalizados, é o último tópico do sistema acionado diretamente pelo usuário.

Somente sessões de acionamento de evento

Um agente autônomo é um agente com um gatilho de evento. Esses agentes dão suporte apenas à análise de agentes com gatilhos.

Uma sessão de análise para agentes com gatilhos rastreia desde quando um agente recebe uma carga útil de um gatilho por meio de quaisquer ações executadas pelo agente em resposta. Essas sessões de análise capturam o que seu agente está respondendo e o desempenho dele.

Note

Se um gatilho falhar e o agente não receber uma carga útil de gatilho, uma sessão de análise não poderá ser iniciada. A Análise rastreia somente as execuções acionadas com êxito.

Exibição híbrida - sessões tanto de conversação quanto disparadas por eventos

Quando os dados do seu agente incluem sessões para pelo menos uma conversa e pelo menos uma execução baseada em gatilhos durante o período do relatório, a página de Análise exibe uma visão híbrida de métricas relevantes tanto para sessões conversacionais quanto autônomas. Nessa visão, as seções de Visão Geral e Efetividade mostram métricas lado a lado tanto para as sessões conversacionais quanto para as que são desencadeadas por eventos. A seção Usar permite que você selecione entre Conversas ou Execuções, que exibe apenas dados relevantes. Selecionar Tudo mostra todos os dados relacionados ao uso. A seção Satisfação exibe métricas de satisfação para sessões de conversação.

Para saber mais sobre:

• Métricas relevantes exibidas para sessões de conversa, consulte Analisar a eficácia do agente de conversação.

• As métricas exibidas são relevantes para as sessões acionadas por eventos, consulte Analisar a integridade do agente autônomo.

Baixar transcrições de conversa

Você pode baixar as transcrições das conversas alguns minutos após o tempo da conversa terminar. Você pode baixar qualquer período nos últimos 29 dias. Você pode baixá-los no Dataverse usando o portal Power Apps e como transcrições de chat de sessão usando o aplicativo Copilot Studio. Pode levar até uma hora após o término da sessão analítica para que os dados relacionados apareçam no painel de análise.

Note

Não é possível baixar transcrições de conversa no Dataverse no aplicativo Copilot Studio no Teams. Para examinar e exportar transcrições no Dataverse, você precisa se inscrever para o aplicativo Web Copilot Studio. Você pode baixar transcrições de chat de sessão usando o aplicativo Copilot Studio. Para obter mais informações, consulte Baixar transcrições de sessão do agente.

Análise de uso de tópicos

Em Copilot Studio, um tópico define como uma conversa de agente progride e representa uma parte de uma conversa entre um usuário e um agente. O painel de análise de tópicos mostra como um tópico individual está sendo executado, incluindo a frequência com que ele é disparado, como as sessões que o incluem resolvem e como os usuários estão satisfeitos com essas sessões. Você pode usar essas informações para identificar tópicos que frequentemente são encaminhados para níveis superiores ou abandonados e então priorizá-los para melhorias. Para saber mais sobre tópicos e como criá-los, consulte Criar e editar tópicos.

Note

A análise de tópicos só está disponível para agentes no modo clássico e para tópicos associados a uma sessão de análise. Se o seu agente usa orquestração generativa, use os resultados da conversa e os temas na página Análises.

Para exibir o painel de análise de tópicos:

1. Navegue até a página Topic do agente no Copilot Studio.

2. Selecione o tópico que você deseja analisar. Se nenhum tópico estiver disponível, consulte Criar e editar tópicos.

3. No canto superior direito da página Tópicos, selecione Mais (...) >Análise.

O painel de análise de tópicos mostra:

• Resultados do tópico: um gráfico de resultados da sessão, Escalated, Resolved e Abandoned, para sessões em que este tópico foi acionado. Use este gráfico para avaliar rapidamente a saúde do tópico. Uma elevada proporção de resultados Escalated ou Abandoned pode significar que o tópico precisa ser melhorado.
• Uso total de tópicos: um gráfico da tendência de resultados do tópico ao longo do tempo. Use isso para detectar regressões, por exemplo, um pico nas sessões abandonadas depois que um tópico foi editado ou para confirmar se as alterações recentes melhoraram as taxas de resolução.
• Pontuação de satisfação do cliente: uma pontuação com base nas respostas da pesquisa do usuário de sessões associadas a este tópico.
• Tendência de pontuação de satisfação: um gráfico que mostra como a pontuação de satisfação muda ao longo do tempo. Use essa tendência para identificar os períodos em que o sentimento do usuário diminuiu ou melhorou.

Para alterar o intervalo de tempo, selecione a lista suspensa de intervalo de tempo na parte superior do painel de análise de tópicos.

Informações relacionadas

• Medir o ROI (retorno sobre o investimento) e o valor comercial dos agentes de IA