Descrição geral de análise

Use a análise para entender o desempenho do seu agente e identificar áreas para melhorias.

A página de Análise no Copilot Studio apresenta dados abrangentes sobre o seu agente, desde uma descrição geral das métricas principais até à análise detalhada de utilização dos componentes do seu agente. Pode desagregar cada parte dos dados para obter mais detalhes.

A experiência de análise é personalizada para agentes conversacionais e para agentes autónomos.

As análises estão disponíveis em todas as geografias. Os dados de análise estão disponíveis por um período máximo de 360 dias. Os detalhes das sessões e as informações de transcrição estão disponíveis para os últimos 28 dias. Os carimbos de hora e data na análise estão na Hora Universal Coordenada (UTC). Os carimbos de data e hora incluem as horas de início e fim do dia, os horários das sessões e quaisquer outros marcadores de tempo nos dados do seu agente.

Nota

A página de Análise não mostra a análise da atividade concluída quando testa o seu agente no Copilot Studio utilizando o painel de teste.

Conceder acesso limitado apenas de visualização à análise

Se for o proprietário do agente e quiser conceder acesso apenas à página de Análise do seu agente, pode fazê-lo partilhando o agente com a função de Visualizador de Análise ativada. Se quiser que a pessoa com quem partilha o agente tenha acesso às informações da transcrição da conversa, essa pessoa também tem de ter o direito de acesso Visualizador de Transcrições de Bot.

Saiba mais sobre como partilhar a análise de um agente.

Importante

Como proprietário de um agente, só pode partilhar a função de Visualizador de Análise a utilizadores individuais, e não a grupos de utilizadores.

Para aceder à página Análise do seu agente:

1. Abra o seu agente no Copilot Studio.
2. Selecione Análise na barra de menu superior.

Resumo

A área de Resumo utiliza o Copilot para gerar um resumo da IA das principais informações de análise sobre o seu agente. Selecione Ver Mais para ver a lista completa de informações resumidas.

Permite compreender rapidamente temas e métricas comuns e identificar áreas de melhoria para o seu agente, resumindo-as numa lista com marcas para o período de reporte selecionado. Isto pode incluir métricas de envolvimento, sentimento dos clientes e comentários, bem como tendências desde o último período de reporte.

O resumo dos comentários dos clientes (pré-visualização) ajuda a compreender o sentimento geral dos clientes em relação ao agente, como o feedback e os comentários. As informações são classificadas por ordem de prioridade com base tanto no volume de comentários relacionados como na sua importância global. Os comentários de baixo valor ou irrelevantes são filtrados e o feedback relacionado é agrupado.

Pode fornecer comentários à Microsoft sobre esta secção com os ícones Polegar para cima e Polegar para baixo. Use o painel Submeter comentários à Microsoft para adicionar um comentário e partilhar ficheiros relacionados. Ao fornecer comentários descritivo como este, podemos trabalhar juntos para melhorar continuamente o nosso produto.

1. No painel Submeter comentários à Microsoft, descreva em linguagem natural os seus gostos ou não gostos, dependendo do ícone que selecionou para abrir o painel.
2. Escolha se deseja partilhar o pedido, a resposta gerada, amostras de conteúdo relevante e ficheiros de registo adicionais.
3. Selecione Submeter.

Também pode consultar um resumo de desempenho de alto nível na área Descrição geral e, em seguida, analisar mais profundamente o desempenho.

Utilizadores ativos

As métricas de utilizadores ativos fornecem informações sobre o grau de adoção de um agente conversacional e a evolução dessa tendência ao longo do tempo. Um utilizador ativo é um utilizador único que interagiu com o agente conversacional pelo menos uma vez durante o período do relatório. A Análise do Copilot Studio apresenta contagens de utilizadores ativos para dois períodos de tempo predefinidos: utilizadores ativos diários (DAU) e utilizadores ativos mensais (MAU). A contagem diária começa e termina de acordo com um dia completo de 24 horas no fuso horário UTC. A contagem mensal segue o mês de calendário, também começando e terminando também no primeiro e no último dia, de acordo com o fuso horário UTC.

Importante

A funcionalidade Métricas de utilizador ativo só é suportada se definir o seu agente para exigir autenticação em Definições>Segurança>Autenticação.

O DAU médio para o período selecionado, mais a sua variação percentual em relação ao período anterior, aparece como um indicador chave de desempenho (KPI) na secção Descrição Geral.

Nota

A fórmula para a métrica calculada da média de DAU é: (sum of all full-day active user counts in the period) / (count of full days in the period).

Para ver mais detalhes sobre as contagens de utilizadores ativos diários e utilizadores ativos mensais ao longo do tempo, selecione o botão Ver utilizadores ativos no canto superior direito do painel de descrição geral.

Apenas sessões de conversação

A Análise para agentes de conversação no Copilot Studio rastreia o envolvimento do utilizador com o seu agente e tenta capturar o quão bem o seu agente processa as tarefas do utilizador.

A análise conversacional usa os seguintes conceitos e termos:

• As conversações são uma interação contínua entre um utilizador específico, ou grupo de utilizadores, num canal, e o seu agente.

• As conversações podem ser pausadas e retomadas mais tarde ou transferidas para um representante de suporte ao cliente. A conversação pode ser unidirecional, seja do cliente para o agente, ou do agente para o cliente, mas é mais comumente uma interação recíproca entre o cliente e o agente.

• Uma conversação excede o limite de tempo após 30 minutos de inatividade.

• Para agentes publicados no canal Telefonia, as conversações excedem o limite de tempo 3 minutos após um evento de Fim de Conversação.

• Uma única conversação pode conter uma ou mais sessões de análise.

• Uma sessão de análise no modo clássico está associada ao último tópico personalizado acionado por um utilizador. Se a sessão não incluir tópicos personalizados, trata-se do último tópico do sistema acionado diretamente pelo utilizador.

Apenas sessões de acionadores de eventos

Um agente autónomo é um agente com um acionador de evento. Estes agentes suportam apenas a análise para agentes com acionadores.

Uma sessão de análise para agentes com acionadores rastreia desde quando um agente recebe um payload de um acionador até quaisquer ações que o agente executa em resposta. Essas sessões de análise capturam o que o seu agente está a responder e o desempenho dele.

Nota

Se um acionador falhar e o agente não receber um payload de acionador, uma sessão de análise não poderá começar. A análise monitoriza apenas execuções acionadas com êxito.

Vista híbrida - sessões conversacionais e sessões acionadas por eventos

Quando os dados do seu agente incluem sessões para pelo menos uma conversação e pelo menos uma execução baseada em acionadores durante o período do relatório, a página Análise apresenta uma vista híbrida de métricas relevantes para sessões de conversação e autónomas. Nesta vista, as secções Descrição Geral e Eficácia mostram métricas lado a lado para as sessões conversacionais e as sessões com acionadores de eventos. A secção Utilização permite selecionar entre Conversações ou Execuções, mostrando apenas os dados relevantes. Selecionar Todos mostra todos os dados relativos à utilização. A secção Satisfação apresenta métricas de satisfação para sessões de conversação.

Para obter mais informações:

• Métricas apresentadas relevantes para sessões de conversação, consulte Analisar a eficácia do agente de conversação.

• Métricas apresentadas relevantes para sessões acionadas por eventos, consulte Analisar o funcionamento do agente autónomo.

Transferir transcrições de conversação

Pode transferir as transcrições das conversações alguns minutos após a conversação exceder o limite de tempo. Pode transferir qualquer período de tempo dentro dos últimos 29 dias. Pode transferi-las no Dataverse através do portal do Power Apps e como transcrições de chats de sessões através da aplicação Copilot Studio. Pode levar até uma hora após o término da sessão analítica antes que os dados relacionados sejam apresentados no dashboard de análise.

Nota

Não é possível transferir transcrições de conversações no Dataverse através da aplicação Copilot Studio no Teams. Para rever e exportar transcrições no Dataverse, precisa de iniciar sessão na aplicação Web Copilot Studio. Pode transferir as transcrições de chats de sessões utilizando a aplicação Copilot Studio. Para obter mais informações, consulte Transferir transcrições de sessão do agente.

Análise de utilização de tópicos

No Copilot Studio, um tópico define como a conversação com o agente progride e representa uma parte da conversação entre um utilizador e um agente. O painel de análise de tópicos mostra o desempenho de cada tópico, incluindo com que frequência é acionado, como se resolvem as sessões que o incluem e o nível de satisfação dos utilizadores com essas sessões. Pode utilizar estas informações para identificar tópicos que frequentemente são escalados ou abandonados e, em seguida, dar-lhes prioridade para que sejam melhorados. Para saber mais sobre tópicos e como criá-los, consulte Criar e editar tópicos.

Nota

A análise de tópicos está disponível apenas para agentes no modo clássico e para tópicos associados a uma sessão de análise. Se o seu agente utilizar orquestração generativa, utilize resultados da conversação e temas na página Análise, em alternativa.

Para ver o painel de análise de tópicos:

1. Navegue para a página Tópicos do seu agente no Copilot Studio.

2. Selecione o tópico que quer analisar. Caso não existam tópicos disponíveis, consulte Criar e editar tópicos.

3. No canto superior direito da página Tópicos, selecione Mais (...) >Análise.

O painel de análise de tópicos mostra:

• Resultados do tópico: Um gráfico dos resultados das sessões, Escalated, Resolved e Abandoned, para sessões em que este tópico foi acionado. Utilize este gráfico para avaliar rapidamente o estado de funcionamento do tópico. Uma elevada proporção de resultados Escalated ou Abandoned pode significar que o tópico necessita de melhorias.
• Utilização total do tópico: Um gráfico da tendência dos resultados do tópico ao longo do tempo. Utilize isto para detetar regressões, por exemplo, um pico nas sessões Abandonadas após um tópico ter sido editado ou para confirmar que as alterações recentes melhoraram as taxas de resolução.
• Classificação de satisfação do cliente: Uma classificação baseada nas respostas ao inquérito aos utilizadores em sessões associadas a este tópico.
• Tendência da classificação de satisfação: Um gráfico que mostra como a classificação de satisfação varia ao longo do tempo. Utilize esta tendência para identificar períodos em que o sentimento dos utilizadores diminuiu ou melhorou.

Para alterar o intervalo de tempo, selecione a lista pendente de intervalo de tempo na parte superior do painel Análise de tópicos.

Informações relacionadas

• Medir o retorno do investimento (ROI) e o valor de negócio dos agentes de IA