Visão geral do agente do Microsoft 365 Insights

O Microsoft 365 Insights Agent traz análises de uso e comentários do usuário para os agentes em seu locatário em uma experiência do Copilot. Faça perguntas em linguagem natural sobre usuários ativos diários, semanais e mensais, retenção contínua, aderência, tendências de adoção, comparações de agentes, classificações e comentários textuais enviados pelo usuário.

Use sinais de uso agregados para entender o que está acontecendo e, em seguida, revise as classificações e os comentários para decidir o que melhorar. O uso está disponível para agentes que você pode ver em seu locatário. Os comentários exigem propriedade verificada e compartilhamento de comentários habilitado para administrador de locatário para o agente selecionado.

Por que usar o Agente do Insights?

Os proprietários de agentes, administradores de TI e partes interessadas de negócios precisam saber como seus agentes estão se saindo. Hoje, essas informações estão localizadas em painéis, relatórios do Power BI, Portal do Desenvolvedor do Teams e consultas ad hoc do Kusto que a maioria desses públicos não consegue executar sozinhos. Como resultado:

  • Leva muito tempo para saber se alguém está usando um agente depois de enviá-lo.
  • A sincronização entre essas fontes pode ser inconsistente.
  • Entender o uso depende de um pequeno grupo de analistas.
  • As equipes definem termos básicos como retenção e aderência de forma inconsistente.
  • Os proprietários de agentes podem não ter uma maneira consistente de revisar os comentários que os usuários enviam para seus agentes.

O Insight Agent fornece um conjunto consistente e documentado de métricas de atividade e respostas em linguagem simples na mesma superfície do Copilot Chat em que seus agentes residem. Os sinais de uso agregado mostram se a adoção está crescendo, se mantendo ou diminuindo. As classificações e os comentários textuais enviados pelos usuários adicionam contexto direto sobre o que os usuários valorizam e o que precisa de atenção.

Os dois tipos de dados têm regras de acesso diferentes. A visibilidade do agente é suficiente para análise de uso agregado. Os comentários são retornados somente quando o solicitante possui o agente e um administrador de locatários habilitou o compartilhamento de comentários para ele. Os comentários retornados excluem a identidade do remetente e o conteúdo de conversa associado.

A quem se destina

O Insight Agent foi desenvolvido para três públicos:

  1. Proprietários de agentes e gerentes de produto. Você precisa saber se o uso está crescendo, onde está se estabilizando e como ele se compara aos agentes pares em seu locatário. Para agentes que você possui, você pode combinar esses sinais com classificações e comentários para identificar problemas do produto e priorizar melhorias.
  2. Administradores de TI e defensores do Copilot. Você precisa de tendências de adoção e uma maneira defensável de discuti-las com patrocinadores comerciais. Os administradores de locatários também controlam se os comentários são qualificados para serem compartilhados com os proprietários por meio da configuração de compartilhamento de comentários do agente no Centro de administração do Microsoft 365. Esse controle, por si só, não fornece aos administradores acesso aos comentários de um agente.
  3. Stakeholders e executivos de negócios. Você financiou um investimento de agente e deseja uma leitura periódica e em linguagem simples sobre se está valendo a pena, sem aprender uma ferramenta de BI.

O agente não foi projetado para análise de usuário individual ou atribuição de coorte. Para obter mais informações, consulte Limites do escopo.

O que você pode fazer com o Agente do Insights

Usando o Agente de Insights, você pode:

  • Obtenha usuários ativos diários, semanais e mensais para qualquer agente que você possa ver em seu locatário.
  • Compare métricas de dois agentes lado a lado.
  • Veja contagens de usuários únicos em janelas sem interrupção (últimos 7 dias, últimos 30 dias ou uma data âncora personalizada).
  • Obtenha um proxy de retenção sem interrupção agregado (janelas de 1, 7, 30, 60 ou 90 dias) sem expor a identidade individual.
  • Obtenha concentração de uso (aderência) (DAU dividido por MAU) para qualquer agente.
  • Identifique o agente que mais cresce em seu locatário pela alteração semana a semana de usuários únicos.
  • Obtenha uma leitura narrativa do principal padrão de uso de um agente (intenso nos dias da semana, concentrado no horário comercial, estável ou com picos) da distribuição dos últimos 30 dias.
  • Liste os agentes que você possui para que você possa selecionar um agente exato para uma solicitação de feedback.
  • Examine as classificações e os comentários textuais enviados pelo usuário para um agente que você possui, quando o administrador do locatário habilitar o compartilhamento de feedback para esse agente.
  • Veja o número de itens de comentários retornados, a janela de tempo de exemplo e se mais comentários estão disponíveis.
  • Peça um resumo dos tópicos recorrentes do produto no feedback retornado sem inferir a identidade, emoção, atitude ou desempenho do usuário.

Acesso e visibilidade dos dados

O acesso depende do tipo de informação solicitada:

  • Análise de uso. Um usuário com uma licença do Microsoft 365 Copilot pode perguntar sobre qualquer agente que possa ver e usar em seu locatário. A propriedade não é necessária. Os resultados são agregados e não identificam usuários individuais.
  • Comentários e classificações. O solicitante deve ser um proprietário verificado do agente selecionado, e um administrador de locatários deve habilitar o compartilhamento de feedback para todos os agentes ou incluir esse agente em Agentes selecionados. A visibilidade de uso por si só não concede acesso a comentários.
  • Administração de locatários. A configuração de compartilhamento de comentários do agente determina se os comentários são qualificados para compartilhamento com os proprietários. Isso não afeta se os usuários podem enviar classificações ou comentários e não dá aos administradores acesso ao feedback de um agente, a menos que eles também satisfaçam a verificação de propriedade da marca.
  • QI de trabalho. O acesso programático segue as mesmas regras: visibilidade do agente para uso agregado; Compartilhamento habilitado pelo administrador e propriedade verificada para comentários.

Métricas disponíveis

No momento, o agente suporta as seguintes métricas. Ela calcula cada métrica de forma determinística a partir de dados de atividade agregados. Ele não gera números nem os estima a partir de um modelo.

Métrica Quais são as respostas Como é calculado
Usuários ativos diários (DAU) Quantos usuários distintos usaram o agente hoje ou em um dia especificado Contagem de usuários distintos com pelo menos uma sessão no dia
Usuários ativos semanais (WAU) Quantos usuários distintos usaram o agente em uma janela de 7 dias Contagem de usuários distintos com pelo menos uma sessão na janela de 7 dias
Usuários ativos mensais (MAU) Quantos usuários distintos usaram o agente em uma janela de 30 dias Contagem de usuários distintos com pelo menos uma sessão na janela de 30 dias
Usuários únicos ao longo do tempo Como a contagem de usuário único muda nas janelas Série de contagens de usuários distintos em janelas consecutivas
Comparação em pares Lado a lado DAU, WAU e MAU para dois agentes Duas extrações de métricas paralelas plotadas juntas
Proxy de retenção de N dias sem interrupção Se o pool de usuários ativos é mantido, está crescendo ou diminuindo unique_users[t − N → t] / unique_users[t − 2N → t − N], em que N é 1, 7, 30, 60 ou 90
Viscosidade Como o uso concentrado está entre usuários mensais DAU dividido por MAU, expresso como porcentagem
Tendência de adoção Direção da contagem de usuários únicos semana a semana ou mês a mês Sinal e magnitude do delta semana a semana ou mês a mês mais recente
Crescimento mais rápido Qual agente cresceu mais esta semana Percentual semanal de classificação delta de usuários únicos entre agentes no escopo
Padrão de uso principal Forma temporal de uso Narrativa categórica da distribuição de DAU nos últimos 30 dias

Importante

O proxy de retenção contínua é uma proporção agregada janela a janela, não uma retenção de coorte no nível do usuário. O agente sempre inclui essa advertência em sua resposta. A retenção de coorte requer identidade no nível do usuário, que o Insights Agent não coleta por design.

Comentários e classificações disponíveis

O Insight Agent retorna comentários somente quando ambas as verificações de acesso são aprovadas: um administrador de locatários habilita o compartilhamento de feedback para o agente selecionado e o solicitante é um proprietário verificado desse agente. Ser capaz de ver ou usar um agente, ou recuperar seu uso agregado, não estabelece a propriedade nem concede acesso ao feedback.

Dados de comentários Quais são as respostas O que ele retorna
Classificações Quais classificações os usuários enviaram Valores de polegar para cima ou para baixo com o exemplo de feedback
Comentários textuais enviados pelo usuário O que os usuários disseram sobre o agente Comentários literais, que podem ser reproduzidos quando explicitamente solicitados
Contagem de comentários retornados Quantos itens de comentários estão incluídos Contagem de itens de comentários na página retornada
Janela de tempo da amostra Quando o feedback retornado foi enviado Carimbos de data/hora de início e término para a amostra de comentários retornados, quando disponíveis

Importante

Os resultados do feedback não incluem a identidade do remetente. O Insight Agent também não expõe o contexto de IA, prompts ou respostas individuais, transcrições ou conteúdo de conversas.

Ao resumir o feedback, o agente relata tópicos de produto observáveis e classificações explícitas. Não infere desempenho no trabalho, características pessoais protegidas ou sensíveis, estados internos ou emocionais ou atitudes no local de trabalho.

Como funcionam as solicitações de uso e comentários

Para análise de uso, uma interação típica segue este padrão:

  1. Você faz uma pergunta ao Agente de Insights no Microsoft 365 Copilot Chat. Por exemplo, "Qual é a tendência semanal de usuário ativo para {Nome do agente}?"
  2. O agente corresponde à sua intenção com as métricas com suporte.
  3. Se a consulta tiver suporte, o agente extrai as métricas agregadas relevantes para o agente e a janela sobre a qual você perguntou e, em seguida, retorna uma resposta fundamentada com os números subjacentes.
  4. Se a consulta não tiver suporte, por exemplo, retenção de usuário individual, o agente retornará uma resposta determinística com escopo reduzido que aponta para o sinal com suporte mais próximo.

Para obter uma lista de prompts com suporte e como formulá-los, consulte Prompts de exemplo.

Como funciona o feedback

As solicitações de comentários seguem uma interação separada:

  1. Um administrador de locatários habilita o compartilhamento de feedback do agente para todos os agentes ou inclui o agente selecionado.
  2. Você pergunta ao Agente do Insights quais agentes você possui ou solicita feedback para um agente de propriedade exato.
  3. O agente resolve o agente selecionado e verifica se o solicitante é um proprietário antes de recuperar o feedback.
  4. Quando a propriedade é verificada e o compartilhamento de feedback está habilitado para o agente selecionado, o agente retorna classificações disponíveis e comentários textuais com a contagem de feedback retornado, janela de amostra e se mais feedback está disponível.
  5. Se a propriedade não puder ser verificada, o agente não retornará comentários e explicará o status de propriedade.

Administração controle para compartilhamento de comentários

Um administrador de locatários controla o compartilhamento de comentários no Centro de administração do Microsoft 365 emConfigurações> dos agentes>Compartilhamento de comentários do agente. A seleção de Todos os agentes ou Agentes selecionados torna os comentários qualificados para compartilhamento com proprietários verificados dos agentes aplicáveis. A configuração não afeta se as pessoas podem enviar classificações ou comentários e não concede aos administradores acesso ao feedback de um agente, a menos que também satisfaçam a verificação de propriedade da marca. Para obter diretrizes completas sobre a configuração, consulte Compartilhamento de comentários do agente.

Duas maneiras de obter dados de uso e de comentários

Você pode obter dados de uso e comentários para agentes em seu locatário perguntando ao Agente de Insights diretamente no Microsoft 365 Copilot Chat ou acessando os mesmos recursos programaticamente por meio do Work IQ.

No produto (Agente do Insights) Programática (QI de Trabalho)
O que é Faça perguntas em linguagem natural ao Agente do Insights no Copilot Chat Extraia métricas de uso e comentários da linha de comando e dos pontos de extremidade do Work IQ
A melhor opção para Proprietários de agentes, administradores de TI e patrocinadores que desejam uma leitura rápida e simples Desenvolvedores automatizando os dados em painéis, scorecards ou verificações de pipeline
Custo Incluído com sua licença do Copilot; Sem custo adicional Medido por meio de Créditos do Copilot

Ambos os caminhos dão suporte a análise, análise de uso e comentários. As métricas de uso permanecem agregadas e o acesso aos comentários segue os mesmos requisitos de compartilhamento e propriedade do administrador. A diferença é a superfície e como você consome os dados.

Experiência no produto (sem custo adicional)

Usar o Agente do Insights no Microsoft 365 Copilot Chat está incluído na sua licença do Copilot. Não há nenhum custo adicional para fazer perguntas de uso no produto. Para a maioria dos proprietários de agentes, administradores de TI e patrocinadores de negócios, a experiência no produto é a maneira mais rápida de obter uma resposta fundamentada.

Você pode acessar comentários e classificações por meio da experiência do agente do Insights no produto quando o compartilhamento de comentários está habilitado para o agente selecionado e sua propriedade é verificada.

Acesso programático com o Work IQ

Quando você quiser métricas de uso ou feedback em seus próprios sistemas, por exemplo, alimentar um scorecard de adoção semanal, preencher um dashboard ou adicionar uma marca de uso a um pipeline automatizado, use o Work IQ. Por meio de sua linha de comando e pontos de extremidade, você pode solicitar as métricas de uso com suporte e comentários programaticamente e integrar os resultados em seus próprios fluxos de trabalho. O acesso programático do Work IQ é um recurso limitado e baseado no consumo cobrado por meio de Créditos do Copilot.

Escopo do agente

O Insight Agent tem um escopo restrito. No momento, as funcionalidades a seguir estão fora do escopo e são tratadas por capacidades separadas:

  • Análise de usuário individual. Apenas métricas agregadas do relatório de análise de uso. O agente não rastreia quais usuários específicos usaram um agente.
  • Instalar e desinstalar tendências. O sinal de instalação não está conectado à camada de dados do Agente de Insights.
  • Profundidade do engajamento e qualidade da sessão. Essas métricas exigem identidade no nível do usuário ou telemetria mais avançada do que a fornecida pela camada de dados atual.
  • Feedback para agentes que você não possui. A visibilidade de uso não estabelece propriedade. O agente retorna comentários somente depois que a propriedade é verificada.
  • Identidade do remetente e conteúdo da conversa. Os resultados do feedback não incluem identidade do remetente, contexto de IA, prompts, respostas, transcrições ou conteúdo da conversa.
  • Inferências restritas do feedback. O agente não infere desempenho no trabalho, características pessoais protegidas ou sensíveis, estados internos ou emocionais ou atitudes no local de trabalho a partir do feedback.