Microsoft 365 Insights 에이전트 개요

Microsoft 365 Insights 에이전트는 테넌트의 에이전트에 대한 사용 현황 분석 및 사용자 피드백을 하나의 Copilot 환경으로 가져옵니다. 일일, 주간 및 월간 활성 사용자, 롤링 리텐션, 고정, 채택 추세, 에이전트 비교, 평점 및 사용자가 제출한 축자 피드백에 대해 자연어로 질문합니다.

집계된 사용 신호를 사용하여 진행 상황을 파악한 다음 평점 및 댓글을 검토하여 개선할 사항을 결정합니다. 사용량은 테넌트에서 볼 수 있는 에이전트에 사용할 수 있습니다. 피드백을 사용하려면 선택한 에이전트에 대해 확인된 소유권 및 테넌트 관리자 사용 피드백 공유가 필요합니다.

Insights 에이전트를 사용하는 이유

에이전트 소유자, IT 관리자 및 비즈니스 이해 관계자는 모두 에이전트의 업무 방식을 알아야 합니다. 현재 해당 정보는 대시보드, Power BI 보고서, Teams 개발자 포털 및 이러한 대상 대부분이 직접 실행할 수 없는 임시 Kusto 쿼리에 있습니다. 이에 따른 결과는 다음과 같습니다.

  • 배송 후 에이전트를 사용하는 사람이 있는지 여부를 확인하는 데 시간이 오래 걸립니다.
  • 이러한 원본 간의 동기화가 일관되지 않을 수 있습니다.
  • 사용법을 이해하는 것은 소수의 분석가 그룹에 달려 있습니다.
  • 팀은 보존 및 점착성과 같은 기본 용어를 일관되지 않게 정의합니다.
  • 에이전트 소유자는 사용자가 에이전트에 대해 제출한 피드백을 검토하는 일관된 방법을 가지고 있지 않을 수 있습니다.

Insights 에이전트는 에이전트가 거주하는 동일한 Copilot Chat 표면에서 일관되고 문서화된 활동 메트릭과 답변 세트를 일반 언어로 제공합니다. 집계 사용량 신호는 채택이 증가하고 있는지, 유지하고 있는지, 감소하고 있는지를 보여줍니다. 평점 및 사용자가 제출한 축자 피드백은 사용자가 중요하게 여기는 것과 주의가 필요한 것에 대한 직접적인 컨텍스트를 추가합니다.

두 데이터 형식에는 서로 다른 액세스 규칙이 있습니다. 에이전트 가시성은 집계 사용 현황 분석에 충분합니다. 피드백은 요청자가 에이전트를 소유하고 테넌트 관리자가 에이전트에 대한 피드백 공유를 사용하도록 설정한 경우에만 반환됩니다. 반환된 피드백에는 제출자 ID 및 관련 대화 콘텐츠가 제외됩니다.

사용 대상:

Insights 에이전트는 다음 세 가지 대상을 위해 빌드되었습니다.

  1. 에이전트 소유자 및 제품 관리자. 사용량이 증가하고 있는지, 정체되고 있는지, 테넌트의 피어 에이전트와 어떻게 비교되는지 알아야 합니다. 소유한 에이전트의 경우 이러한 신호를 평점 및 코멘트와 페어링하여 제품 문제를 식별하고 개선의 우선순위를 지정할 수 있습니다.
  2. IT 관리자 및 Copilot 챔피언. 채택 추세와 비즈니스 스폰서와 논의할 수 있는 방어 가능한 방법이 필요합니다. 테넌트 관리자는 또한 Microsoft 365 관리 센터의 에이전트 피드백 공유 설정을 통해 피드백을 소유자와 공유할 수 있는지 여부를 제어합니다. 이 컨트롤 자체만으로 관리자에게 상담원의 피드백에 대한 액세스 권한을 부여하지는 않습니다.
  3. 비즈니스 이해 관계자 및 임원. 에이전트 투자에 자금을 조달했으며 BI 도구를 배우지 않고 그것이 성과를 거두고 있는지 정기적으로 일반 언어로 읽고 싶습니다.

에이전트는 개별 사용자 분석 또는 코호트 특성을 위해 설계되지 않았습니다. 자세한 내용은 범위 경계를 참조하세요.

Insights 에이전트로 수행할 수 있는 작업

Insights 에이전트를 사용하여 다음을 수행할 수 있습니다.

  • 테넌트에서 볼 수 있는 모든 에이전트에 대해 일일, 주간 및 월간 활성 사용자를 가져옵니다.
  • 두 에이전트의 메트릭을 나란히 비교합니다.
  • 롤링 기간(지난 7일, 지난 30일 또는 사용자 지정 앵커 날짜)에 대한 고유 사용자 수를 확인합니다.
  • 개별 ID를 노출하지 않고 집계 롤링 보존 프록시(1, 7, 30, 60 또는 90일 창)를 가져옵니다.
  • 에이전트에 대한 사용 농도(고정)(DAU를 MAU로 나눈 값)를 가져옵니다.
  • 고유 사용자의 주별 변화를 통해 테넌트에서 가장 빠르게 성장하는 에이전트를 식별합니다.
  • 지난 30일 분포에서 상담원의 주요 사용 패턴(평일 중심, 업무 시간 집중, 꾸준 또는 급증)에 대한 설명을 가져옵니다.
  • 피드백 요청에 대한 정확한 에이전트를 선택할 수 있도록 소유한 에이전트를 나열합니다.
  • 테넌트 관리자가 해당 에이전트에 대한 피드백 공유를 사용하도록 설정한 경우 소유한 에이전트에 대한 평점 및 사용자가 제출한 축어 주석을 검토합니다.
  • 반환된 피드백 항목 수, 샘플 기간, 더 많은 피드백이 있는지 여부를 확인합니다.
  • 사용자 ID, 감정, 태도 또는 작업 성과를 추론하지 않고 반환된 피드백에서 반복되는 제품 topics의 요약을 요청합니다.

액세스 및 데이터 가시성

액세스는 요청하는 정보의 유형에 따라 다릅니다.

  • 사용 현황 분석. Microsoft 365 Copilot 라이선스가 있는 사용자는 테넌트에서 보고 사용할 수 있는 에이전트에 대해 질문할 수 있습니다. 소유권이 필요하지 않습니다. 결과는 집계되며 개별 사용자를 식별하지 않습니다.
  • 피드백 및 평점. 요청자는 선택한 에이전트의 확인된 소유자여야 하며 테넌트 관리자는 모든 에이전트에 대해 피드백 공유를 활성화하거나 선택한 에이전트 아래에 해당 에이전트를 포함해야 합니다. 사용 현황 가시성만으로는 피드백 액세스 권한이 부여되지 않습니다.
  • 테넌트 관리. 에이전트 피드백 공유 설정은 피드백을 소유자와 공유할 수 있는지 여부를 결정합니다. 이는 사용자가 평점 또는 댓글을 제출할 수 있는지 여부에 영향을 주지 않으며, 소유권 검사도 충족하지 않는 한 관리자에게 상담원의 피드백에 대한 액세스 권한을 부여하지 않습니다.
  • 업무 IQ. 프로그래밍 방식 액세스는 동일한 규칙을 따릅니다. 집계 사용량에 대한 에이전트 가시성; 피드백에 대해 관리자가 허용한 공유 및 확인된 소유권.

사용 가능한 메트릭

에이전트는 현재 다음 메트릭을 지원합니다. 집계된 활동 데이터에서 각 메트릭을 결정론적으로 계산합니다. 모델에서 숫자를 생성하거나 추정하지 않습니다.

메트릭 답변 내용 계산 방법
DAU(일별 활성 사용자) 오늘 또는 지정된 날짜에 에이전트를 사용한 고유 사용자 수 하루에 최소 하나의 세션이 있는 고유 사용자의 수
주간 활성 사용자(WAU) 7일 동안 에이전트를 사용한 고유 사용자 수 7일 이내에 세션이 하나 이상 있는 고유 사용자의 수
MAU(월별 활성 사용자) 30일 동안 에이전트를 사용한 고유 사용자 수 30일 이내에 세션이 하나 이상 있는 고유 사용자의 수
시간별 고유 사용자 고유 사용자 수가 여러 창에서 변경되는 방식 연속된 창에서 일련의 고유 사용자 수
Pairwise 비교 두 에이전트에 대한 병렬 DAU, WAU 및 MAU 함께 플롯된 두 개의 병렬 메트릭 풀
롤링 N일 보존 프록시 활성 사용자 풀의 지속, 증가 또는 축소 여부 unique_users[t − N → t] / unique_users[t − 2N → t − N], 여기서 N은 1, 7, 30, 60 또는 90입니다
점착 월간 사용자 중 사용량이 집중된 정도 DAU를 MAU로 나눈 값(백분율로 표시)
채택 추세 고유 사용자 수가 전주 대비 또는 월별 방향 가장 최근의 주간 또는 월별 델타의 부호 및 크기
가장 빠르게 성장하고 있습니다. 이번 주에 가장 많이 성장한 에이전트 scope에 있는 에이전트 전체의 고유 사용자의 주간 순위 백분율 델타
주요 사용 패턴 사용의 시간적 모양 지난 30일 동안 DAU 분포의 범주형 설명

중요

롤링 보존 프록시는 사용자 수준 코호트 보존이 아닌 집계 기간 대비 비율입니다. 에이전트는 항상 응답에 이 주의 사항을 포함합니다. 코호트 보존에는 Insights 에이전트가 의도적으로 수집하지 않는 사용자 수준 ID가 필요합니다.

사용 가능한 피드백 및 평점

Insights 에이전트는 두 액세스 검사를 모두 통과하는 경우에만 피드백을 반환합니다. 테넌트 관리자가 선택한 에이전트에 대한 피드백 공유를 활성화하고 요청자가 해당 에이전트의 확인된 소유자입니다. 에이전트를 보거나 사용하거나 집계 사용량을 검색할 수 있다고 해서 소유권이 설정되거나 피드백에 대한 액세스 권한이 부여되는 것은 아닙니다.

피드백 데이터 답변 내용 반환되는 항목
등급 사용자가 제출한 평가 피드백 샘플의 좋아요 또는 싫어요 값
사용자가 제출한 축어 피드백 에이전트에 대한 사용자의 의견 명시적으로 요청된 경우 재현할 수 있는 축자 주석
반환된 피드백 수 포함된 피드백 항목 수 반환된 페이지의 피드백 항목 수
샘플 기간 반환된 피드백이 제출된 시점 반환된 피드백 샘플의 시작 및 종료 타임스탬프(사용 가능한 경우)

중요

피드백 결과에 제출자 ID가 포함되지 않습니다. 또한 Insights 에이전트는 AI 컨텍스트, 개별 프롬프트 또는 응답, 대본 또는 대화 콘텐츠를 노출하지 않습니다.

피드백을 요약할 때 에이전트는 관찰 가능한 제품 topics 및 명시적 평점을 보고합니다. 이는 업무 성과, 보호받거나 민감한 개인적 특성, 내부 또는 감정 상태 또는 직장 태도를 유추하지 않습니다.

사용 및 피드백 요청 작동 방식

사용 현황 분석의 경우 일반적인 상호 작용은 다음 패턴을 따릅니다.

  1. Microsoft 365 Copilot Chat에서 Insights 에이전트에게 질문합니다. 예를 들어 "{에이전트 이름}의 주간 활성 사용자 추세는 어떤가요?"입니다.
  2. 에이전트가 사용자의 의도를 지원되는 메트릭과 일치시킵니다.
  3. 쿼리가 지원되는 경우 에이전트는 사용자가 질문한 에이전트 및 창에 대한 관련 집계 메트릭을 가져온 다음 기본 숫자와 함께 근거 답변을 반환합니다.
  4. 쿼리가 지원되지 않는 경우(예: 개별 사용자 보존) 에이전트는 지원되는 가장 가까운 신호를 가리키는 결정론적인 범위가 좁은 응답을 반환합니다.

지원되는 프롬프트 목록과 표현 방법은 샘플 프롬프트를 참조하세요.

피드백 작동 방식

피드백 요청은 별도의 상호 작용을 따릅니다.

  1. 테넌트 관리자는 모든 에이전트에 대해 에이전트 피드백 공유를 활성화하거나 선택한 에이전트를 포함합니다.
  2. Insights 에이전트에게 소유하고 있는 에이전트를 요청하거나 정확히 소유한 에이전트에 대한 피드백을 요청합니다.
  3. 에이전트는 피드백을 검색하기 전에 선택한 에이전트를 확인하고 요청자가 소유자인지 확인합니다.
  4. 소유권이 확인되고 선택한 에이전트에 대한 피드백 공유가 활성화되면 에이전트는 반환된 피드백 수, 샘플 창 및 추가 피드백이 있는지 여부와 함께 사용 가능한 평점 및 축어 주석을 반환합니다.
  5. 소유권을 확인할 수 없는 경우 에이전트는 피드백을 반환하지 않고 소유권 상태를 설명합니다.

피드백 공유를 위한 관리 컨트롤

테넌트 관리자는 에이전트>설정> 에이전트피드백 공유의 Microsoft 365 관리 센터에서 피드백 공유를 제어합니다. 모든 에이전트 또는 선택한 에이전트를 선택하면 피드백을 해당 에이전트의 확인된 소유자와 공유할 수 있습니다. 이 설정은 사용자가 평점 또는 댓글을 제출할 수 있는지 여부에 영향을 주지 않으며, 소유권 검사를 충족하지 않는 한 관리자에게 상담원의 피드백에 대한 액세스 권한을 부여하지 않습니다. 전체 구성 지침은 에이전트 피드백 공유를 참조하세요.

사용 현황 및 피드백 데이터를 가져오는 두 가지 방법

Microsoft 365 Copilot Chat에서 직접 Insights 에이전트에 요청하거나 Work IQ를 통해 프로그래밍 방식으로 동일한 기능에 액세스하여 테넌트의 에이전트에 대한 사용 현황 및 피드백 데이터를 가져올 수 있습니다.

제품 내(Insights 에이전트) 프로그래밍 방식(Work IQ)
설명 Copilot Chat에서 Insights 에이전트에게 자연어로 질문하기 Work IQ 명령줄 및 엔드포인트에서 사용 현황 메트릭 및 피드백 가져오기
다음에 가장 적합: 에이전트 소유자, IT 관리자, 후원자가 빠르고 평이한 언어로 읽기를 원하는 경우 대시보드, 성과 기록표 또는 파이프라인 검사로 데이터를 자동화하는 개발자
비용 Copilot 라이선스에 포함되어 있습니다. 추가 비용 없음 Copilot 크레딧을 통해 측정됨

두 경로 모두 사용 현황 분석 및 피드백을 지원합니다. 사용 현황 메트릭은 집계로 유지되며 피드백 액세스는 동일한 관리자 공유 및 소유권 요구 사항을 따릅니다. 차이점은 표면과 데이터를 사용하는 방법입니다.

제품 내 환경(추가 비용 없음)

Microsoft 365 Copilot Chat 내에서 Insights 에이전트 사용은 Copilot 라이선스에 포함되어 있습니다. 제품에서 사용 관련 질문을 하는 경우 추가 요금이 부과되지 않습니다. 대부분의 에이전트 소유자, IT 관리자 및 비즈니스 스폰서에게 제품 내 경험은 기초 있는 답변을 얻는 가장 빠른 방법입니다.

선택한 에이전트에 대해 피드백 공유가 활성화되어 있고 소유권이 확인되면 제품 내 Insights 에이전트 환경을 통해 피드백 및 평점에 액세스할 수 있습니다.

Work IQ를 사용한 프로그래밍 방식 액세스

주간 채택 성과 기록표 제공, dashboard 채우기 또는 자동화된 파이프라인에 사용 검사 추가 등 자체 시스템에서 사용 현황 메트릭 또는 피드백이 필요한 경우 Work IQ를 사용합니다. 명령줄 및 엔드포인트를 통해 지원되는 사용 현황 메트릭 및 피드백을 프로그래밍 방식으로 요청하고 결과를 자체 워크플로에 통합할 수 있습니다. Work IQ 프로그래밍 방식 액세스는 Copilot 크레딧을 통해 청구되는 요금제 사용량 기반 기능입니다.

Agent scope

Insights 에이전트의 scope는 좁습니다. 다음 기능은 현재 scope 범위를 벗어나며 별도의 기능에서 처리됩니다.

  • 개별 사용자 분석. 사용 현황 분석 보고서는 집계 메트릭만 해당됩니다. 에이전트는 어떤 특정 사용자가 에이전트를 사용했는지 추적하지 않습니다.
  • 설치 및 제거 추세. 설치 신호가 현재 Insights 에이전트 데이터 계층에 연결되어 있지 않습니다.
  • 참여 깊이 및 세션 품질. 이러한 메트릭에는 사용자 수준 ID 또는 현재 데이터 계층이 제공하는 것보다 더 풍부한 원격 분석이 필요합니다.
  • 소유하지 않은 에이전트에 대한 피드백입니다. 사용 가시성은 소유권을 설정하지 않습니다. 에이전트는 소유권이 확인된 후에만 피드백을 반환합니다.
  • 제출자 ID 및 대화 콘텐츠. 피드백 결과에는 제출자 ID, AI 컨텍스트, 프롬프트, 응답, 대본 또는 대화 내용이 포함되지 않습니다.
  • 피드백에서 제한된 유추입니다. 에이전트는 피드백에서 업무 성과, 보호받거나 민감한 개인적 특성, 내부 또는 감정 상태 또는 직장 태도를 유추하지 않습니다.