Microsoft 365 Insights エージェントは、テナント内のエージェントの使用状況分析とユーザー フィードバックを 1 つの Copilot エクスペリエンスに統合します。 毎日、毎週、毎月のアクティブ ユーザー、ローリング リテンション、持続性、導入傾向、エージェント比較、評価、ユーザーから送信された逐語的フィードバックについて自然言語で質問します。
使用状況の集計シグナルを使用して、何が起こっているかを理解し、評価とコメントを確認して改善すべき点を決定します。 テナントで確認できるエージェントで使用することができます。 フィードバックには、選択したエージェントの検証済みの所有権と、テナント管理者が有効なフィードバック共有が必要です。
Insights エージェントを使用する理由
エージェント オーナー、IT 管理者、ビジネス関係者はすべて、エージェントのパフォーマンスを把握する必要があります。 現在、これらの情報は、ダッシュボード、Power BI レポート、Teams 開発者ポータル、アドホック Kusto クエリ内にあり、これらの対象ユーザーのほとんどはそれらを自分で実行できません。 その結果、
- 発送後、エージェントを使用している人がいるかどうかを知るには長い時間がかかります。
- これらのソース間の同期に一貫性がない可能性があります。
- 使用状況の理解は、少数のアナリスト グループにかかっています。
- チームでは、 保持 や 持続性 などの基本的な用語を一貫性なく定義します。
- エージェントの所有者は、ユーザーがエージェントのために送信したフィードバックを確認するための一貫した方法を持っていない可能性があります。
Insights エージェントは、エージェントがいる場所と同じ Copilot Chat サーフェスで、一貫性のある文書化された一連のアクティビティ指標と回答をわかりやすい言葉で提供します。 使用状況の集計シグナルは、導入が増加しているか、維持しているか、減少しているかを示します。 評価とユーザーから送信された逐語的なフィードバックにより、ユーザーが重視するものと注意が必要なものに関する直接的なコンテキストが追加されます。
2 つのデータ型のアクセス ルールは異なります。 エージェントの可視性は、集約的な使用状況分析には十分です。 フィードバックは、要求者がエージェントを所有し、テナント管理者がそのフィードバック共有を有効にしている場合にのみ返されます。 返されたフィードバックには、送信者 ID および関連する会話の内容は含まれません。
対象
Insights エージェントは、次の 3 つの対象ユーザー向けに構築されています:
- エージェント オーナーとプロダクト マネージャー。 使用量が増加しているかどうか、頭打ちになっている場所、テナント内のピア エージェントと比較する方法を知る必要があります。 所有するエージェントの場合は、これらのシグナルを評価やコメントと組み合わせて、製品の問題を特定し、改善に優先順位を付けることができます。
- IT 管理者と Copilot チャンピオン。 導入傾向と、ビジネス スポンサーと話し合うための防御的な方法が必要です。 テナント管理者は、Microsoft 365 管理センターのエージェント フィードバック共有設定を通じて、フィードバックを所有者と共有できるかどうかを制御することもできます。 このコントロール自体では、管理者はエージェントのフィードバックにアクセスできません。
- ビジネスの利害関係者とエグゼクティブ。 エージェント投資に資金を提供し、BI ツールを学ばずにそれが報われているかどうかを定期的に平易な言葉で読みたいと考えています。
このエージェントは、個々のユーザー分析やコホート属性用には設計されていません。 詳細については、「 スコープの境界」を参照してください。
Insights エージェントでできること
Insights エージェントを使用すると、次のことができます:
- テナントで確認できるエージェントの毎日、毎週、および毎月のアクティブ ユーザーを取得します。
- 2 つのエージェントのメトリックを並べて比較します。
- ローリング ウィンドウ (過去 7 日間、過去 30 日間、またはカスタム アンカー日付) のユニーク ユーザー数を表示します。
- 個人の ID を公開せずに、集約的なローリング保持プロキシ (1、7、30、60、または 90 日) を取得します。
- 任意のエージェントの使用集中 (持続性) (DAU を MAU で割った値) を取得します。
- 一意のユーザーの前週比の変化によって、テナントで最も急成長しているエージェントを特定します。
- 過去 30 日間の分布から、エージェントの主な使用パターン (平日が多い、営業時間が集中している、安定している、またはスパイクする) の説明を読み取ることができます。
- フィードバック要求に正確なエージェントを選択できるように、所有しているエージェントを一覧表示します。
- テナント管理者がそのエージェントのフィードバック共有を有効にした場合に、所有するエージェントの評価とユーザーから送信された逐語的なコメントを確認します。
- 返されたフィードバック項目の数、サンプル時間枠、および他にフィードバックが利用できるかどうかを確認します。
- ユーザーの身元、感情、姿勢、仕事のパフォーマンスを推測せずに、返されたフィードバックで繰り返し行われる製品トピックの概要を求めます。
アクセスとデータの可視性
アクセスは、要求する情報の種類によって異なります。
- 利用状況分析。 Microsoft 365 Copilot ライセンスを持つユーザーは、テナントで表示および使用できる任意のエージェントについて質問できます。 所有権は必要ありません。 結果は集計されたものであり、個々のユーザーを特定するものではありません。
- フィードバックと評価。 依頼者は、選択したエージェントの検証済みの所有者である必要があり、テナント管理者は、すべてのエージェントのフィードバック共有を有効にするか、そのエージェントを 選択したエージェントに含める必要があります。 使用状況の可視性だけでは、フィードバック アクセスは許可されません。
- テナント管理。 エージェントのフィードバック共有設定は、フィードバックを所有者と共有できるかどうかを決定します。 これは、ユーザーが評価やコメントを送信できるかどうかには影響せず、所有権チェックも満たさない限り、管理者はエージェントのフィードバックにアクセスできません。
- ワーク IQ。 プログラムによるアクセスは、同じルールに従います: 集計された使用状況に対するエージェントの可視性。管理者が許可した共有とフィードバックの確認済みの所有権。
使用可能なメトリック
エージェントは現在、次のメトリックをサポートしています。 集計アクティビティ データから各メトリックを決定論的に計算します。 モデルから数値を生成したり、推定したりすることはありません。
| 指標 | 答えること | 計算方法 |
|---|---|---|
| 1 日のアクティブ ユーザー (DAU) | 今日または指定した日にエージェントを使用した個別ユーザーの数 | 1 日に少なくとも 1 つのセッションを持つ個別のユーザーの数 |
| 週間アクティブ ユーザー (WAU) | 7 日間のウィンドウでエージェントを使用した個別のユーザーの数 | 7 日間のウィンドウに少なくとも 1 つのセッションを持つ個別のユーザーの数 |
| 月間アクティブ ユーザー (MAU) | 30 日間にエージェントを使用した個別のユーザーの数 | 30 日間のウィンドウに少なくとも 1 つのセッションを持つ個別のユーザーの数 |
| 時間の経過に伴う一意のユーザー | ウィンドウ間でのユニーク ユーザー数の変更方法 | 連続するウィンドウにわたる一連の個別のユーザー数 |
| ペアごとの比較 | 2 つのエージェント用の DAU、WAU、MAU のサイドバイサイド | 一緒にプロットされた 2 つの並列メトリック プル |
| ローリング N 日保持プロキシ | アクティブ ユーザーのプールが維持されているか、増加しているか、または縮小しているか |
unique_users[t − N → t] / unique_users[t − 2N → t − N]、N は 1、7、30、60、または 90 です |
| 持続性 | 月間ユーザーの間での使用状況が集中しているか | DAU を MAU で割り、パーセンテージで表します |
| 導入傾向 | 週ごとまたは月ごとの一意のユーザー数の方向 | 最新の前週比または前月比デルタの符号と大きさ |
| 最も急成長 | 今週最も成長したエージェントはどれですか | スコープ内のエージェント間での一意のユーザーの週ごとの割合のランク付けされたデルタ |
| 主な使用パターン | 使用状況の時間的形状 | 過去 30 日間の DAU 分布のカテゴリ別の説明 |
重要
ローリング リテンション プロキシは、ユーザー レベルのコーホート リテンションではなく、 ウィンドウ全体の集計率です。 エージェントは常にこの警告を応答に含めます。 コホートのリテンションにはユーザーレベルの ID が必要ですが、Insights エージェントは意図的に収集しません。
利用可能なフィードバックと評価
Insights エージェントは、両方のアクセス チェックに合格した場合にのみフィードバックを返します。テナント管理者が選択したエージェントのフィードバック共有を有効にし、要求元はそのエージェントの確認済み所有者です。 エージェントを表示または使用したり、その集計された使用状況を取得したりしても、所有権が確立されたり、フィードバックへのアクセスが許可されたりするわけではありません。
| フィードバック データ | 答えること | 戻される値 |
|---|---|---|
| 評価 | ユーザーが送信した評価 | フィードバック サンプルを使用した賛成または反対の値 |
| ユーザーから送信された逐語的なフィードバック | エージェントに関するユーザーの声 | 明示的に要求された場合に再現できる逐語コメント |
| 返されたフィードバックの数 | 含まれるフィードバック項目の数 | 返されたページのフィードバック項目の数 |
| サンプル時間枠 | 返されたフィードバックが送信されたタイミング | 返されたフィードバック サンプルの開始タイムスタンプと終了タイムスタンプ (使用可能な場合) |
重要
フィードバックの結果には、提出者 ID は含まれません。 また、Insights エージェントは、AI コンテキスト、個々のプロンプトまたは応答、トランスクリプト、または会話コンテンツを公開しません。
フィードバックを要約するときに、エージェントは観察可能な製品トピックと明示的な評価を報告します。 それは、仕事のパフォーマンス、保護されたまたは敏感な個人的特徴、内面または感情の状態、または職場の態度を推測するものではありません。
使用状況とフィードバック要求のしくみ
使用状況分析の場合、一般的な対話は次のパターンに従います。
- Microsoft 365 Copilot Chat で Insights エージェントに質問します。 例: "{Agent Name} の週間アクティブ ユーザーの傾向は?
- エージェントは、サポートされているメトリックと意図を照合します。
- クエリがサポートされている場合、エージェントは、質問したエージェントとウィンドウに関連する集計メトリックを取得し、基礎となる数値を含む根拠のある回答を返します。
- クエリがサポートされていない場合 (個々のユーザーのリテンションなど)、エージェントは、サポートされている最も近いシグナルを指す決定論的でスコープダウンされた応答を返します。
サポートされているプロンプトの一覧と表現方法については、「 サンプル プロンプト」を参照してください。
フィードバックのしくみ
フィードバック要求は、個別の操作に従います。
- テナント管理者は、すべてのエージェントのエージェント フィードバック共有を有効にするか、選択したエージェントを含めます。
- どのエージェントを所有しているかを Insights エージェントに尋ねるか、正確に所有されているエージェントのフィードバックを要求します。
- エージェントは、選択されたエージェントを解決し、フィードバックを取得する前に要求元が所有者であることを確認します。
- 所有権が検証され、選択したエージェントのフィードバック共有が有効になると、エージェントは利用可能な評価と逐語的なコメントを返し、返されたフィードバック数、サンプル ウィンドウ、およびさらにフィードバックが利用可能かどうかとともに返します。
- 所有権を確認できない場合、エージェントはフィードバックを返さず、所有権の状態を説明します。
フィードバック共有の管理制御
テナント管理者は、Agents>Settings>Agent のフィードバック共有でMicrosoft 365 管理センターでのフィードバック共有を制御します。 [ すべてのエージェント] または [選択したエージェント] を選択すると、 フィードバックは該当するエージェントの検証済み所有者と共有できるようになります。 この設定は、ユーザーが評価やコメントを送信できるかどうかには影響せず、所有権チェックも満たさない限り、管理者がエージェントのフィードバックにアクセスできることはありません。 完全な構成ガイダンスについては、「 エージェント フィードバックの共有」を参照してください。
使用状況データとフィードバック データを取得する 2 つの方法
テナント内のエージェントの使用状況とフィードバック データを取得するには、Microsoft 365 Copilot Chat で Insights エージェントに直接質問するか、Work IQ を通じてプログラムで同じ機能にアクセスします。
| 製品内 (Insights エージェント) | プログラマティック (Work IQ) | |
|---|---|---|
| 説明 | Copilot Chat で Insights エージェントに自然言語の質問をする | Work IQ コマンド ラインとエンドポイントから使用状況の指標とフィードバックを取得します |
| 最適な用途 | エージェント オーナー、IT 管理者、スポンサーで、すばやくわかりやすい文章を読みたい方 | データをダッシュボード、スコアカード、またはパイプライン チェックに自動化する開発者 |
| コスト | Copilot ライセンスに含まれています。追加料金なし | Copilot クレジットで従量制 |
どちらのパスも、利用状況分析とフィードバックをサポートします。 使用状況の指標は集計されたままであり、フィードバック アクセスは同じ管理者の共有と所有権の要件に従います。 違いは、サーフェスとデータの消費方法です。
製品内エクスペリエンス (追加コストなし)
Microsoft 365 Copilot Chat 内で Insights エージェントを使用する方法は、Copilot ライセンスに含まれています。 製品内で使用状況に関する質問をしても追加料金は発生しません。 ほとんどのエージェント オーナー、IT 管理者、およびビジネス スポンサーにとって、製品内エクスペリエンスは、根拠のある回答を得るための最速の方法です。
選択したエージェントに対してフィードバックの共有が有効になっていて、所有権が確認された場合、製品内の Insights エージェント エクスペリエンスを通じてフィードバックと評価にアクセスできます。
Work IQ を使用したプログラムによるアクセス
毎週の導入スコアカードのフィード、ダッシュボードへの入力、自動パイプラインへの使用状況チェックの追加など、独自のシステムで使用状況の指標やフィードバックが必要な場合は、Work IQ を使用します。 コマンド ラインとエンドポイントを使用して、サポートされている使用状況メトリックとフィードバックをプログラムで要求し、結果を独自のワークフローに統合できます。 Work IQ プログラマティック アクセスは、Copilot クレジットを通じて請求される従量制課金制の機能です。
エージェント スコープ
Insights エージェントの範囲は狭いです。 次の機能は現在スコープ外であり、別の機能によって処理されます。
- 個々のユーザー分析。 利用状況分析レポートは、メトリックのみを集約します。 エージェントは、どの特定のユーザーがエージェントを使用したかを追跡しません。
- インストールとアンインストールの傾向。 インストール シグナルは、現在 Insights エージェントのデータ レイヤーに接続されていません。
- エンゲージメントの深さとセッションの品質。 これらのメトリックには、ユーザー レベルの ID か、現在のデータ レイヤーが提供するよりも豊富なテレメトリが必要です。
- 所有していないエージェントへのフィードバック。 使用状況の可視性は所有権を確立するものではありません。 エージェントは、所有権が確認された後にのみフィードバックを返します。
- 提出者の ID と会話の内容。 フィードバックの結果には、提出者 ID、AI コンテキスト、プロンプト、回答、トランスクリプト、会話内容は含まれません。
- フィードバックからの推論が制限されました。 エージェントは、フィードバックから仕事のパフォーマンス、保護されたまたはセンシティブな個人の特徴、内部または感情の状態、または職場の態度を推測しません。