Copilot Studio エージェント レポート (プレビュー)

重要

この機能は、パブリック プレビューのお客様専用です。 プレビューの機能が完了していない可能性があり、より広範なリリースで利用できるようになる前に変更が加えられる可能性があります。

Copilot Studio エージェント レポートは、organization内のさまざまなチャネルに展開されるMicrosoft Copilot Studioに組み込まれているエージェントの導入と影響を理解するのに役立ちます。

このレポートは、次のような質問に回答するのに役立ちます。

• 使用されている上位のエージェントは何ですか?
• 上位エージェントの KPI に似たセッション、満足度スコア、成功率は何ですか?
• エンゲージされたセッションやトピックの配布の分割、エージェント支援時間の影響など、個々のエージェントの影響は何ですか?

エージェント KPI の例

• エージェントのエンゲージメントを測定する。 詳細情報 を参照してください。
• エージェントの結果を測定する。 詳細情報 を参照してください。

このレポートで取り上げた内容:

次のようなチャネルにデプロイされるMicrosoft Copilot Studioに組み込まれているエージェント。

• カスタム Web サイトとデモ Web サイト
• Microsoft TeamsとMicrosoft 365 Copilot
• モバイル アプリ
• Facebook
• Skype、Twilio、Microsoft Cortana などの Azure ボット サービス チャネル

このレポートで取り上 げられない内容 :

1. [エージェントをMicrosoft 365 Copilotで使用できるようにする] 設定を使用してMicrosoft 365 CopilotおよびCopilot Chatに発行されるMicrosoft Copilot Studioを使用して構築されたエージェント

2. Microsoft 365 Copilotでエージェント ビルダーを使用して構築されたエージェント

3. ビジネス全体のシグナルにプロアクティブに応答し、タスクを開始する自律型エージェント。これは、人間の介入なしにイベントやトリガーに反応するように構成できます。 詳細情報 を参照してください。

4. クラシック オーケストレーションの代わりにジェネレーティブ AI を使用するエージェント。 ジェネレーティブ オーケストレーションとクラシック オーケストレーションの詳細については、こちらをご覧ください。

5. Microsoft Sharepoint やサード パーティ製アプリ内など、Microsoft Copilot Studioの外部に構築されたエージェント

前提条件

このレポートは、次の適格性条件を満たすテナントに対して有効になります。

1. テナントには、少なくとも 50 個の Copilot ライセンスが必要です。
2. テナントには、スタンドアロン、従量課金制、Copilot にバンドルされた少なくとも 1 つのMicrosoft Copilot Studio ライセンスが必要であり、少なくとも 1 つのエージェントが作成され、"運用環境" 環境内に発行されている必要があります。 詳細情報 を参照してください。

さらに、クエリを実行して Power BI でレポートを設定する前に、次の作業を行う必要があります。

• Viva Insights で分析情報アナリストの役割を割り当てられる。 ロールを割り当てる方法の詳細については、こちらをご覧ください。
• 2022 年 6 月以降のバージョンの Power BI Desktop をインストールする。 以前のバージョンの Power BI がインストールされている場合は、アンインストールしてから新しいバージョンをインストールしてください。 [Power BI Desktop の取得] に移動し、最新バージョンをダウンロードしてインストールします。
• Copilot StudioからのデータがViva Insightsに流れるようにします。 既定では、Viva Insightsにデータ フローをCopilot Studioします。

レポートの設定

クエリの実行

1. Viva Insights アナリスト エクスペリエンスで、[分析の作成] を選択します。

2. [Power BI テンプレート] で、[Copilot Studio エージェント レポート] に移動し、[分析のセットアップ] を選択します。 テンプレートは Copilot セクションにも表示されます。

3. [クエリの設定] で、次の操作を行います:

   1. クエリ名を入力します。
   2. [ 期間] を選択します。既定値は [過去 1 か月] です。

   注:

   開始するには、先月をカバーする分析のみを実行できますが、最終的には、より多くのデータを収集Microsoft Copilot Studio、より長い期間を選択できるようになります。

   3. [自動更新] を設定します (省略可能)。 [自動更新] を選択して、クエリを自動的に 更新するように設定できます。 このオプションを選択すると、更新されたエージェント データを取得するたびに、クエリViva Insights自動的に実行され、新しい結果が計算されます。

   4. 説明を入力します (省略可能)。

   注:

   [ その他の設定 ] ウィンドウには、[ グループ化] と [ メトリック ルール ] の設定も含まれています。 この Power BI クエリは [ 月ごとにグループ化] に設定されており、この設定を変更することはできません。また、 メトリック ルール の設定を変更することもできません。

4. [ 定義済みのテンプレート メトリック] で、事前に選択されたメトリックの一覧を表示します。これは灰色のタグとして表示されます。 これらのメトリックは、Power BI レポートを設定するために必要であり、それらを削除することはできません。 このレポートの他のメトリックを追加することはできません。

5. [ クエリに含めるエージェントの選択] でフィルターを追加して、レポートのスコープ内のエージェントを絞り込みます。 エージェント名、エージェント サーフェス、およびエージェントの種類でフィルター処理できます。

6. [ クエリに含めるエージェント属性の選択] で、属性が自動的に選択されます。 クエリが実行されたら、これらの属性を使用してレポートをグループ化し、フィルター処理できます。

   重要

   この Power BI クエリを実行するには、いくつかの特定の属性が必要であり、事前に選択されています。 これらの属性は灰色で表示され、削除することはできません。 [属性の追加] を選択して他の属性を追加することはできません。

7. 右上の [ 実行 ] を選択します。 クエリの実行には数分かかる場合があります。

クエリ結果にアクセスする

レポートには、次の 2 つの方法でアクセスできます。

• ブラウザーでレポートを表示します。 レポートのみを表示する場合は、このオプションを使用します。 

• Power BI Desktop で Power BI テンプレートを開き、クエリ結果に接続します。 レポートをカスタマイズする場合、またはレポートを Power BI サービスに発行して組織内の他のユーザーと共有する場合は、このオプションを使用します。

ブラウザーでレポートを表示する

ブラウザーでレポートを表示するには、[クエリ結果］ ページ に移動し、[表示] 列の目のアイコンを選択します。 アナリスト エクスペリエンスで他のタスクを実行しながらレポートをバックグラウンドで保持する場合は、[ 新しいタブで開く] を選択します 。

Power BI Desktop で Power BI テンプレートを開く

1. [クエリ結果] ページに移動し、[アクション] 列の Power BI アイコンを選択して、Power BI テンプレートをダウンロードし、クエリとパーティションの識別子を取得します。 これらの識別子は後で必要になります。 

2. ダウンロードしたテンプレートを開きます。 

3. プログラムの選択を求められた場合は [Power BI] を選択します。 

4. Power BI の以下の指示に従います:

   1. パーティションとクエリ識別子を貼り付けます。 
   2. [読み込み] を選択し、Power BI にクエリ結果を インポートします。

5. Power BI からメッセージが表示された場合は、組織のアカウントを使用してサインインします。 その後、Power BI はデータを読み込んで準備します。 大きなファイルの場合、このプロセスには数分かかる場合があります。

   重要

   Viva Insights のアクセスに使用するのと同じアカウントで、Power BI にサインインする必要があります。 使用可能な場合は、左側から [組織アカウント] を選択します。 複数回サインインする必要がある場合があります。

   

ページ レベルの設定

各レポート ページの上部には、次の設定が含まれています。

• レポートの期間 – 表示するデータの開始日と終了日を選択します。

• フィルターの適用 – カテゴリ、エージェント名、エージェントの使用状況の種類を選択して、レポートに表示されるエージェントをフィルター処理します。

このレポートについて

Copilot Studio エージェント レポートには、organization全体でエージェントの導入と KPI を理解するのに役立つ次のレポート ページが含まれています。

エージェントの概要

このページでは、選択したフィルターのorganization全体でのエージェントの導入の初期概要について説明します。 左側のカードには、関与したセッションに基づくアクティブなエージェントの合計数が表示されます。 左側には、関与しているエージェント セッションの総数と、エージェント支援時間に基づくエージェントの影響を示すカードもあります。 エージェントのエンゲージメントと結果の測定について詳しくは、こちらをご覧ください。

ページの中央にあるカードは、アクティブなエージェントの数、セッション数、エージェント支援時間が時間の経過とともにどのように変化したかを示しています。 ドロップダウンを使用してメトリックを切り替えます。

右側のカードは、毎月のエンゲージメント セッションの数に基づいて上位 5 つのエージェントを識別します。

ページの上部で、[カテゴリ] と [使用状況の種類] でフィルター処理することもできます。 [使用状況の種類] で、[ 内部 ] を選択して、社内の従業員向けシナリオのメトリックを表示します。 [ 外部] を選択すると、パブリック Web サイトなど、外部で使用されるエージェントのメトリックが表示されます。

organization全体で使用される上位エージェントを特定する

このページでは、月間参加セッション数に基づいて降順で並べ替えられた上位エージェントに焦点を当て、主要なエージェント KPI を調べることができます。

このページのエージェントは、カテゴリ、エージェント名、使用状況の種類 (organizationの内部または外部など) を使用してフィルター処理できます。

個々のエージェントの詳細

このページでは、選択したフィルターを使用して特定のエージェントの特定の KPI について詳しく説明します。 左側のグラフには、時間の経過に伴う関与セッションの数が示されており、解決、破棄、エスカレーションに基づいて、このセッションの結果とエージェント セッションの結果を切り替えることができます。

ページの中央のグラフには、選択した時間枠のエージェントの満足度スコアと、エージェントをorganization全体にデプロイすることで得られるエージェント支援時間の数も表示されます。 会話エージェント セッションの各タスクについて、メトリックは人間がかかった時間とエージェントが実際にかかった時間の差を比較し、すべてのタスクとセッションでこれらの違いを合計します。

右側のグラフには、選択した時間枠内のエージェントのトピックごとのセッション数が表示されます。 Copilot Studioのトピックの詳細については、こちらをご覧ください。

エージェント支援時間

エージェント支援時間は、エージェントを使用してタスクを実行することで従業員が保存した時間の量を見積もります。 エンゲージされたエージェント セッションの数、ナレッジ ソース参照の数、セッションの結果、時間節約の乗数を使用して、エージェント支援時間の合計を計算します。 このメトリックは、エージェントをデプロイすることで、企業が効率の向上と時間の節約を理解するのに役立ちます。

メトリックの数式を次に示します。

エージェント支援時間 = (ナレッジ ソース参照の数 + ナレッジ ソースのないセッションの加重数) x 時間節約乗数

特定のエージェントには複数のセッションがあり、一部はナレッジ ソースへの参照を持ち、他のエージェントは参照しない場合があります。 ナレッジ ソース参照ごとに、従業員の保存時間は、時間節約乗数の値と等しいと推定されます。 ナレッジ ソース参照のないセッションの場合は、セッションの結果に基づいて推定される時間の節約も考えられます。 解決されたセッションは完全なセッションとしてカウントされ、エスカレートされたセッションと破棄されたセッションは 0.7 に重み付けされます。 これらの重みは、各結果の種類のセッション期間の Microsoft 分析に基づいて、タスク完了の範囲を見積もることによって決定されます。

時間節約の乗数はカスタマイズ可能です。これには、Microsoft のチーフ エコノミスト局の調査 ( 「検索の緊張」を参照)、情報取得に関連するタスクの平均 6 分の保存時間 ( ブログ投稿のセクション 2 のスタディ #4 を参照)、タスクを作成するための 6 分間の時間節約を強調した研究 ( ブログ投稿のセクション 2 の研究 #1 を参照) など、AI の使用状況に関する調査に基づく既定値がカスタマイズできます。 これらの生産性の向上を最大化する方法に関するその他のガイダンスについては、「 変更のエージェント」を参照してください。 既定の乗数は見積もりであり、新しいデータが使用可能になると時間の経過と同時に調整される可能性があります。

乗数の値を編集するには、計算ツールを選択します。ここで、特定のエージェントに対してこのメトリックがどのように計算されるかの内訳が表示されます。 値を変更すると、レポート内のすべてのエージェントに対して更新されます。

エージェント支援値

これは、特定の期間におけるエージェントの影響の値の推定値であり、エージェント支援時間に平均時間単価を乗算して計算されます。 既定では、この時間単価は、米国労働統計局によってコンパイルされたデータに基づいて$72 に設定されます。 平均時間単価を更新するには、[計算ツール] を選択します。ここで、更新された設定で合計値がどのように計算されるかの内訳が表示されます。

エージェント支援時間とエージェント支援値を切り替えるには、カードの右上にある適切な記号を選択します。

エージェント データCopilot Studio削除する

管理者は、PowerShell を使用してテナントの既存のエージェント データを削除できます。 詳細情報を参照してください。

データが削除されると、クエリは自動更新されません。また、新しいクエリを 1 か月間実行することはできません。

Power Platform 管理センターの設定の場所

1. Microsoft 365 サービスの設定
2. Microsoft Copilot StudioからViva Insightsへのデータ フローの設定
3. クロス Geo 設定

Power BI のヒント、よく寄せられる質問、トラブルシューティング

レポートとその他の Power BI のヒントを共有する方法、問題のトラブルシューティングを行う方法、FAQ を確認する方法について説明します。

関連項目

Filters