分析の概要

分析を使用して、エージェントのパフォーマンスを把握し、改善が必要な領域を特定します。

Copilot Studioの アナリティクス ページは、エージェントの主要な指標の概要からエージェントのコンポーネントに関する詳細な使用分析まで、包括的なデータを表示します。 各データをドリルダウンして詳細を取得できます。

分析エクスペリエンスは、 会話型エージェント と 自律エージェント向けに調整されています。

分析はすべての地域で利用可能です。 分析における時刻と日付のスタンプは協調ユニバーサル時(UTC)で表されます。 時間と日付のスタンプには、日の開始・終了時刻、セッション時間、そしてエージェントのデータにあるその他のタイムマーカーが含まれます。

注意

Copilot Studioでテストパネルを使ってエージェントをテストした際のアクティビティの分析は、分析ページには表示されません。

プロセス分析を実施する方法:

1. Copilot Studio でエージェントを開きます。
2. 上部のメニュー バーで [ 分析 ] を選択します。

[概要] 領域では、Copilot を使用して、エージェントに関する主要な分析情報の AI 概要を生成します。 詳細 を表示 を選択して、分析情報の完全な概要一覧を表示します。

このセクションに関するフィードバックは、 [親指を立てる] アイコンと [親指を下げる] アイコンを使用して Microsoft に提供できます。 [ Microsoft へのフィードバックの送信] パネルを使用して、コメントを追加し、関連ファイルを共有します。 このような説明的なフィードバックを提供することで、私たちは協力して製品を継続的に改善することができます。

1. [ Microsoft にフィードバックを送信する] パネルで、パネルを開くために選択したアイコンに応じて、好きなものや嫌いなものを自然言語で説明します。
2. プロンプト、生成された応答、関連するコンテンツサンプル、および追加のログファイルを共有するかどうかを選択します。
3. 送信を選択します。

概要 領域で パフォーマンスの概要を確認し、そのパフォーマンスについて詳しく調べることもできます。

会話セッションのみ

Copilot Studio の 会話型エージェントの分析 では、エージェントとユーザー エンゲージメントを追跡し、エージェントがユーザーのタスクをどの程度うまく処理しているかを把握しようとします。

会話型分析では、次の概念と用語を使用します。

• 会話とは 、チャンネル 内の特定のユーザー、または複数のユーザーグループとエージェントとの間で行われる継続的なやり取りです。

• 会話は一時停止して後で再開することも、顧客サービス担当者に転送することもできます。 会話は一方通行で、顧客からエージェント、またはエージェントから顧客へのやり取りであることが多いですが、より一般的には顧客とエージェントの間でやり取りが行われます。

• 非アクティブ状態が 30 分続くと、会話がタイムアウトになります。

• 1 つの会話には、1 つ以上の分析セッションを含めることができます。

• クラシック モードの分析セッションは、ユーザーによってトリガーされた最後のカスタム トピックに関連付けられます。 セッションにカスタムトピックが含まれていなければ、ユーザーが直接トリガーする最後のシステムトピックとなります。

• テレフォニーチャンネルに公開されたエージェントの場合、会話終了イベントの3分後に会話がタイムアウトします。

イベント トリガー セッションのみ

自律型エージェントは、イベント・トリガーを持つエージェントです。 これらのエージェントでは、トリガーによるエージェントの分析 のみを使用できます。

トリガーによるエージェントの 分析セッション では、エージェントがトリガーからペイロードを受信したときから、エージェントが応答して実行するアクションまでを追跡します。 これらの分析セッションは、エージェントが応答している内容と、エージェントのパフォーマンスをキャプチャします。

注意

トリガーが失敗し、エージェントがトリガーペイロードを受信しない場合、分析セッションを開始できません。 正常にトリガーされた実行のみが分析で追跡されます。

ハイブリッド ビュー - 会話型セッションとイベントトリガー セッションの両方

エージェントのデータに少なくとも1回の会話のセッションと、レポート期間内のトリガーベースの実行が含まれている場合、 アナリティクス ページは会話セッションと自律セッションの両方の関連指標の ハイブリッド ビューを表示します。 このビューでは、 概要 と 効果 のセクションが会話セッションとイベントトリガーセッションの両方の指標を並べて示しています。 [ 使用 ] セクションでは、関連するデータのみを表示する 会話 または 実行を選択できます。 [すべて] を選択すると、すべての使用関連データが表示されます。 [満足度] セクションには、会話セッションの満足度メトリックが表示されます。

詳細情報は、次のとおりです。

• 会話セッションに関連するメトリックが表示されます。「 会話エージェントの有効性の分析」を参照してください。

• イベントによってトリガーされるセッションに関連するメトリックが表示されます。 「自律エージェントの正常性の分析」を参照してください。

会話のトランスクリプトをダウンロードする

会話のタイムアウト数分後に会話の書き起こしをダウンロードできます。過去29日以内の任意の期間をダウンロードできます。 Dataverseの Power Appsポータルから ダウンロードでき、 Copilot Studioアプリからセッションチャットの文字起こしとしてダウンロードできます。 分析セッション後、終了 関連データが分析ダッシュボードに表示されるまで最大 1 時間かかる場合があります 。

注意

Dataverseの会話トランスクリプトは、TeamsのCopilot Studioアプリではダウンロードできません。 Dataverse でトランスクリプトをレビューしてエクスポートするには、Copilot Studio Web アプリ にサインアップする必要があります セッションチャットの書き起こしは Copilot Studioアプリからダウンロード可能です。 詳細情報については、エージェント セッションのトランスクリプトのダウンロード を参照してください。