Copilot Studio Kit は、Copilot Studio でのエクスペリエンスを強化するために設計されたツールキットです。 Power Customer Advisory Team(Power CAT)は、カスタムエージェントの構築、管理、テスト、最適化のためのツールをメーカーに提供するためのキットを作成・維持管理しました。 プロンプトの調整、パフォーマンスの分析、Web Chatエクスペリエンスのカスタマイズのいずれを行う場合でも、Copilot Studio Kit を使用すると、インテリジェントでパフォーマンスの高いカスタム エージェントを作成できます。
機能をテストする
Copilot Studio Kit を使用すると、作成者はエージェント、テスト、テスト セットを構成し、それらを使用してカスタム エージェントをバッチ テストできます。 テスト実行では、待機時間、観察された応答、実行レベルの集計など、詳細な結果が生成されます。 テストの種類には、応答の一致、添付ファイルの一致、トピックの一致、生成的な回答が含まれます。
Note
Copilot Studio Kit のテスト自動化で、生成応答用のユーザー定義ルーブリックがサポートされるようになりました。 詳細については、「 テストでルーブリックを使用する」を参照してください。
詳細情報: エージェント のテストを強化する
コンプライアンスハブ
コンプライアンス ハブは、組織が大規模な Copilot Studio エージェントのガバナンス ポリシーを定義して適用するのに役立ちます。 エージェントインベントリを通じて収集されたエージェント構成を、設定可能なリスク閾値に対して継続的に評価し、違反が検出されると自動的にコンプライアンスケースを作成し、SLA駆動のレビューライフサイクルを通じて追跡します。
管理者は、しきい値、リスク レベル、SLA タイマー、強制アクション (手動レビュー、検疫、削除) を構成できますが、作成者は Teams/Outlook 通知、取り込みフォーム、およびオープン ケースとコンプライアンス体制を示すダッシュボードを通じて問題を修復するように指示されます。 コンプライアンス ハブを使用すると、作成者は Copilot Studio 内で自由にイノベーションを行い、すべてのエージェントで一貫した監査可能なレベルのコンプライアンスを確保できます。
詳細情報: Copilot Studio Kit コンプライアンス ハブでエージェントのコンプライアンスを定義して適用する
Rubrics 改良 (新しい!)
Rubrics 絞り込みは Copilot Studio Kit の強力な機能です。これにより、AI によって生成された応答の再利用可能な評価標準 (ルーブリック) を作成、テスト、および反復的に改善できます。 この機能は、エージェントの応答の AI の評価が、人間の判断と組織の品質基準と一致することを保証するのに役立ちます。
詳細情報: Rubrics の絞り込み
会話のKPI
会話 KPI (主要業績評価指標) は、作成者がカスタム エージェントのパフォーマンスを追跡および分析するのに役立ちます。 会話 KPI は、Dataverse で集計データを提供することで、Copilot Studio の組み込み分析を補完します。 このデータにより、会話の結果を理解しやすくなります。
詳細情報: Conversation KPI を使用してエージェントのパフォーマンスを追跡する
SharePoint同期
SharePoint 同期を使用すると、作成者は SharePoint の場所からカスタム エージェント ナレッジ ベースに選択したコンテンツをファイルとして定期的に同期できます。
詳細情報: SharePoint同期によるエージェント応答の改善
プロンプト アドバイザー
Prompt Advisor は、作成者がユーザー入力を改善するための適切に構造化されたプロンプトを作成するのに役立ちます。 作成者は、信頼度スコア、詳細な分析、および反復的に調整できる推奨される最適化されたプロンプトを取得するためのプロンプトを入力します。
詳細情報: Prompt Advisor を使用してプロンプトを絞り込む
ウェブチャットプレイグラウンド
Webchat Playground は、エージェント Web Chatの外観と動作 (色、フォント、サムネイルなど) をカスタマイズするのに役立ちます。
詳細情報: Webchat Playground でWeb Chatの外観をカスタマイズする
アダプティブ カード ギャラリー
アダプティブ カード ギャラリーには、さまざまなシナリオに対応するアダプティブ カード テンプレートが用意されています。 テンプレートは、アダプティブ カードのビジュアルと動作の拡張性を示し、エージェント側の実装と動的データ バインディングの例を含みます。
詳細情報: アダプティブ カード ギャラリーを使用してユーザー エンゲージメントを強化する
エージェント インベントリ
エージェント インベントリを使用すると、管理者は組織内のすべてのカスタム エージェントをテナント全体で表示できます。 使用している機能、認証モード、ナレッジ ソース、オーケストレーションの種類などの詳細が表示されます。 エージェント インベントリにはダッシュボードが含まれており、他のアプリケーションで使用するためにデータをエクスポートできます。
詳細情報: エージェント インベントリを使用してエージェントを監視する
エージェント レビュー ツール
エージェント レビュー ツールは、パフォーマンスやセキュリティに悪影響を与える可能性のある潜在的な問題やアンチパターンがないかエージェントをチェックするソリューション分析ツールです。 分析後、エージェント レビュー ツールは、結果を解釈しやすい形式で、重大度と各問題に対処する方法の詳細を示します。
詳細情報: エージェント レビュー ツールを使用してエージェントを分析する
会話分析ツール
Conversation Analyzer は、カスタム プロンプトを使用してカスタム エージェントの会話トランスクリプトを分析し、実用的な分析情報を得るのに役立ちます。
詳細情報: 会話のトランスクリプトを分析する
エージェント値
Agent Value コンポーネントは、Copilot Studio エージェントを種類、動作、値別に分類するためのモジュール式ツールです。 これは、組織が各エージェントの役割を理解し、エージェントを戦略的な目標に合わせ、各エージェントが提供する価値を測定するのに役立ちます。 結果は、エージェント値ダッシュボードに視覚的に表示されます。
詳細情報: エージェントの値を測定する
Power Platform でのパイプラインを使用した自動テスト
この機能により、ユーザーは Power Platform Pipelines を使用して Copilot Studio カスタム エージェントのテストとデプロイを自動化できます。 目標は、エージェントがターゲット環境 (運用環境) にデプロイされる前に、テスト実行によって自動的に検証されるようにすることです。 このアプローチでは、Power Automate フローを Dataverse および Copilot Studio Kit と統合することで、デプロイ プロセスに品質ゲートを導入します。 この方法では、継続的デリバリープラクティスがサポートされ、デプロイ ライフサイクルの全体的なガバナンスが強化されます。
詳細情報: Power Platform でパイプラインを使用してエージェントのテストとデプロイを自動化する