重要
この記事の一部の情報は、市販される前に大幅に変更される可能性があるプレリリース製品に関するものです。 Microsoft は、ここに記載された情報に関して、明示または黙示を問わず、いかなる保証も行いません。
この記事では、作成したエージェントまたはそのツールをSecurity Copilotでテストする方法について説明します。
エージェントをテストするには、エージェントをユーザーまたはワークスペース スコープに発行する必要があります。 テスト フェーズは反復および改善ループです。エージェントの構成、サンプル入力での呼び出し、または自動チューニング命令の最適化の使用、動作または出力の観察、観察された結果に基づいて必要に応じて YAML マニフェストを調整します。
前提条件
プラグインは、エージェントと LLM の外部のリソースにアクセスできるようにすることで、エージェントが実行できる機能を拡張するSecurity Copilotでユーザーが有効にできる関連ツールのコレクションです。
[必要なプラグイン] が有効になっていることを確認します。 [テスト] タブの [必須プラグイン] セクション > から有効にすることができます。
プラグインが有効になっていない場合は 、[プラグインを有効にする] を選択します 。 たとえば、Microsoft Threat Intelligence プラグインの場合は、[
Microsoft Threat Intelligenceのプラグインを有効にする] を選択します。
エージェントをテストする手順
エージェントをテストする手順は次のとおりです。
エージェントをユーザーまたはワークスペース スコープに発行します。
上部のナビゲーション ウィンドウで、[ テスト ] タブに移動します。
[ エージェントのツールのテスト] ページで、次の手順を 実行します。
ドロップダウンからエージェントまたはツールを選択します。
構成されている場合は、エージェントまたはツールに入力を指定します。
[ 命令の最適化 ] セクションで、次の操作を行います。
有効 (省略可能) の場合、自動チューニング命令の最適化では、予想される出力に基づいて最適化されたエージェント命令が推奨されます。 これは、評価ループを通じてエージェント命令を更新、テスト、およびリファインする反復プロセスを自動化します。 自動チューニングでは、エージェントの指示と最適化がレビューされ、AI 品質スコアが向上し、エージェントが期待どおりに実行されるようにします。
選択したツールの種類に応じて、 プロンプト と自然言語 (NL) テストに 必要な出力 命令を指定できます。 エージェントの動作が予想されるように、エージェントの詳細な出力を指定します。
[ テストの実行 ] を選択してテスト結果を生成します。
エージェントの出力はテストの結果です。
自動チューニング命令の最適化が有効になっている場合は、期待される出力に基づいてスコアと推奨命令が提供されます。
Autotune 命令の最適化が実行された後、有効になっている場合:
品質スコアを含む Autotune 命令の最適化分析が提供されます。
結果には、推奨される命令と、推論と共に、現在の命令と自動チューニング命令の最適化推奨命令の間のスコアの区別が含まれます。
指定した自動チューニング命令の最適化命令をコピーして、エージェントに貼り付けることができます。
[テスト] パネルを下にスクロールして、最適化された結果の自動チューニングを確認します。 [ビルド] タブに移動して、ツール構成フォームの指示にこれを貼り付けます。
エージェント実行ワークフローを表示する場合は、[ アクティビティ マップ ] を選択します。 特定のノードを選択して詳細を表示します。
テスト後にエージェントの応答と機能に満足したら、エージェントをワークスペース スコープに発行します。 エージェントが Active エージェントに発行されます。
注:
Autotune は現在、米国と EU の 2 つのリージョンで利用できます。 近日中に他のリージョンに拡張される予定です。
バージョン管理エージェント
同じ名前でエージェントを発行すると、前のエージェントがオーバーライドされます。
新しい名前でエージェントを発行すると、新しいエージェントが作成されます。
エージェントの削除
プロンプト バーの [ソース]>Security Copilotの [ソースの管理] に移動し、エージェントを削除できます。
サード パーティパートナー: 削除するには、Security Store に移動する必要があります。
エージェントの編集
カスタム エージェントは、次のいずれかのオプションを選択して編集できます。
[ ビルド] メニューに移動します。
[ マイ エージェント] で、ユーザー スコープ (自分のみ) またはワークスペース スコープで作成および発行したエージェントを表示します。
[ 表示] を 切り替えて、ユーザー スコープで発行したエージェントと、ワークスペース内のすべてのユーザーに発行したエージェントを区別します。
編集するエージェントを選択または検索します。
エージェントの詳細は、エージェントの概要ページに入力されます。
エージェントに変更を加えてから [ 発行] を選択します。
注:
上部のナビゲーション バーに移動し、ドロップダウンを選択してエージェントを編集することもできます。
