スタンド アロン コンピューターの使用ツールをエージェントとエージェント フローに追加する (プレビュー)

[この記事はプレリリース ドキュメントであり、変更されることがあります。]

スタンドアロンのコンピューターの使用ツールは、ローカルインエージェントコンピューターの使用ツール(エージェントによってホストされ、エージェントに紐付けられている)のモジュラー型バージョンです。 それをエージェントのローカルツールとしてコピーすることも、エージェント フローのノードとして追加することもできます。 このスタンドアロンツールを使用することで、デジタルインターフェースと連携するAI駆動型の自動化プロセスを作成、テスト、管理できます。 スタンドアロンのコンピューターの使用ツールを公開すると、複数のエージェントやエージェント フローで再利用でき、複雑なUIベースのタスクを一元管理できます。

スタンドアロンのコンピューターの使用ツールを利用すると、次のようなことが行えます。

  • モジュール式で再利用可能な自動化の構成要素を作成できます。
  • 自然言語指示に基づくインテリジェントなUI対話を実行できます。
  • 許可されたアプリケーションやウェブサイトを定義することでガバナンスを一元管理できます。
  • 高精度なセッションリプレイや詳細なアクティビティログで実行状況を監視できます。
  • 機密性の高い、または複雑なタスクには、人間介在型(human-in-the-loop)監督を組み込みましょう。

重要

この記事には Microsoft Copilot Studio プレビュー ドキュメントが含まれ、変更される可能性があります。

プレビュー機能は運用環境での使用を想定しておらず、機能が制限される可能性があります。 これらの機能は公式リリースの前に使用できるため、一足先にアクセスして フィードバックを送る ことができます。

運用に対応したエージェントを構築する場合は Microsoft Copilot Studio の概要 を参照してください。

独立したコンピューターの使用ツールを作成する

紙幣

スタンドアロンツールとしてのコンピューターの使用は、現在サポート対象地域全体に順次展開されており、お住まいの地域ではまだご利用いただけない場合があります。

  1. Copilot Studioでサイドバーの ツール を選択してください。 ツール ページが表示されます。 詳しくは ツールページから共有ツールを使うをご覧ください。

  2. [+ 新しいツール] を選択します。 新しいツールパネルが表示されます。

  3. コンピューターの使用を選択します。 設定ページが表示され、デザイナー タブが選択されています。

  4. 概要タブに切り替えてください。

    1. 詳細タイルで編集を選択します。 コンピューターの使用状況の詳細を編集するパネルが表示されます。

    2. ツールの名前と説明を入力します。 これらの詳細は、他の作成者がフロー内でこのツールをいつ使用すべきかを理解するのに役立ちます。

    3. 保存を選択します。

  5. デザイナー タブに切り替えます。

    1. このツール用のモデルを選択してください。

    2. 命令を入力してパラメーターを定義します。

  6. 構成が完了したら、公開を選択します。 または、このツールを公開する準備ができていない場合は、下書きとして保存を選択してください。

スタンドアロンのコンピューターの使用ツールを設定する

スタンドアロンのコンピューターの使用ツールの設定画面は、オートメーションのライフサイクルと可観測性の管理に役立つよう、3つのタブで構成されています。

概要

概要 タブは、このツールのIDカードとして機能します。 このタブを使用:

  • ツールの名前や説明などのメタデータを管理します。
  • 現在の公開状況を表示します。
  • 最近の実行を監視して、ツールが直近の実行でどのように動作したかを素早く確認できます。

デザイナー

デザイナータブはツールのロジックを構築する場所です。

  • モデル:自動化を駆動するモデルを選択します。
  • 指示: AIがUIタスクを実行する際に従う自然言語による指示を書いてください。
  • テスト: 内蔵のサンドボックスを使用して、指示を実行し、AIがリアルタイムでどのように反応するかを確認してください。
  • パラメーター: ツールにデータを渡したり、フローの後続手順で結果を抽出するための入力・出力パラメーターを定義します。
  • 保存された資格情報:ツールがアクセスする必要があるウェブサイトやアプリの認証を安全に構成します。
  • 許可されたウェブサイトおよびデスクトップアプリケーション: ツールが操作できる特定のサイトやアプリケーションの許可リストを定義します。
  • 人間による監督: 手動による検証や追加情報が必要な手順で、ヒューマン・イン・ザ・ループ通知をトリガーします。

Activity

活動タブは、デバッグや最適化のための高度な監視・可視化機能を提供します。 過去28日間の実行履歴が表示されます。 実行ごとに、次の内容を確認できます。

  • セッションリプレイ: AIがインターフェースと対話した録画を確認できます。
  • スクリーンショット: 実行時に取得されたすべてのスクリーンショットをレビューできます。
  • 手順ログ: ツールが実行した正確な操作の順序を確認できます。
  • 指標: 実行時間と成功率を分析できます。

統合動作

コンピューターの使用ツールは、プラットフォームのさまざまな部分で利用できます。 ツールの挙動は追加方法によって異なります。

統合方法 動作 ライフサイクル
エージェントに追加(ローカルツールとして) ツールは複製されてエージェントのローカルツールになります 独立:元のスタンドアロンツールの変更はエージェント内のツールには影響しません。
エージェント フローに追加(ノードとして) ツールはモジュラーノードとして参照されます。 Linked: フローは常に最新の公開バージョンのスタンドアロンツールを使用します。

エージェント フローにスタンドアロンのコンピューターの使用ツールを追加する

重要

  • エージェント フローに追加できるのは、スタンドアロンのコンピューターの使用ツールのみです。 まだ ワークフロー に追加することはできません。
  • エージェント フローは、公開されたコンピューターの使用のスタンドアロン ツールにのみアクセスできます。 エージェントフローは常に最新の公開バージョンをトリガーします。
  1. Copilot Studioでサイドバーの フロー を選択してください。

  2. エージェント フローを選択します。 選択したエージェント フローの 概要 タブが表示されます。

  3. デザイナー タブに切り替えます。

  4. スタンドアロンコンピューターの使用ツールを呼び出したいエージェント フロー内のポイントで、新しいアクションを挿入アイコンを選択します。 アクションの追加パネルが表示されます。

  5. AI機能で、コンピューターの使用ツールを実行するを選択します。 フローにコンピューターの使用ツールを実行アクションノードが表示されます。

  6. コンピューターの使用接続が未作成の場合は、新しい接続を作成カードが表示されます。

    1. 接続で、希望する接続タイプを選択してください:コンピューター または ホスト型ブラウザー
    2. 必要な情報を入力し、新規作成を選択してください。
  7. 必要なコンピューターの使用ツールを選択します。

  8. 選択したコンピューターの使用ツールに入力パラメータがある場合、静的または動的な値を指定してください。

ヒント

コンピューターの使用ツールを実行するアクションノードでは、以下のことができます。

  • コンピューターの使用ツール リストで作成を選択して、新しいコンピューターの使用ツールを作成します。
  • 編集を選択して、選択したコンピューターの使用ツールを編集します。
  • リフレッシュ アイコンを選択して、コンピューターの使用ツールリストをリフレッシュしてください。

エージェントにスタンドアロンのコンピューターの使用ツールを追加する

紙幣

スタンドアロンのコンピューターの使用ツールをエージェントに追加すると、そのエージェント内に独立したコピーが組み込まれます。 スタンドアロンのコンピューターの使用ツールを更新しても、エージェント内のコピーには影響せず、その逆も同様です。

  • ツール ページから:

    1. Copilot Studioでサイドバーの ツール を選択してください。 ツール ページが表示されます。

    2. 対象のコンピューターの使用ツールの横にある三点リーダー()を選択し、エージェントに追加を選択します。 エージェントに追加パネルが表示されます。

    3. 希望するエージェントを選択し、追加を選択してください。 ツールの追加パネルが表示されます。

    4. [追加と構成] を選択します。 ツールのローカルコピーの設定ページが表示されます。

    5. 必要に応じて設定を変更し、保存を選択してください。

    6. エージェントのツールページに戻り、リストに先ほど追加したコンピューターの使用ツールが表示されていることを確認してください。

  • エージェント ページから:

    1. Copilot Studio のサイドバーからエージェントを選択してください。 エージェント ページが表示されます。

    2. 対象のエージェントを選択します。

    3. エージェントに関してはツール ページに移動します。

    4. ツールの追加を選択します。 ツールの追加パネルが表示されます。

    5. コンピューターの使用ツール」フィルターを選択してください。

    6. 使用したいコンピューターの使用ツールを選択し、追加と構成を選択してください。 ツールのローカルコピーの設定ページが表示されます。

    7. 必要に応じて設定を変更し、保存を選択してください。

    8. エージェントのツールページに戻り、リストに先ほど追加したコンピューターの使用ツールが表示されていることを確認してください。

よくあるご質問

スタンドアロンツールとローカルエージェントツールは、それぞれどのような場合に使い分けるべきですか?

複数のフローが使う必要がある特定のエージェントフロー自動化のための単一の真実のソースを構築したいときは スタンドアロンコンピューターの使用ツール を使いましょう。 例えば、経費報告書を提出。 自動化がエージェント自身によって制御される非決定的オーケストレーションを必要とする場合は、ローカルエージェント内コンピューターの使用ツール(複製)を使用してください。

本ツールはセキュリティとアクセスをどのように管理していますか?

スタンドアロンツールは2つの保護レイヤーを備えています。

  • 資格情報:サインインデータの暗号化ストレージ。
  • ガバナンス:AIが指示内容に関係なく、許可されていないURLやアプリケーションにアクセスできないようにする厳格な制限(許可リスト)です。

フロー実行中にAIが行った操作を確認することはできますか?

はい 活動 タブでは、スタンドアロンツールの過去28日間のセッション記録が一覧表示されます。 これらの録画では、AIが行ったすべてのクリックやキー操作を見ることができ、透明性を確保し、デバッグを容易にします。

なぜ私の地域ではモデルが利用できないのですか?

現在、中国ではAnthropicモデルは利用できません。 中国のユーザーはOpenAIモデルをご利用ください。