Ajouter des outils d’utilisation d’ordinateur autonome aux agents et aux flux d’agents (préversion)

[Cet article fait partie de la documentation en version préliminaire et peut faire l’objet de modifications.]

L’outil d’utilisation d’ordinateur autonome est une version modulaire de l’outil local d’utilisation de l’ordinateur in-agent (hébergé par et lié à un agent). Vous pouvez le copier en tant qu’outil local vers un agent ou l’ajouter en tant que nœud à un flux d’agent. À l’aide de cet outil autonome, vous pouvez créer, tester et régir des automatisations basées sur l’IA qui interagissent avec des interfaces numériques. Après avoir publié l’outil d’utilisation de l’ordinateur autonome, vous pouvez le réutiliser sur plusieurs agents et flux d’agents, en fournissant un moyen centralisé de gérer des tâches complexes basées sur l’interface utilisateur.

À l’aide de l’outil d’utilisation de l’ordinateur autonome, vous pouvez :

  • Créez des blocs de construction d’automatisation modulaires et réutilisables.
  • Exécutez des interactions intelligentes de l’interface utilisateur en fonction des instructions en langage naturel.
  • Centraliser la gouvernance en définissant des applications et des sites web autorisés.
  • Surveillez l’exécution avec des rediffusions de session en haute fidélité et des journaux d’activité détaillés.
  • Intégrez une supervision humaine pour les tâches sensibles ou complexes.

Important

Cet article contient la documentation en préversion de Microsoft Copilot Studio et est susceptible d'être modifié.

Les fonctionnalités en version préliminaire ne sont pas destinées à une utilisation en production et peuvent être restreintes. Ces fonctionnalités sont disponibles avant une publication officielle afin que vous puissiez y accéder en avant-première et fournir des commentaires.

Si vous créez un assistant prêt pour la production, consultez Vue d’ensemble de Microsoft Copilot Studio.

Créer un outil d’utilisation d’ordinateur autonome

Remarque

L’utilisation de l’ordinateur en tant qu’outil autonome est actuellement déployée dans les régions prises en charge et n’est peut-être pas encore disponible dans votre région.

  1. Dans Copilot Studio, sélectionnez Tools sur la barre latérale. La page Outils s’affiche. En savoir plus sur Utiliser les outils partagés à partir de la page Outils.

  2. Sélectionnez Nouvel outil. Le panneau Nouvel outil s’affiche.

  3. Sélectionnez Utilisation de l’ordinateur. La page de configuration s’affiche, avec son onglet Concepteur en focus.

  4. Basculez vers l’onglet Vue d’ensemble .

    1. Sélectionnez Modifier dans la vignette Détails . Le panneau Modifier les détails d’utilisation de l’ordinateur s’affiche.

    2. Entrez un nom et une description pour votre outil. Ces détails aident d’autres décideurs à comprendre quand utiliser cet outil dans leurs flux.

    3. Cliquez sur Enregistrer.

  5. Basculez vers l’onglet Concepteur .

    1. Sélectionnez le modèle souhaité pour cet outil.

    2. Entrez des instructions et définissez des paramètres.

  6. Une fois votre configuration terminée, sélectionnez Publier. Vous pouvez également sélectionner Enregistrer le brouillon si vous n’êtes pas prêt à publier cet outil.

Configurer un outil d’utilisation d’ordinateur autonome

L’interface permettant de configurer un outil autonome d’utilisation d’ordinateur est organisée en trois onglets pour vous aider à gérer le cycle de vie et l’observabilité de votre automatisation.

Overview

L’onglet Vue d’ensemble agit comme carte d’identité pour l’outil. Utilisez cet onglet pour :

  • Gérez les métadonnées de l’outil, telles que son nom et sa description.
  • Affichez l’état actuel de la publication.
  • Surveillez les exécutions récentes pour voir rapidement comment l’outil a fonctionné lors de ses dernières exécutions.

Concepteur

L’onglet Concepteur est l’emplacement où vous générez la logique de votre outil.

  • Modèle : sélectionnez le modèle qui alimente l’automatisation.
  • Instructions : Écrivez les instructions en langage naturel que l’IA suit pour effectuer des tâches d’interface utilisateur.
  • Test : utilisez le bac à sable intégré pour exécuter vos instructions et voir comment l’IA réagit en temps réel.
  • Paramètres : définissez les paramètres d’entrée et de sortie pour transmettre des données à l’outil ou extraire les résultats des étapes en aval dans un flux.
  • Informations d’identification stockées : configurez en toute sécurité l’authentification pour les sites web ou les applications auxquelles l’outil doit accéder.
  • Sites web autorisés et applications de bureau : définissez une liste verte de sites et d’applications spécifiques avec lesquels l’outil est autorisé à interagir.
  • Supervision humaine : Déclencher des notifications avec intervention humaine pour les étapes nécessitant une validation manuelle ou davantage d’informations.

Activity

L’onglet Activité fournit une observabilité approfondie pour le débogage et l’optimisation. Il liste toutes les exécutions des 28 derniers jours. Pour chaque exécution, vous pouvez consulter :

  • Relecture de session : regardez un enregistrement de l’interaction de l’IA avec l’interface.
  • Captures d’écran : passez en revue chaque écran capturé pendant l’exécution.
  • Journal des étapes : voir la séquence exacte des actions réalisées par l’outil.
  • Métriques : Analyser le temps d’exécution et les taux de réussite.

Comportement d’intégration

Vous pouvez utiliser un outil d’utilisation d’ordinateur dans différentes parties de la plateforme. Le comportement de l’outil dépend de la façon dont vous l’ajoutez.

Méthode d’intégration Comportement Cycle de vie
Ajouter à un agent (en tant qu’outil local) L’outil est dupliqué dans les outils locaux de l’agent Indépendant : les modifications apportées à l’outil autonome d’origine n’affectent pas la version de l’agent.
Ajouter au flux d’agent (comme nœud) L’outil est référencé en tant que nœud modulaire. Lié : le flux utilise toujours la dernière version publiée de l’outil autonome.

Ajouter un outil d’utilisation d’ordinateur autonome à un flux d’agent

Important

  • Vous ne pouvez ajouter que des outils d’utilisation de l’ordinateur autonomes à flux d’agent. Vous ne pouvez pas encore les ajouter aux flux de travail .
  • Les flux d’agents ne peuvent accéder qu’aux outils d’utilisation de l’ordinateur autonomes publiés. Les flux d’agent déclenchent toujours la dernière version publiée.

  1. Dans Copilot Studio, sélectionnez Flows dans la barre latérale.

  2. Sélectionnez le flux d’agent souhaité. L’onglet Vue d’ensemble du flux d’agent sélectionné s’affiche.

  3. Basculez vers l’onglet Concepteur .

  4. Sélectionnez l’icône Insérer une nouvelle action au point dans le flux de l’agent dans lequel vous souhaitez appeler votre outil d’utilisation de votre ordinateur autonome. Le panneau Ajouter une action s’affiche .

  5. Sous Fonctionnalités d’IA, sélectionnez Exécuter un outil d’utilisation d’ordinateur. Le nœud d’action Exécuter un outil d’utilisation de l’ordinateur apparaît dans le flux.

  6. Si vous n’avez pas encore de connexion pour utiliser l’ordinateur, la carte Créer une connexion s’affiche :

    1. Pour Se connecter, sélectionnez le type de connexion souhaité : Ordinateur ou navigateur hébergé.
    2. Fournissez les informations requises et sélectionnez Créer nouveau.

  7. Sélectionnez l’outil d’utilisation de l’ordinateur souhaité.

  8. Si l’outil d’utilisation de l’ordinateur sélectionné a des entrées, spécifiez des valeurs statiques ou dynamiques.

Tip

Dans le nœud d’action Exécuter un outil d’utilisation de l’ordinateur, vous pouvez :

  • Créez un outil d’utilisation d’ordinateur en sélectionnant Créer dans la liste des outils d’utilisation de l’ordinateur .
  • Modifiez l’outil d’utilisation de l’ordinateur sélectionné en sélectionnant Modifier.
  • Actualisez la liste des outils d’utilisation de votre ordinateur en sélectionnant l’icône Actualiser .

Ajouter un outil d’utilisation d’ordinateur autonome à un agent

Remarque

Lorsque vous ajoutez un outil autonome à un agent, vous créez une copie indépendante incorporée dans cet agent. Les mises à jour de l’outil autonome n’affectent pas la version de l’agent, et vice versa.

  • Dans la page Outils :

    1. Dans Copilot Studio, sélectionnez Tools sur la barre latérale. La page Outils s’affiche.

    2. Sélectionnez les trois points (...) en regard de l’outil d’utilisation de l’ordinateur souhaité, puis sélectionnez Ajouter à l’agent. Le panneau Ajouter à un agent s’affiche.

    3. Sélectionnez l’agent souhaité, puis sélectionnez Ajouter. Le volet Ajouter un outil apparaît.

    4. Sélectionnez Ajouter et configurer. La page de configuration de la copie locale de votre outil s’affiche.

    5. Si nécessaire, modifiez la configuration, puis sélectionnez Enregistrer.

    6. Revenez à la page Outils de votre agent et notez que la liste inclut l’outil d’utilisation de l’ordinateur que vous venez d’ajouter.

  • À partir de la page Agent :

    1. Dans Copilot Studio, sélectionnez Agents dans la barre latérale. La page Agents s’affiche.

    2. Sélectionnez l’agent souhaité.

    3. Accédez à la page Outils de votre agent.

    4. Cliquez sur Ajouter un outil. Le volet Ajouter un outil apparaît.

    5. Sélectionnez le filtre outil d’utilisation de l’ordinateur .

    6. Sélectionnez l’outil d’utilisation de l’ordinateur souhaité, puis sélectionnez Ajouter et configurer. La page de configuration de la copie locale de votre outil s’affiche.

    7. Si nécessaire, modifiez la configuration, puis sélectionnez Enregistrer.

    8. Revenez à la page Outils de votre agent et notez que la liste inclut l’outil d’utilisation de l’ordinateur que vous venez d’ajouter.

Questions fréquemment posées

Quand dois-je utiliser un outil autonome et un outil d’agent local ?

Utilisez l’outil d’utilisation de l’ordinateur autonome lorsque vous souhaitez créer une source unique de vérité pour une automatisation de flux d’agent spécifique que plusieurs flux doivent utiliser. Par exemple, envoyez le rapport de dépenses. Utilisez un outil local d’utilisation de l’ordinateur in-agent (dupliqué) lorsque l’automatisation nécessite une orchestration non déterministe régie par l’agent lui-même.

Comment l’outil gère-t-il la sécurité et l’accès ?

L’outil autonome utilise deux couches de protection :

  • Informations d’identification : stockage chiffré pour les données de connexion.
  • Gouvernance : restriction matérielle (liste verte) qui empêche l’IA de naviguer vers des URL ou des applications non autorisées, quelles que soient les instructions fournies.

Puis-je voir ce que l’IA a fait pendant une exécution de flux ?

Oui. L’onglet Activité de l’outil autonome répertorie les enregistrements de session des 28 derniers jours. Ces enregistrements vous montrent chaque clic et touches effectuées par l’IA, ce qui garantit une transparence totale et un débogage plus facile.

Pourquoi un modèle n’est-il pas disponible dans ma région ?

Les modèles Anthropic ne sont actuellement pas disponibles en Chine. Les utilisateurs chinois doivent utiliser les modèles OpenAI.

Contenu connexe

  • Last updated on