Lägga till fristående datoranvändningsverktyg för agenter och agentflöden (förhandsversion)

[Denna artikel är en förhandsversion av dokumentationen och kan komma att ändras.]

Det fristående datoranvändningsverktyget är en modulär version av det lokala datoranvändningsverktyget i agenten (som hanteras av och är kopplat till en agent). Du kan kopiera det som ett lokalt verktyg till en agent eller lägga till det som en nod i ett agentflöde. Med det här fristående verktyget kan du skapa, testa och styra AI-drivna automatiseringar som interagerar med digitala gränssnitt. När du har publicerat det fristående datoranvändningsverktyget kan du återanvända det i flera agenter och agentflöden, vilket ger ett centraliserat sätt att hantera komplexa användargränssnittsbaserade uppgifter.

Med hjälp av verktyget för fristående datoranvändning kan du:

  • Skapa modulära och återanvändbara automationsbyggstenar.
  • Kör intelligenta gränssnittsinteraktioner baserat på instruktioner för naturligt språk.
  • Centralisera styrningen genom att definiera tillåtna program och webbplatser.
  • Övervaka körning med återspelningar av session med hög återgivning och detaljerade aktivitetsloggar.
  • Inkludera mänsklig övervakning för känsliga eller komplexa uppgifter.

Important

Den här artikeln innehåller dokumentation om förhandsversionen av Microsoft Copilot Studio och kan ändras.

Förhandsgranskningsfunktioner ska inte användas i produktion, och funktionerna kan vara begränsade. Funktionerna är tillgängliga före den officiella publiceringen så att du kan få tidig tillgång och ge feedback.

Om du bygger en produktionsklar agent, se Översikt över Microsoft Copilot Studio.

Skapa ett fristående datoranvändningsverktyg

Note

Datoranvändning som ett fristående verktyg lanseras för närvarande i regioner som stöds och kanske inte är tillgängligt i din region ännu.

  1. I Copilot Studio väljer du Tools i sidofältet. Sidan Verktyg visas. Läs mer i Använda delade verktyg på sidan Verktyg.

  2. Välj Nytt verktyg. Panelen Nytt verktyg visas.

  3. Välj Datoranvändning. Konfigurationssidan visas med fliken Designer i fokus.

  4. Växla till fliken Översikt .

    1. Välj Redigera på panelen Information . Panelen Redigera datoranvändningsinformation visas.

    2. Ange ett namn och en beskrivning för verktyget. Den här informationen hjälper andra tillverkare att förstå när de ska använda det här verktyget i sina flöden.

    3. Välj Spara.

  5. Växla till fliken Designer .

    1. Välj den modell som du vill använda för det här verktyget.

    2. Ange instruktioner och definiera parametrar.

  6. När konfigurationen är klar väljer du Publicera. Du kan också välja Spara utkast om du inte är redo att publicera det här verktyget.

Konfigurera ett fristående datoranvändningsverktyg

Gränssnittet för att konfigurera ett fristående datoranvändningsverktyg är uppdelat i tre flikar som hjälper dig att hantera livscykeln och observerbarheten för din automatisering.

Overview

Fliken Översikt fungerar som verktygets identitetskort. Använd den här fliken för att:

  • Hantera verktygets metadata, till exempel dess namn och beskrivning.
  • Visa aktuell publikationsstatus.
  • Följ de senaste körningarna för att snabbt se hur verktyget presterade vid sina senaste körningar.

Formgivare

Fliken Designer är där du skapar logiken för ditt verktyg.

  • Modell: Välj den modell som driver automatiseringen.
  • Instruktioner: Skriv vägledningen för naturligt språk som AI följer för att utföra användargränssnittsuppgifter.
  • Test: Använd den inbyggda sandbox-miljön för att köra dina instruktioner och se hur AI:n reagerar i realtid.
  • Parametrar: Definiera indata- och utdataparametrar för att skicka data till verktyget eller extrahera resultat för nedströmssteg i ett flöde.
  • Lagrade autentiseringsuppgifter: Konfigurera autentisering på ett säkert sätt för de webbplatser eller appar som verktyget behöver åtkomst till.
  • Tillåtna webbplatser och skrivbordsappar: Definiera en lista över tillåtna webbplatser och program som verktyget tillåts interagera med.
  • Mänsklig övervakning: Utlöser meddelanden från människor i loopen för steg som kräver manuell validering eller mer information.

Activity

Fliken Aktivitet ger djup observerbarhet för felsökning och optimering. Den visar alla körningar från de senaste 28 dagarna. För varje körning kan du granska:

  • Sessionsuppspelning: Titta på en inspelning av AI:ns interaktion med gränssnittet.
  • Skärmbilder: Granska varje skärmbild som tagits under körning.
  • Stegloggar: Se den exakta sekvensen av åtgärder som vidtas av verktyget.
  • Mätvärden: Analysera körningstid och framgångsgrader.

Integrationsbeteende

Du kan använda ett datoranvändningsverktyg i olika delar av plattformen. Verktygets beteende beror på hur du lägger till det.

Integrationsmetod Behavior Lifecycle
Lägg till till en agent (som lokalt verktyg) Verktyget dupliceras till agentens lokala verktyg Oberoende: Ändringar i det ursprungliga fristående verktyget påverkar inte agentens version.
Lägg till i ett agentflöde (som en nod) Verktyget refereras till som en modulär nod. Länkad: Flödet använder alltid den senaste publicerade versionen av det fristående verktyget.

Lägga till ett fristående datoranvändningsverktyg i ett agentflöde

Important

  • Du kan bara lägga till fristående datoranvändningsverktyg för agentflöden. Du kan inte lägga till dem i arbetsflöden än.
  • Agentflöden kan bara komma åt publicerade fristående datoranvändningsverktyg. Agentflöden utlöser alltid den senaste publicerade versionen.

  1. I Copilot Studio väljer du Flows i sidofältet.

  2. Välj det agentflöde som du vill använda. Fliken Översikt för det valda agentflödet visas.

  3. Växla till fliken Designer .

  4. Välj ikonen Infoga en ny åtgärd vid den punkt i agentflödet där du vill anropa ditt fristående datoranvändningsverktyg. Panelen Lägg till en åtgärd visas.

  5. Under AI-funktioner väljer du Kör ett datoranvändningsverktyg. Åtgärdsnoden Kör verktyget för datoranvändning visas i flödet.

  6. Om du inte har någon anslutning till datorn än visas kortet Skapa en ny anslutning :

    1. För Anslut väljer du den anslutningstyp som du vill använda: Dator eller Värdbaserad webbläsare.
    2. Ange nödvändig information och välj Skapa ny.

  7. Välj det datoranvändningsverktyg som du vill använda.

  8. Om det valda datoranvändningsverktyget har indata anger du statiska eller dynamiska värden.

Tip

I åtgärdsnoden Kör ett datoranvändningsverktyg kan du:

  • Skapa ett nytt datoranvändningsverktyg genom att välja Skapa i listan Datoranvändningsverktyg .
  • Redigera det valda datoranvändningsverktyget genom att välja Redigera.
  • Uppdatera listan med verktyg för datoranvändning genom att välja ikonen Uppdatera .

Lägga till ett fristående datoranvändningsverktyg i en agent

Note

När du lägger till ett fristående datoranvändningsverktyg i en agent skapar du en oberoende kopia inbäddad i agenten. Uppdateringar i det fristående verktyget påverkar inte agentens kopia, och vice versa.

  • På sidan Verktyg :

    1. I Copilot Studio väljer du Tools i sidofältet. Sidan Verktyg visas.

    2. Välj de tre punkterna (...) bredvid det datoranvändningsverktyg du vill använda och välj sedan Lägg till i agenten. Panelen Lägg till i en agent visas.

    3. Välj den agent som du vill använda och välj Lägg till. Panelen Lägg till verktyg visas.

    4. Välj Lägg till och konfigurera. Konfigurationssidan för den lokala kopian av verktyget visas.

    5. Ändra konfigurationen om det behövs och välj sedan Spara.

    6. Gå tillbaka till sidan Verktyg för din agent och lägg märke till att listan innehåller datoranvändningsverktyget som du nyss lade till.

  • På sidan Agent :

    1. I Copilot Studio väljer du Agents i sidofältet. Sidan Agenter visas.

    2. Välj den agent som du vill använda.

    3. Gå till sidan Verktyg för din agent.

    4. Välj Lägg till ett verktyg. Panelen Lägg till verktyg visas.

    5. Välj filtret Datoranvändningsverktyg .

    6. Välj det datoranvändningsverktyg du vill använda och välj sedan Lägg till och konfigurera. Konfigurationssidan för den lokala kopian av verktyget visas.

    7. Ändra konfigurationen om det behövs och välj sedan Spara.

    8. Gå tillbaka till sidan Verktyg för din agent och lägg märke till att listan innehåller datoranvändningsverktyget som du nyss lade till.

Vanliga frågor

När ska jag använda ett fristående verktyg jämfört med ett lokalt agentverktyg?

Använd det fristående datoranvändningsverktyget när du vill skapa en enda sanningskälla för en specifik agentflödesautomation som flera flöden behöver använda. Till exempel Skicka utgiftsrapport. Använd ett lokalt datoranvändningsverktyg i agenten (duplicerat) när automatiseringen kräver nondeterministisk orkestrering som styrs av själva agenten.

Hur hanterar verktyget säkerhet och åtkomst?

Det fristående verktyget använder två skyddslager:

  • Autentiseringsuppgifter: Krypterad lagring för inloggningsdata.
  • Styrning: En hård begränsning (tillåt lista) som hindrar AI från att navigera till obehöriga URL:er eller program, oavsett vilka instruktioner som ges.

Kan jag se vad AI:n gjorde under en flödeskörning?

Ja. Fliken Aktivitet för det fristående verktyget visar sessionsinspelningar för de senaste 28 dagarna. De här inspelningarna visar varje klick och tangenttryckning som AI:n har utfört, vilket säkerställer fullständig transparens och enklare felsökning.

Varför är en modell inte tillgänglig i min region?

Anthropics modeller är för närvarande inte tillgängliga i Kina. Kinesiska användare bör använda OpenAI-modellerna.

Relaterat innehåll

  • Last updated on