Menneskelig overvågning af computerbrug

Notat

Denne artikel beskriver funktioner, der anvendes i agenter eller agentstrømme, drevet af standardledningsnettet.

Når du bruger menneskelig overvågning, eskalerer den computer-brugende agent til den person, du konfigurerer i Human Supervision-indstillingerne , når den har brug for bekræftelse eller mere information.

Notat

Computerbrugsagenter kan støde på hurtige injektionsangreb, hvor skjulte instruktioner i skærmbilleder, websider eller andre input forsøger at påvirke handlinger på utilsigtede måder. Hvis du vil minimere denne risiko, skal du betjene disse agenter i pålidelige, isolerede miljøer og udføre robuste valideringskontroller, før du udfører nogen instruktioner.

Funktionsunderstøttelse efter model

Følgende tabel viser, hvilke modeller der understøtter funktionen for menneskelig supervision.

Modeludbyder Version Status Understøtter menneskelig supervision
OpenAI OpenAI-computer ved brug af agent v1 Pensioneret Yes
OpenAI GPT-6 Sol Aktiv Yes
OpenAI Computerbruger-Agent (CUA) Aktiv Yes
Anthropic Claude Sonnet 4,5 Aktiv Yes

Anmeldelsesagent og computerbrugsaktivitet

Under kørsel, når den computerbrugende agent har brug for bekræftelse eller mere information, sender den en anmodning om gennemgang til den konfigurerede menneskelige reviewer via Outlook-mail. Den kan også vise et indbygget gennemgangskort i panelet avanceret aktivitet i computerbrug.

Probabilistisk AI-modeladfærd udløser menneskelige anmeldelsesanmodninger. Denne adfærd betyder, at modellen måske ikke udløser disse anmodninger i enhver situation, hvor en person ønsker en pause, og den kan også udløse disse anmodninger, når en pause ikke er nødvendig. Stol ikke på menneskelige gennemgangs- eller afklaringsanmodninger som en failsafe eller som garanti for, at systemet altid anmoder om menneskelig input, før det fortsætter.

Notat

  • Kun producenten af computerværktøjet modtager menneskelige gennemgangsanmodninger og har adgang til udførlige logfiler via det avancerede computeraktivitetspanel. Hvis du vælger Slutbrugerlegitimation under maskinindstillinger, modtager den person, der oprindeligt satte forbindelsen op, disse anmodninger, men kun hvis de også er inkluderet som en af de udpegede menneskelige anmeldere.
  • For at gennemgå anmodninger om menneskelig gennemgang direkte i sidepanelet for den computerbrugende agents aktivitet i agentens aktivitetsoversigt skal du aktivere avanceret logføring af computerbrug i dit miljø. Hvis den avancerede computeranvendelsesaktivitet ikke vises på aktivitetsoversigten, kan administratoren have deaktiveret denne funktion for dit miljø.

I følgende tabel vises de vigtigste oplysninger, der er inkluderet i en mailanmodning om manuel gennemsyn:

Felt Beskrivende tekst
Agent, der bruger værktøjet Navnet på Copilot Studio-agenten.
Computerbrugsværktøj Navnet på det computerbrugsværktøj, der udløste anmodningen.
Samtale Dyblinket til agentaktiviteten, hvor værktøjet til computerbrug aktuelt kører.
Anmodning om timeout Anmodningens timeout-dato og -tidspunkt
Anmodning fra Opretteren (forbindelsesejeren) af værktøjet til brug af computeren.
Angiv manglende oplysninger Tekstfeltet til svaret, der skal sendes til værktøjet til brug af computeren.
Indsend Knappen til at indsende det indtastede tekstsvar. For en bekræftelsesanmodning skal du enten skrive Ja for at bekræfte eller Nej for at afvise.

Besvar anmodninger om menneskelig gennemsyn

For at besvare anmodninger om menneskelig gennemgang kan du enten svare via e-mail eller inline ved at bruge aktivitetspanelet til computerbrug i agentens aktivitetskort. Integrerede svar kræver, at avanceret logføring af computerbrug er aktiveret i miljøet. Hvis du ikke giver et svar i begge tilfælde, forbliver arbejdsprocessen midlertidigt afbrudt og stopper automatisk, når den timeout, der er angivet i mailen, nås.

Vigtig

Det menneskelige tilsynssystem er baseret på probabilistisk adfærd i ai-modellen. Selvom systemet indeholder en systemprompt og andre begrænsninger, kan det lejlighedsvis generere unødvendige afklaringsanmodninger. Det kan mislykkes at udløse, når det forventes, eller det kan bede om oplysninger, der ikke skal angives i den angivne kontekst, herunder potentielt følsomme oplysninger.

Derfor bør anmeldere udvise dømmekraft, når de svarer på anmodninger om menneskelig overvågning, og ikke indsende følsomme oplysninger som brugernavne, adgangskoder, PIN-koder, kreditkortoplysninger eller personnumre. Afhængigt af din organisations konfiguration kan svar på menneskelige gennemgangsanmodninger bevares i dit Dataverse-miljø eller Purview revisionslogfiler og kan være synlige for autoriserede brugere i din organisation.

Besvar via mail

Mailen med anmodning om menneskelig gennemgang indeholder oplysninger om agenten, værktøjet og samtalen sammen med de specifikke oplysninger eller præciseringer, der anmodes om. Gennemse anmodningen omhyggeligt for at finde ud af, om du har tilstrækkelige oplysninger til at svare. Hvis det er relevant, skal du angive dit svar i det angivne tekstfelt og vælge Send.

Besvar direkte

  1. Vælg linket Samtale i mailen med anmodning om gennemsyn for at åbne agentens aktivitetskort.
  2. Find den computerbrugshandling, der svarer til det konfigurerede computerbrugsværktøj, og åbn sidepanelet.
  3. I afsnittet Aktivitet i sidepanelet skal du gennemse listen over aktiviteter. Aktiviteter, der afventer menneskelig gennemgang, er markeret med en ventende indikator ud for modelsvaret.
  4. Gennemse anmodningen omhyggeligt, og find ud af, om du har tilstrækkelige oplysninger til at svare. Hvis det er relevant, skal du angive dit svar i det angivne tekstfelt og vælge Send.

Sluk for menneskelig overvågning

Vigtig

At slå menneskelig overvågning fra gør ikke den computerbrugende agent fuldstændig autonom. Agenten tøver stadig, når den har brug for bekræftelse eller afklaring. Hvis du ikke konfigurerer reviewere, har disse anmodninger ikke noget sted at blive dirigeret hen, så sessionen fejler, når agenten sættes på pause. Konfigurér mindst én anmelder.

For at deaktivere menneskelig overvågning, gå til computerværktøjets sektion for Menneskelig supervision og fjern alle anmeldere fra listen Tildel-anmodninger til.

Ofte stillede spørgsmål om brug af computerværktøj