Monitorointiagentin suorituskyvyn yleiskatsaus (GitHub Copilot)

Monitor-välilehti antaa tekijöille kontekstissa näkymän agentin tuotantoterveyteen. Käytä sitä ymmärtääksesi käyttöä, tuloksia, käyttäjäpalautetta, luotettavuutta ja Copilot-luoton kulutusta, jotta voit tunnistaa trendejä ja päättää, missä parantaa agenttia.

Note

Tämän artikkelin ominaisuuksia käyttävät agentit tai työnkulut, joita ohjaavat GitHub Copilot -valjas.

Käyttöperusteinen laskutus koskee agenttien käyttöä, rakentamista, testausta ja arviointia. Nämä toiminnot saattavat kuluttaa Copilot-krediittejä. Lue lisää kohdasta Hallinnoi kustannuksia agenteille, jotka toimivat GitHub Copilot -valjastuksen avulla.

Note

Voit avata Monitor-välilehden ennen kuin julkaiset agenttisi. Tuotannon käyttö, palaute ja luottotiedot näkyvät sen jälkeen, kun olet julkaissut agentin ja ihmiset alkavat käyttää sitä.

Mitä voit seurata?

Monitor tarjoaa yhteenvetotason näkymän yksittäisestä agentista. Se sisältää seuraavat:

  • Yleiskatsaus: Kokonaisistuntoja, käyttäjiä, autonomisia suorituksia, keskimääräinen kesto, onnistumisprosentti ja epäonnistumisprosentti.
  • Reaktiot: Peukku ylös ja peukku alas -palaute agenttien vastauksista.
  • Käytetyt arvioidut kokonaishyvitykset: Agentin käyttämät hyvitykset valitun ajanjakson aikana.
  • Istunnot: Yksittäiset vuorovaikutukset, missä ne tapahtuivat ja niiden kuluttamat krediitit.

Käytä päivämääräsuodatinta keskittyäksesi tiettyyn raportointijaksoon. Prosentuaaliset indikaattorit vertaavat kutakin mittaria edelliseen ajanjaksoon.

Valvonta- ja agenttitoiminnot

Monitor on suunniteltu tekijöille, jotka haluavat nopean näkymän yksittäiseen agenttiin rakentaessaan ja parantaessaan sitä. Koko kaluston valvontaan, hallintaan, yksityiskohtaiseen tutkimukseen ja operatiiviseen optimointiin agenttien ja ympäristöjen välillä hyödynnä agenttien operaatioiden kokemusta.

Yleiskatsaus mittareista

Yleiskatsausosio näyttää:

  • Kokonaisistuntoja: Valitun ajanjakson aikana käytyjen keskustelusessioiden määrä.
  • Käyttäjien kokonaismäärä: Niiden käyttäjien määrä, jotka olivat vuorovaikutuksessa agentin kanssa valitun ajanjakson aikana.
  • Keskimääräinen kesto: Sessioiden ja juoksujen keskimääräinen kesto.
  • Onnistumisprosentti: Kuinka onnistuneesti agentti suoritti istunnot ja suoritukset.

Arvioidut kokonaiskäytetyt hyvitykset

Luottokortti näyttää agentin kuluttamien Copilot-krediittien kokonaismäärän valitun ajanjakson aikana sekä muutoksen edelliseen jaksoon. Toisin kuin lähes reaaliaikaiset arviot, joita näet Preview - ja Evaluate-toiminnoissa, Monitorissa näytetty arvo heijastaa kaikkia siihen asti käsiteltyjä tapahtumia ja on lopullinen totuuden lähde laskutuksessa.

Kun erittely on saatavilla, se näyttää arvioidun kulutuksen jakautumisen kokemuksen mukaan, mukaan lukien tuotantokäyttö, esikatselutestaus, arvioinnit ja muut tuetut pinnat. Käytä sitä ymmärtääksesi, mitkä aktiviteetit tai lopputulokset kuluttivat krediitit.

Lue lisää kohdista: Ymmärrä arvioitu luoton käyttö ja Yleiskatsaus käyttöperusteiseen laskutukseen.

Reaktiot

Reaktiot-osio näyttää käyttäjäpalautteen agenttien vastauksista. Kaavio laskee, kuinka usein käyttäjät valitsevat peukkua ylös (positiivinen) tai peukku alas (negatiivinen) jokaisesta agentiltasi saamastaan vastauksesta.

Agentin ominaisuudet

Kyvykkyydet-osio auttaa ymmärtämään, miten käyttäjät ovat vuorovaikutuksessa agenttisi kanssa ja missä vastausluotettavuus voi parantua. Se sisältää seuraavat:

  • Työkalun käyttö: Mitkä työkalut agentti käytti istunnon aikana.

Istunnon seuranta

Istuntolista näyttää yksittäiset keskustelutilaisuudet agenttisi kanssa. Jokainen sessio sisältää:

  • Tila: Onko istunto suoritettu, epäonnistunut vai kesken.
  • Kesto: Kuinka kauan istunto kesti.
  • Käyttäjäviestit: Vaihdettujen viestien määrä.
  • Käytetyt työkalut: Mitkä työkalut agentti käytti istunnon aikana.

Suodata sessioita tilan mukaan, kuten epäonnistunut, suoritettu tai kesken, löytääksesi nopeasti sessiot, jotka vaativat huomiota.

Valitse istunto nähdäksesi sen koko transkription, mukaan lukien käyttäjän viestit, agentin vastaukset sekä tiedot työkalun kutsuista ja tiedonlähteen käytöstä.

Virheiden seuranta

Monitor-välilehti auttaa tunnistamaan ja diagnosoimaan ongelmia:

  • Suodata istuntoja epäonnistuneen tai hylätyn tilan mukaan löytääksesi ongelmalliset vuorovaikutukset.
  • Käy läpi istunnon pöytäkirjat ymmärtääksesi, mikä meni pieleen.
  • Tarkista työkalun yhteyden tila ja todennusvirheet.
  • Etsi epäonnistuneista sessioista malleja, jotka saattavat viitata konfiguraatio-ongelmaan.

Vaiheittaiset ohjeet Monitor-välilehden käyttöön löydät kohdasta Monitor an agentti.

Lataa istunnon pöytäkirjat

Voit ladata istunnon pöytäkirjat muutama minuutti istunnon päättymisen jälkeen. Voit ladata minkä tahansa ajanjakson viimeisen 29 päivän aikana. Voit ladata ne Dataverse-versiossa käyttämällä Power Apps-portaalia ja session chat -tallenteita Copilot Studio -sovellusta käyttämällä. Analytiikkasession päättymisen jälkeen voi kestää jopa tunnin, ennen kuin siihen liittyvät tiedot näkyvät Monitor-välilehdellä.

Kertaustilaisuudet

Istuntolista näyttää viimeaikaiset vuorovaikutukset agenttisi kanssa.

Note

Istuntolista näyttää vain viimeisen 28 päivän istuntoja.

Vuorovaikutuksesta riippuen lista voi näyttää:

  • Nimi: Käyttäjä, joka on yhdistetty vuorovaikutukseen.
  • Päivämäärä: Kun vuorovaikutus tapahtui.
  • Kanava: Kanava tai Copilot Studio -pinta, jossa vuorovaikutus tapahtui.
  • Viestien määrä: Viestien määrä vuorovaikutuksessa.
  • Kesto: Vuorovaikutuksen pituus.
  • Käytetyt krediitit: Vuorovaikutuksen kuluttamat Copilot-krediitit.

Avaa istunnon yksityiskohdat -sivu tarkastellaksesi kokonaisistuntotilastoja, suodattaa listaa, etsiä istuntoja ja ladata istuntotiedot.

Muita opintosuoritusotteiden vientivaihtoehtoja varten löydät lisää osoitteesta Download agent session transcripts.

Vaiheittaista ohjausta varten opi lisää Monitorista ja analysoi agentin suorituskykyä.

  • Viimeksi päivitetty