Mierzenie wyników czatbota

Ważne

Możliwości i funkcje Power Virtual Agents są teraz częścią Microsoft Copilot Studio w wyniku znacznych inwestycji w generatywną AI i poprawioną integracje z Microsoft Copilot.

Niektóre artykuły i zrzuty ekranów mogą odwoływać się do Power Virtual Agents podczas aktualizowania dokumentacji i zawartości szkoleniowej.

Śledzenie zaangażowania i wyników konwersacji jest decydujące w celu oceny metryk wydajności rozmowy i obszarów dostrzegania usprawnień na pulpicie nawigacyjnym analizy.

Ważne

Konwersacja Microsoft Copilot Studio między użytkownikiem końcowym a czatbotem tworzy jedną lub wiele sesji analitycznych. Wszystkie sesji analizy są albo angażowane, albo niezaangażowane.

Interpretacja wyników sesji analitycznych

Wyniki każdej z sesji analitycznych:

  • Niezaangażowane sesje zawsze mają wynik Brak.
  • Zaangażowane sesje mają jedne z następujących wyników:
  • Rozwiązane,
  • Eskalowane,
  • Porzucone.

Zaangażowanie i wyniki

Sesji analizy konwersacji, ich stanu zobowiązania i wyniki są dostępne jako część pulpitu nawigacyjnego analizy lub w tabeli ConversationTranscript w Dataverse.

Zaangażowanie Wynik Definicja
Niezaangażowane Brak (None) Wszystkie niezaangażowane sesje zawsze mają wynik Brak.
Zaangażowane Eskalowane (HandOff) Sesja jest uważana za eskalowaną, gdy po eskalacji temat jest wyzwalany lub zostanie osiągnięty węzeł Przekazanie konwersacji.
Zaangażowane Rozwiązane (Resolved) Sesja jest uważana za rozwiązaną, gdy temat Koniec konwersacji jest wywołany i użytkownik potwierdza, że interakcja zakończyła się powodzeniem (impliedSuccess = FALSE) lub nie ma odpowiedzi i pozwala na wygaśnięcie sesji (impliedSuccess = TRUE).
Zaangażowane Porzucone (Abandoned) Sesja jest uważana za porzuconą w momencie końca zaangażowanej sesji, która nie została rozwiązana ani eskalowana.

Poprawnie kończące się konwersacje w celu oceny wyników

Ważne jest, aby zakończyć konwersację tematem Koniec konwersacji, by użytkownik końcowy mógł potwierdzić, czy problem jest rozwiązany (i potencjalnie eskalować).

Gdy bot potwierdzi powodzenie, użytkownikowi końcowemu wyświetli się ankieta CSAT do wystawienia oceny 0–5.

Jeśli masz pewność, że konwersacja jest oparta na logice tematu, możesz ją bezpośrednio przekierowywać jako potwierdzenie sukcesu lub skierować do eskalowania tematu.

Napiwek

Na ujednoliconej kanwie tworzenia można ustawić conversationOutcome w akcji. Na przykład conversationOutcome: ResolvedConfirmed dla potwierdzonego powodzenia lub conversationOutcome: ResolvedImplied dla sugerowanego powodzenia.