Analizy — omówienie

Korzystaj z analiz, aby zrozumieć, jak dobrze działa Twój agent i zidentyfikować obszary wymagające poprawy.

Strona Analityka w Copilot Studio pokazuje kompleksowe dane o Twoim agencie, od przeglądu kluczowych wskaźników po szczegółową analitykę wykorzystania komponentów agenta. Możesz przejść do szczegółów każdego fragmentu danych.

Doświadczenie analityczne jest dostosowane do agentów konwersacyjnych oraz do agentów autonomicznych.

Analiza jest dostępna we wszystkich lokalizacjach geograficznych. Dane analityczne są dostępne przez maksymalnie 360 dni. Szczegóły sesji oraz informacje o transkrypcji są dostępne z ostatnich 28 dni. Sygnatury czasowe w analizie są wyrażone w uniwersalnym czasie koordynowanym (UTC). Obejmuje to stemple godziny i daty rozpoczęcia i zakończenia dnia, godziny sesji i wszelkie inne znaczniki czasu w danych agenta.

Notatka

Analizy nie są dostępne na stronie Analizy dla działań ukończonych podczas testowania agenta w aplikacji Copilot Studio przy użyciu panelu testowego.

Udzielanie ograniczonego dostępu tylko do wyświetlania w przypadku analizy

Jeśli jesteś właścicielem agenta i chcesz udzielić dostępu tylko do strony Analiza agenta, możesz to zrobić, udostępniając agenta z włączoną rolą udostępniania Osoba przeglądająca analizę. Jeśli chcesz, aby osoba, której udostępniasz agenta, miała dostęp do informacji z transkrypcji konwersacji, musi mieć ona również rolę zabezpieczeń Osoba przeglądająca transkrypcje botów.

Dowiedz się więcej o dzieleniu się analitykami agenta.

Ważne

Jako właściciel agenta możesz dzielić rolę przeglądarki analityki tylko z osobami indywidualnymi, a nie z grupami użytkowników.

Aby uzyskać dostęp do strony analityki swojego agenta:

1. Otwórz agenta w programie Copilot Studio.
2. Na górnym pasku menu wybierz Analityki.

Sumaryczny

W obszarze Podsumowanie narzędzie Copilot jest używane do generowania podsumowania wygenerowanego przez sztuczną inteligencję dla krytycznych informacji z aplikacji Analytics Insights dotyczących agenta. Wybierz Wyświetl więcej, aby zobaczyć pełną podsumowaną listę szczegółowych informacji.

Pomaga szybko zrozumieć najczęstsze motywy i wskaźniki oraz zidentyfikować obszary do poprawy dla Twojego agenta, podsumowując je w formie wypunktowanej listy dla wybranego okresu raportowania. Może to obejmować metryki zaangażowania, nastroje i opinie klientów oraz trendy od ostatniego okresu raportowania.

Podsumowanie komentarzy klientów (podgląd) pomaga zrozumieć ogólne nastroje klientów wobec agenta, takie jak opinie i komentarze. Szczegółowe informacje są priorytetyzowane zarówno na podstawie liczby powiązanych komentarzy, jak i ich ogólnego znaczenia. Komentarze o niskiej wartości lub nieistotne są filtrowane, a powiązane opinie grupowane razem.

Można przekazać firmie Microsoft opinię na temat tej sekcji za pomocą ikon Kciuk w górę i Kciuk w dół. Użyj panelu Prześlij opinię firmie Microsoft, aby dodać komentarz i udostępnić powiązane pliki. Przekazując w ten sposób opisową opinię, współpracujesz z nami przy ciągłym ulepszaniu naszego produktu.

1. W panelu Prześlij opinię do Microsoft opisz w naturalnym języku, co lubisz a czego nie lubisz, w zależności od ikony wybranej w celu otwarcia panelu.
2. Wybierz, czy chcesz udostępnić monit, wygenerowaną odpowiedź, odpowiednie próbki zawartości i dodatkowe pliki dziennika.
3. Wybierz opcję Prześlij.

Możesz również sprawdzić ogólne podsumowanie wydajności na stronie agenta Przegląd, a następnie zagłębić się w jego wydajność.

Aktywni użytkownicy

Metryki aktywnych użytkowników dostarczają szczegółowych informacji na temat stopnia wykorzystania agenta konwersacyjnego oraz obserwacji trendów jego użytkowania w czasie. Aktywny użytkownik to unikalny użytkownik, który nawiązał interakcję z agentem konwersacyjnym co najmniej raz w okresie objętym raportem. Copilot Studio Analytics wyświetla liczbę aktywnych użytkowników dla dwóch zdefiniowanych okresów: dziennych aktywnych użytkowników (DAU) oraz miesięcznych aktywnych użytkowników (MAU). Dzienny licznik rozpoczyna się i kończy według pełnego 24-godzinnego dnia w strefie czasowej UTC. Miesięczny licznik podąża za miesiącem kalendarzowym, rozpoczynając się i kończąc w pierwszym i ostatnim dniu miesiąca według czasu UTC.

Ważne

Funkcja Metryk aktywnych użytkowników jest obsługiwana tylko po ustawieniu agenta tak, aby wymagał uwierzytelniania w Ustawienia>Bezpieczeństwo>Autoryzacja.

Średnia wartość DAU dla wybranego okresu oraz jej procentowa zmiana względem poprzedniego okresu pojawia się jako kluczowy wskaźnik efektywności (KPI) w sekcji Przegląd.

Notatka

Wzór na średnią wartość DAU to: (sum of all full-day active user counts in the period) / (count of full days in the period).

Aby zobaczyć więcej szczegółów dotyczących liczby aktywnych użytkowników dziennie i miesięcznie oraz ich trendów na przestrzeni czasu, wybierz przycisk Zobacz aktywnych użytkowników w prawym górnym rogu panelu przeglądowego.

Tylko sesje konwersacyjne

Analizy dla agentów konwersacyjnych w Copilot Studio śledzą zaangażowanie użytkownika z agentem i próbują uchwycić, jak dobrze Twój agent radzi sobie z zadaniami użytkownika.

Analiza konwersacyjna używa następujących pojęć i terminów:

• Konwersacje to ciągła interakcja między konkretnym użytkownikiem lub grupą użytkowników na kanale a Twoim agentem.

• Konwersacje można wstrzymywać i wznawiać później lub przekazywać do przedstawiciela działu obsługi klienta. Konwersacja może być jednokierunkowa, od klienta do agent lub od agent do klienta, ale częściej jest to interakcja tam i z powrotem między klientem a agent.

• Konwersacja wygaśnie po 30 minutach braku aktywności.

• W przypadku agentów publikowanych na kanale Telefonia, rozmowy wygasają 3 minuty po zdarzeniu Zakończenie rozmowy.

• Jedna konwersacja może zawierać jedną lub więcej sesji analitycznych.

• Sesja analizy w trybie klasycznym jest skojarzona z ostatnim tematem niestandardowym wyzwolonym przez użytkownika. Jeśli sesja nie zawiera tematów niestandardowych, jest to ostatni temat systemowy wyzwalany bezpośrednio przez użytkownika.

Tylko sesje wyzwalacza zdarzeń

Agent autonomiczny to agent z wyzwalaczem zdarzenia. Ci agenci obsługują tylko analizy dla agentów z wyzwalaczami.

Sesja analityczna dla agentów z wyzwalaczami śledzi moment, w którym agent odbiera ładunek z wyzwalacza, przez dowolne akcje uruchamiane przez agenta w odpowiedzi. Te sesje analityczne rejestrują, na co reaguje Twój agent i jak dobrze działa.

Notatka

Jeśli wyzwalacz zakończy się niepowodzeniem, a agent nie otrzyma ładunku wyzwalacza, sesja analizy nie będzie mogła się rozpocząć. Analiza śledzi tylko pomyślnie wyzwolone przebiegi.

Widok hybrydowy — zarówno sesje konwersacyjne, jak i wyzwalane zdarzeniami

Gdy dane Twojego agenta obejmują sesje przynajmniej jednej rozmowy oraz co najmniej jednego uruchomienia opartego na wyzwalaczu w okresie raportu, strona Analityka wyświetla hybrydowy widok istotnych metryk zarówno dla sesji konwersacyjnych, jak i autonomicznych. W tym widoku sekcje Przegląd i Efektywność wyświetlają metryki jednocześnie dla sesji konwersacyjnych i zdarzeniowych. Sekcja Użytkowanie pozwala wybrać między Konwersacjami a Uruchomieniami, wyświetlając tylko odpowiednie dane. Po wybraniu Wszystko zostaną wyświetlone wszystkie dane dotyczące wykorzystania. Sekcja Satysfakcja pokazuje metryki zadowolenia dla sesji konwersacyjnych.

Aby uzyskać więcej informacji o:

• Wyświetlane metryki istotne dla sesji konwersacji, zobacz Analizowanie skuteczności agenta konwersacyjnego.

• Wyświetlane metryki istotne dla sesji inicjowanych zdarzeniami, zobacz Analiza kondycji agenta autonomicznego.

Pobieranie transkrypcji konwersacyjne

Transkrypcje rozmów możesz pobrać kilka minut po zakończeniu rozmowy. Możesz pobrać dowolny okres w ciągu ostatnich 29 dni. Można je pobrać w formacie Dataverse za pośrednictwem portalu Power Apps oraz jako transkrypcje czatów sesji za pośrednictwem aplikacji Copilot Studio. Po zakończeniu sesji analitycznej może upłynąć nie więcej niż godzina, zanim powiązane dane będą wyświetlane na pulpicie nawigacyjnym analizy.

Notatka

Transkrypcje konwersacji w Dataverse nie są dostępne do pobrania w aplikacji Copilot Studio w rozwiązaniu Teams. Aby sprawdzić i wyeksportować transkrypcje w Dataverse, należy zarejestrować się w aplikacji internetowej Copilot Studio. Transkrypcje czatu sesji można pobrać za pośrednictwem aplikacji Copilot Studio. Więcej informacji można znaleźć w temacie Pobieranie transkrypcji sesji agenta.

Analizowanie użycia tematów

W Copilot Studio temat określa przebieg rozmowy między użytkownikiem a agentem i reprezentuje jej część. Panel analityczny tematów pokazuje, jak funkcjonuje dany temat, w tym jak często jest wyzwalany, jak przebiegają sesje, które go zawierają, oraz jaki jest poziom zadowolenia użytkowników z tych sesji. Możesz wykorzystać te szczegółowe informacje, aby zidentyfikować tematy, które często eskalują lub są porzucane, a następnie nadać im priorytet przy wprowadzaniu usprawnień. Aby dowiedzieć się więcej o tematach i sposobie ich tworzenia, zobacz Tworzenie i edycja tematów.

Notatka

Analityka tematów jest dostępna tylko dla agentów w trybie klasycznym oraz dla tematów powiązanych z sesją analityczną. Jeśli Twój agent korzysta z generatywnej orkiestracji, zamiast tego korzystaj z wyników rozmów i tematów na stronie Analityka .

Aby zobaczyć panel analityki tematu:

1. Przejdź do strony Tematy agenta w Copilot Studio.

2. Wybierz koncepcję, którą chcesz przeanalizować. Jeśli nie ma dostępnych tematów, zobacz Utwórz i edytuj tematy.

3. Wybierz swoje środowisko w prawym górnym rogu strony Tematy, wybierz Więcej (...) >Analiza.

Panel analizy tematycznej pokazuje:

• Wyniki tematu: Wykres wyników sesji, Escalated, Resolved i Abandoned dla sesji, w których ten temat został uruchomiony. Skorzystaj z tego wykresu, aby szybko ocenić kondycję tematu. Wysoki odsetek Escalated lub Abandoned wyników może oznaczać, że temat wymaga poprawy.
• Całkowite wykorzystanie tematu: wykres trendu wyników tematu w czasie. Użyj tego, aby wykryć regresje, na przykład nagły wzrost liczby porzuconych sesji po edycji tematu lub potwierdzić, że ostatnie zmiany poprawiły skuteczność rozwiązywania tematów.
• Wskaźnik zadowolenia klienta: Wynik oparty na odpowiedziach ankiet użytkowników podczas sesji związanych z tym tematem.
• Trend oceny satysfakcji: wykres pokazujący, jak zmienia się wskaźnik satysfakcji w czasie. Wykorzystaj ten trend, aby zidentyfikować okresy, w których sentyment użytkowników spadał lub się poprawiał.

Aby zmienić zakres czasu, wybierz menu rozwijane zakresu u góry strony panel Analizy.

Informacje pokrewne

• Mierz zwrot z inwestycji (ROI) i wartość biznesową agentów AI