Sdílet prostřednictvím


Analýza uživatelských otázek podle tématu (Preview)

[Tento článek představuje předběžnou dokumentaci a může se změnit.]

Motivy jsou seskupení otázek převzatých z fondu uživatelských otázek, které vyvolávají generované odpovědi. Témata shlukují související uživatelské otázky do inteligentně uspořádaných, ale méně početných a více zvládnutelných skupin. Pomocí motivů můžete získat přehledy o záměru zákazníka na úrovni kategorií, identifikovat časté témata a zaměřit se na oblasti, které potřebují zlepšení. Pak můžete přejít k podrobnostem jednotlivých otázek motivu a monitorovat výkon na této podrobnější úrovni, abyste lépe porozuměli metrikám na úrovni motivu.

Důležité

Tento článek obsahuje dokumentaci k funkcím Preview v řešení Microsoft Copilot Studio a může se změnit.

Funkce ve verzi Preview nejsou určené pro produkční použití a můžou mít omezené funkce. Jsou to funkce, které jsou poskytnuté před oficiálním vydáním, abyste si je mohli co nejdříve vyzkoušet a napsat nám své názory.

Pokud vytváříte agenta připraveného do provozního prostředí, podívejte se do tématu Přehled řešení Microsoft Copilot Studio.

Návrh klíčové hodnoty

Funkce Motivy automaticky analyzuje všechny neotříděné otázky, které aktivovaly generující odpovědi umělé inteligence v minulém týdnu, a navrhuje motivy založené na této analýze. Tento proces se spouští každý týden. V době mezi týdenními spuštěními návrhů motivů funkce provádí denní klasifikaci všech nových otázek, které aktivují odpovědi generované AI a přidává tato data do metrik motivu. Seznam navrhovaných motivů se pravidelně aktualizuje, aby vaše motivy zůstaly relevantní a odrážely nejnovější uživatelská data. Tato automatická aktualizace vám ušetří čas:

  • Průběžné vyhodnocování relevance motivu s novými daty
  • Automatická klasifikace jednotlivých otázek do motivů
  • Automatizace načítání nezpracovaných dat metrik pro každé téma
  • Výpočet agregovaných dat metrik pro každý motiv

Požadavky

Pokud chcete optimalizovat hodnotu funkce Motivy, včetně možnosti přejít k podrobnostem na otázky a odpovědi jednotlivých součástí motivu:

Navrhované motivy a klasifikované otázky

Copilot Studio navrhuje motivy založené na záznamech otázek kladených v nedávné minulosti. Přizpůsobením každého navrhovaného motivu tak, aby vyhovoval struktuře vaší organizace a strategii zákaznického prostředí, můžete získat lepší přehled o klíčových ukazatelích výkonu specifických pro motivy (KPI). Tato podrobnější členitost usnadňuje identifikaci míst, kde agenti nedosahují výkonu.

Motivy pomáhají tvůrcům pochopit, jaké otázky se uživatelé ptají na agenta a jak agent funguje. Při počátečním spuštění analýzy založené na tématech se Copilot Studio zaměřuje na všechny otázky z minulého týdne a navrhuje až 10 témat pro seskupení podobných uživatelských otázek. Každý motiv zahrnuje metriky, jako je celkový počet otázek, míra odpovědí a reakce uživatelů. Zobrazená data v seznamu Motivy se upraví na základě vybraného období analýzy.

Po počátečním spuštění aplikace Copilot Studio klasifikuje nové otázky k existujícím motivům průběžně, denně a každý týden vygeneruje nový seznam navrhovaných motivů.

Poznámka:

  • Než Copilot Studio vygeneruje navrhované motivy, musí existovat alespoň 50 otázek s generovanými odpověďmi za posledních 7 dnů.
  • Je možné, že otázka, která spustí odpověď generativní umělé inteligence, bude rozdělena do více než jednoho tématu. Tento scénář může být běžnější v režimu Generativní orchestrace , kde odpověď agenta může pocházet z několika různých zdrojů.
  • Všechny otázky, které zůstávají neotříděné, se vloží do neklasifikovaného motivu.
  • Dokončení spouštění týdenních návrhů může trvat několik minut. Během této doby není oddíl Motivy k dispozici pro použití.

Seznam motivů

Ve výchozím nastavení se v seznamu Motivy zobrazuje prvních pět (5) témat seřazených podle celkového počtu otázek klasifikovaných do jednotlivých témat. Výběrem možnosti Zobrazit vše rozbalte seznam, aby se zobrazily všechny motivy.

Díky automatickým týdenním spuštěním návrhu motivů a denní klasifikaci otázek se funkce Motivy automaticky vyvíjí a přizpůsobuje změnám v chování uživatelů.

Snímek obrazovky se seznamem s Tématy na kartě Analýza

V seznamu Motivy se zobrazují metriky pro každý uvedený motiv.

Sloupec Description
Název Název motivu.
Celkový počet otázek Celkový počet otázek klasifikovaných do tohoto motivu pro nakonfigurované časové období
Zodpovězené otázky Poměr celkových otázek , které způsobily odpověď na otázku uživatele.
Kvalita odezvy Podíl součtu všech odpovědí (na základě vzorku otázek) má Good kvalitní odpověď.
Reakce Nezpracovaný počet kladných reakcí (palce nahoru) a negativních reakcí (palce dolů) z otázek klasifikovaných ke každému motivu.

Poznámka:

Proč se v mém motivu zobrazují nezodpovězené otázky, když všechny klasifikované otázky aktivovaly odpovědi generované pomocí AI?

Podle definice je možné klasifikovat do motivu pouze otázky, které aktivovaly odpověď generující umělou inteligenci. Aktivace volání generující odpovědi ale není stejná jako odpověď na uživatelský dotaz.

Například je běžné, že je k tématu rozhovoru propojenému se zdrojem znalostí připojeno stimulační téma. V takovém případě, pokud záměr není rozpoznán, může být toto téma aktivováno, které volá zdroj znalostí, i když neexistuje odpověď na otázku v tomto zdroji znalostí.

Detailnější zkoumání tématu

Chcete-li přejít k podrobnostem o otázkách seskupených do jednoho tématu, vyberte motiv v seznamu Motivy . Když přejdete k podrobnostem, otevře se panel specifický pro vybraný motiv a zobrazí metriky na úrovních motivu i jednotlivých otázek.

Poznámka:

Seznam motivů obsahuje:

  • Až do posledních 100 otázek zařazených do každého motivu.
  • Dotazy za posledních 30 dnů bez ohledu na nakonfigurované časové období Pokud je nakonfigurované období zcela mimo posledních 30 dní, aplikace Copilot Studio zobrazí upozornění, že seznam není k dispozici.

Snímek obrazovky s panelem pro podrobný rozbor motivu

Na panelu přechodu k podrobnostem motivu se metriky na úrovni motivu zobrazí jako první.

Metrika na úrovni tématu Description
Celkový počet otázek Celkový počet otázek (klasifikovaných do tohoto motivu), které aktivovaly generující odpovědi umělé inteligence pro nakonfigurované časové období.
Zodpovězené otázky Poměr celkových otázek tohoto tématu, které vedly k odpovědi na otázku uživatele.
Nezodpovězené otázky Poměr celkových otázek tohoto tématu, které nevedly k odpovědi na otázku uživatele.
Reakce Nezpracovaný počet pozitivních (palec nahoru) a negativních (palec dolů) reakcí z otázek klasifikovaných k tomuto tématu, jak je zaznamenáno v mechanismu zpětné vazby Learn.

Chcete-li zobrazit rozpis kvality odpovědí pro vzorek zodpovězených otázek a všechny odkazované zdroje znalostí v tomto motivu, vyberte možnost Zobrazit více.

Snímek obrazovky skládaného pruhového grafu zobrazující relativní váhy kvality odpovědí u ukázkových otázek pro motiv

Chcete-li na panelu Metriky motivu zobrazit další informace o libovolné hodnotě kvality odezvy na úrovni motivu, umístěte v části Kvalita odezvy kurzor na jednotlivý segment pruhu. Popis obsahuje hodnotu relativní váhy daného segmentu a počet otázek použitých k určení této hodnoty.

Snímek obrazovky s relativními váhami kvality odezvy pro daný motiv, který ukazuje popisek pro jednu hodnotu kvality.

Chcete-li zobrazit více informací na úrovni kteréhokoli z uvedených zdrojů znalostí v tématu, v sekci Použití zdrojů znalostí vyberte jednotlivý zdroj znalostí. Popis obsahuje:

  • Celkový počet otázek, které odkazovaly na tento zdroj znalostí, a také počet reakcí Palec nahoruPalec dolů.
  • Skládaný pruhový graf znázorňující rozpis kvality odpovědi relativní váhy pro otázky odkazující na tento zdroj znalostí. Najeďte myší na libovolný segment pruhového grafu, abyste viděli hodnotu relativní váhy daného segmentu a počet otázek, z nichž byl tento údaj získán.

Snímek obrazovky s relativní váhou kvality odpovědi pro daný zdroj znalostí zobrazující popis pro jednu hodnotu kvality.

V podrobném panelu jednotlivých témat jsou v části Uživatelské otázky uvedeny všechny otázky, které vyvolaly odpovědi generativní umělé inteligence v nakonfigurovaném časovém období a byly zařazeny do tohoto motivu, a jsou zde zobrazeny metriky pro jednotlivé otázky . Mezi metriky na úrovni otázek patří:

Dimenze nebo metrika na úrovni otázek Description
Otázka (rozměr) Otázka (která aktivovala odpověď generovanou umělou inteligencí) klasifikovaná k tomuto tématu.
Odpověděl? Odpověď na otázku, jestli byl dotaz uživatele zodpovězen nebo ne. Možné hodnoty jsou Answered a Unanswered.
Kvalita odezvy1 Odpověď na otázku, jaká byla kvalita odpovědi na dotaz uživatele. Možné hodnoty jsou Poor a Good.
Reakce Dva parametry: jeden je logickou metrikou Palec nahoru / Palec dolů a druhý je textovým parametrem Komentář.
Zdroj znalostí Čárkami oddělený seznam zdrojů znalostí, na které odkazuje tato otázka v tomto tématu.

1 Kvalita odpovědi není vždy k dispozici a zobrazuje se pouze v případě, že byla otázka vzorkována pro analýzu kvality.

Výběrem libovolné otázky v seznamu zobrazíte další informace o otázce na panelu podrobností otázky . Tento panel obsahuje:

Podrobný parametr na úrovni otázky Description
Časová značka Časové razítko poslední instance odpovědi na otázku
Dotaz uživatele Otázka byla položena.
Odezva Odpověď generativní umělé inteligence.
Palec nahoru / Palec dolů Hodnota pro nejnovější instanci této otázky pro parametr Palec nahoru/Palec dolů.
Comment Volitelný další textový komentář, poskytnutý uživatelem, kromě reakce palec nahoru / palec dolů .
Kvalita odezvy1 Odpověď na otázku, jaká byla kvalita odpovědi na dotaz uživatele. Možné hodnoty jsou Poor a Good.
Důvod2 V případě, že je Poorkvalita odpovědi , tento parametr vysvětluje, proč.

1 Kvalita odpovědi není vždy k dispozici a zobrazuje se pouze v případě, že byla otázka vzorkována pro analýzu kvality.

2 Pokud je Good kvalita odpovědi nebo pokud nebyla otázka vzorkována, parametr Reason nemá přiřazenou žádnou hodnotu.

Snímek obrazovky s podrobnostmi metrik na úrovni otázky v rámci motivu.