Kullanıcı sorularını temaya göre analiz etme (önizleme)

[Bu makale, yayın öncesi belgelerine dahildir ve değiştirilebilir.]

Temalar, kullanıcı soruları havuzundan alınan ve üretken yanıtları tetikleyen soruların gruplandırılmasıdır. Temalar kümele ilgili kullanıcı sorularını akıllıca düzenlenmiş ancak daha az ve daha yönetilebilir gruplar halinde gruplandırır. Temalarla müşteri amacı hakkında kategori düzeyinde içgörüler elde edebilir, sık kullanılan konuları tanımlayabilir ve geliştirme gereken alanlara odaklanabilirsiniz. Daha sonra tema düzeyindeki ölçümleri daha iyi anlamak için bir temanın tek tek sorularında detaya gidebilir ve performansı bu daha ayrıntılı düzeyde izleyebilirsiniz.

Önemli

Bu madde, Microsoft Copilot Studio önizleme belgelerini içerir ve değişikliğe tabidir.

Önizleme özellikleri üretim kullanımına yönelik değildir ve sınırlı işlevselliğe sahip olabilir. Bu özellikler, önceden erişebilmeniz ve geri bildirim sağlamanız amacıyla resmi sürümden önce kullanıma sunulur.

Üretime hazır bir aracı oluşturuyorsanız, Microsoft Copilot Studio Genel Bakış'a bakın.

Anahtar değer teklifi

Temalar özelliği, geçen hafta üretken yapay zeka yanıtlarını tetikleyen tüm sınıflandırılmamış soruları otomatik olarak analiz eder ve bu analizi temel alan temalar önerir. Bu işlem haftalık olarak çalışır. Haftalık tema önerisi çalıştırmaları arasında özellik, üretken yapay zeka yanıtlarını tetikleyen yeni soruların günlük sınıflandırmasını gerçekleştirerek bu verileri tema ölçümlerine ekler. Temalarınızın ilgili kalması ve en son kullanıcı verilerini yansıtması için önerilen Temalar listesi düzenli olarak yenilenir. Bu otomatik yenileme size şu şekilde zaman kazandırır:

• Temanın yeni verilerle olan ilgi düzeyini sürekli değerlendirme
• Tek tek soruları temalar halinde otomatik olarak sınıflandırma
• Her tema için ham ölçüm verilerinin alınmasını otomatikleştirme
• Her tema için toplanan ölçüm verilerini hesaplama

Önkoşullar

Temalar özelliğinin değerini optimize etmek için, her temanın bileşen sorularını ve yanıtlarını detaylarına inmek de dahil olmak üzere:

• Listeyi ve ölçümlerini görüntülemek için Bot Transkript Görüntüleyicisi güvenlik rolüne ihtiyacınız vardır. Aracı paylaşımı sırasında Bot Transkript Görüntüleyicisi güvenlik rolünü atayarak bu rolü yalnızca yöneticiler verebilir.

• Konuşma transkriptlerini Dataverse'de depolamak için ortam düzeyindeki ayarlar açıktır.

Önerilen temalar ve sınıflandırılmış sorular

Copilot Studio, yakın geçmişte sorulan soruların kayıtlarına dayalı temalar önerir. Önerilen her temayı kuruluşunuzun yapısına ve müşteri deneyimi stratejisine uyacak şekilde uyarlayarak, temaya özgü temel performans göstergeleri (KPI' ler) aracılığıyla daha iyi içgörüler elde edebilirsiniz. Bu daha ayrıntılı ayrıntı düzeyi, aracıların nerede düşük performans göstermiş olduğunu bulmayı kolaylaştırır.

Temalar, kullanıcıların aracıya hangi soruları sorduğunu ve aracının performansını anlamalarına yardımcı olur. Tema tabanlı analizin ilk çalıştırması olan Copilot Studio, geçen haftaki tüm sorulara bakar ve kullanıcı sorularını birbirine benzer şekilde gruplandıran en fazla 10 tema önerir. Her tema toplam soru sayısı, yanıt oranı ve kullanıcı tepkisi gibi ölçümleri içerir. Temalar listesinde görüntülenen veriler, seçilen analiz dönemine göre ayarlanır.

İlk çalıştırmadan sonra Copilot Studio, mevcut temalara yönelik yeni soruları sürekli ve günlük olarak sınıflandırır ve haftalık olarak önerilen temaların yeni bir listesini oluşturur.

Uyarı

• Copilot Studio önerilen temaları oluşturmadan önce son yedi gün içinde kaydedilen üretken yanıtlarla en az 50 soru olmalıdır.
• Üretken bir yapay zeka yanıtını tetikleyen bir sorunun birden fazla tema olarak sınıflandırılması mümkündür. Bu senaryo, aracı yanıtının birkaç farklı kaynaktan gelebildiği Üretken Düzenleme modunda daha yaygın hale gelebilir.
• Sınıflandırılmamış olarak kalan tüm sorular Sınıflandırılmamış bir temaya konur .
• Haftalık önerilerin tamamlanması birkaç dakika sürebilir. Bu süre boyunca Temalar bölümü kullanılamaz.

Temalar listesi

Varsayılan olarak, Temalar listesi, her bir tema için sınıflandırılan toplam soru sayısına göre sıralanmış ilk beş (5) temayı görüntüler. Listeyi tüm temaları görüntüleyecek şekilde genişletmek için Tümünü göster'i seçin.

Otomatik haftalık tema önerisi çalıştırmaları ve günlük soru sınıflandırmasıyla Temalar özelliği otomatik olarak gelişir ve kullanıcı davranışındaki değişikliklere uyarlanabilir.

Temalar listesi, listelenen her tema için metrikleri görüntüler.

Köşe yazısı	Description
İsim	Temanın adı.
Toplam soru sayısı	Yapılandırılan zaman aralığı için bu temada sınıflandırılan toplam soru sayısı.
Yanıtlı sorular	Kullanıcı sorusunun yanıtıyla sonuçlanan Toplam soruların oranı.
Tepkiler	Her temaya sınıflandırılan sorulardan pozitif (başparmak yukarı) ve negatif (başparmak aşağı) tepkilerin ham sayısı.

Uyarı

Tüm sınıflandırılmış sorular üretken yapay zeka yanıtlarını tetiklediğinde neden temamda 'Yanıtlanmamış sorular' var?

Tanım gereği, yalnızca üretken bir yapay zeka yanıtlarını tetikleyen sorular bir tema olarak sınıflandırılabilir. Ancak, üretken yanıtlara yönelik bir çağrı tetikleme, bir kullanıcı sorgusuna yanıt vermekle aynı değildir.

Örneğin, bir bilgi kaynağına bağlı konuşmayı teşvik eden bir konu olması yaygın bir durumdur. Bu durumda, bir amaç tanınmıyorsa, bu konu tetiklenebilir ve bu durum söz konusu bilgi kaynağında sorunun yanıtı olmasa bile bilgi kaynağını çağırabilir.

Tema üzerinde derinlemesine inceleme

Herhangi bir temada gruplandırılmış soruların detayına gitmek için Temalar listesinden temayı seçin. Detaya gittiğiniz zaman, seçilen temaya özgü bir panel açılır ve hem temanın hem de tek tek soruların düzeylerinde ölçümler görüntülenir.

Uyarı

Temalar listesi şunları içerir:

• Her temada sınıflandırılan en son 100 soruya kadar.
• Yapılandırılan zaman aralığından bağımsız olarak son 30 güne ait sorular. Yapılandırılan dönem tamamen son 30 günün dışındaysa Copilot Studio, listenin kullanılamadığını belirten bir bildirim görüntüler.

Bir temanın detaya gitme panelinde önce tema düzeyindeki ölçümler görüntülenir.

Tema düzeyinde ölçüm	Description
Toplam soru sayısı	Yapılandırılan zaman aralığı için üretken yapay zeka yanıtlarını tetikleyen toplam soru sayısı (bu temada sınıflandırılır).
Yanıtlı sorular	Bu temanın Kullanıcı sorusuna yanıt veren Toplam soruların oranı.
Yanıtlanmamış sorular	Bu temanın Kullanıcı sorusunun yanıtına neden olmayan Toplam soruların oranı.
Tepkiler	Geri Bildirim Öğrenme mekanizmasında belirtildiği gibi, bu temaya sınıflandırılan sorulardan elde edilen pozitif (başparmak yukarı) ve negatif (başparmak aşağı) tepkilerin ham sayısı.

Yanıtlanan soruların bir örneklemesi ve bu temadaki tüm başvurulan bilgi kaynakları için yanıt kalitesinin dökümünü görüntülemek için Daha fazla göster'i seçin.

Tema metrikleri panelinde, tema düzeyindeki herhangi bir yanıt kalitesi değeri hakkında daha fazla bilgi görmek için Yanıt kalitesi'nin altında tek bir çubuk segmentinin üzerine gelin. Araç ipucu, bu segmentin göreli ağırlığının değerini ve bu değere ulaşmak için örneklenen soru sayısını içerir.

Listelenen bilgi kaynaklarından herhangi birinin düzeyinde daha fazla bilgi görmek için, Bilgi kaynağı kullanımı altında, tek bir bilgi kaynağı seçin. Araç ipucu şunları içerir:

• Bu temada bu bilgi kaynağına atıfta bulunan toplam soru sayısı ve beğenme ve beğenmeme tepkilerinin sayısı.
• Temada bu bilgi kaynağına atıfta bulunan sorular için yanıt kalitesinin göreli ağırlıklarının dökümünü gösteren yığılmış bir çubuk grafik. Çubuk grafiğin herhangi bir bölümünün üzerine gelerek, o segmentin göreli ağırlığının değerini ve bu değere ulaşmak için örneklenen soru sayısını görün.

Tek bir temanın detaya gitme panelinde, Kullanıcı soruları bölümü, yapılandırılan zaman diliminde üretken yapay zeka yanıtlarını tetikleyen ve bu temada sınıflandırılan tüm soruları listeler ve ölçümleri soru bazında görüntüler. Soru düzeyi ölçümler şunlardır:

Soru düzeyi boyutu veya metrik	Description
Soru (boyut)	Bu temada sınıflandırılan soru (üretici yapay zeka yanıtlarını tetikleyen soru).
Yanıtladı?	Kullanıcı sorgusunun yanıtlanıp yanıtlanmadığı sorusuna yanıt. Olası değerler Answered ve Unanswered şeklindedir.
Yanıt kalitesi1	Kullanıcı sorgusuna verilen yanıt kalitesinin ne olduğu sorusuna yanıt. Olası değerler Poor ve Good şeklindedir.
Tepki	Boole Başparmak yukarı / Başparmak aşağı ölçümü ve metin tabanlı bir Açıklama parametresi olmak üzere iki parametre.
Bilgi kaynağı	Bu temada bu soru tarafından atıfta bulunulan bilgi kaynaklarının virgülle ayrılmış listesi.

¹ Yanıt kalitesi her zaman kullanılamaz ve yalnızca sorunun kalite analizi için örneklenmesi durumunda gösterilir.

Soru ayrıntıları panelinde soru hakkında daha fazla bilgi görüntülemek için listeden herhangi bir soruyu seçin. Bu panel şunları içerir:

Ayrıntılı soru düzeyi parametresi	Description
Zaman damgası	Sorunun yanıtlandığı en son örneğin zaman damgası.
Kullanıcı sorgusu	Soru soruldu.
Yanıt	Üretici yapay zeka cevabı.
Başparmak yukarı / Başparmak aşağı değeri	Thumbs up / Thumbs down parametresi için bu sorunun en son örneğinin değeri.
Comment	Beğenme / Beğenmeme tepkisine ek olarak kullanıcı tarafından sağlanan isteğe bağlı ekstra metin tabanlı yorum.
Yanıt kalitesi1	Kullanıcı sorgusuna verilen yanıt kalitesinin ne olduğu sorusuna yanıt. Olası değerler Poor ve Good şeklindedir.
Neden2	Yanıt kalitesinin Poorolması durumunda, bu parametre nedenini açıklar.

¹ Yanıt kalitesi her zaman kullanılamaz ve yalnızca sorunun kalite analizi için örneklenmesi durumunda gösterilir.

² Yanıt kalitesi ise Good veya soru örneklenmemişse Reason parametresine herhangi bir değer atanmamış olabilir.