संवादी एजेंट प्रभावशीलता का विश्लेषण करें

Copilot स्टूडियो में Analytics पेज analytics सत्र में आपके एजेंट की समग्र प्रभावशीलता के बारे में एक समग्र अंतर्दृष्टि प्रदान करता है. यह पेज विभिन्न प्रदर्शन संदर्भों पर केंद्रित मुख्य क्षेत्रों में विभाजित है. पेज एक अवलोकन भी दिखाता है, जो आपके एजेंट के लिए उच्च-स्तरीय प्रमुख प्रदर्शन संकेतक (KPI) मेट्रिक्स प्रदान करता है। इसमें एक बचत अनुभाग शामिल है जो आपके एजेंट या उसके उपकरणों के कारण होने वाली समय और लागत की बचत का विश्लेषण करता है। इसके अलावा, एक सारांश अनुभाग भी है जो आपके एजेंट के प्रदर्शन से संबंधित मुख्य विश्लेषणात्मक जानकारी प्रदान करता है।

अधिक जानकारी के लिए:

• सारांश और अवलोकन क्षेत्रों को, एनालिटिक्स अवलोकन में देखें।
• बचत क्षेत्र: एजेंटों के लिए समय और लागत बचत का विश्लेषण देखें

वार्तालाप-आधारित एजेंट की प्रभावशीलता की समीक्षा और सुधार करते समय ध्यान केंद्रित करने के लिए छह मुख्य क्षेत्र हैं:

• थीम: थीम्स आपको उपयोगकर्ता प्रश्नों को AI द्वारा सुझाई गई श्रेणियों में समूहित करके विश्लेषणात्मक जानकारी प्राप्त करने में मदद करते हैं.
• वार्तालाप के परिणाम: वार्तालाप का अंतिम परिणाम जानने से यह समझने में मदद मिलती है कि एजेंट कहाँ सफल हो रहा है और कहाँ सुधार की आवश्यकता है.
• एजेंट: चाइल्ड और कनेक्टेड एजेंटों के लिए कॉल वॉल्यूम मेट्रिक्स, सफलता दर और वर्तमान स्थिति देखें.
• उत्पन्न उत्तर दर और गुणवत्ता: यह समझना कि एजेंट कब उत्तर देने में संघर्ष कर रहा है और वह ज्ञान स्रोतों का उपयोग कैसे कर रहा है, आपको उत्तर दर और गुणवत्ता सुधारने में मदद करता है.
• उपकरण का उपयोग: यह जानना कि टूल कितनी बार उपयोग किए गए और कितनी बार सफल रहे, यह समझने में मदद करता है कि वे उपयोगकर्ताओं के लिए कितने उपयोगी हैं.
• संतुष्टि: उपयोगकर्ता प्रतिक्रिया की समीक्षा करने से नए उपयोगकर्ता परिदृश्य और मुद्दों की पहचान होती है और सीधे उपयोगकर्ता अपेक्षाओं के आधार पर सुधार करने में मदद मिलती है.

आप पिछले 90 दिनों में हुई घटनाओं के लिए एनालिटिक्स देख सकते हैं.

वार्तालाप परिणाम

वार्तालाप परिणाम अनुभाग एक चार्ट दिखाता है जो आपके एजेंट और उपयोगकर्ताओं के बीच हर सत्र के परिणाम को ट्रैक करता है.

परिणामों और संबद्धता चार्ट का स्क्रीनशॉट.

चार्ट, चाहे वह स्टैक्ड हिस्टोग्राम या स्टैक्ड एरिया चार्ट के रूप में प्रदर्शित किया जाता हो, परिणामों की सापेक्ष मात्रा को दर्शाता है, जो रंग-कोडित और प्रकार के अनुसार स्टैक्ड होता है। हल किया गया, बढ़ाया गया, परित्यक्त, और असंबद्ध में से प्रत्येक को प्रत्येक डेटा बिंदु के लिए उनके संबंधित रंगों द्वारा दर्शाया जाता है. y- अक्ष सत्रों की संख्या को इंगित करता है।

एक डेटा बिंदु (विशिष्ट दिन) के लिए व्यक्तिगत परिणामों के बारे में मीट्रिक्स देखने के लिए, माउस का उपयोग करके उस क्षेत्र पर जाएं जो रुचि के परिणाम के रंग का प्रतिनिधित्व करता है (उदाहरण के लिए, परित्यक्त परिणाम के लिए चैती) जिस दिन में आपकी रुचि हो। उदाहरण में, 24 नवंबर को 90 परित्यक्त सत्र थे, जो सभी सत्र परिणामों का 35.6% प्रतिनिधित्व करते थे।

टूलटिप के साथ वार्तालाप परिणाम स्टैक्ड क्षेत्र चार्ट का स्क्रीनशॉट।

चार्ट के नीचे की किंवदंती में, चार्ट में उस परिणाम को उजागर करने के लिए किसी भी परिणाम लेबल पर होवर करें।

वार्तालाप परिणाम स्टैक्ड एरिया चार्ट का स्क्रीनशॉट एक परिणाम पर प्रकाश डालता है।

स्टैक्ड क्षेत्र चार्ट से परिणाम दिखाने या छिपाने के लिए एक या एकाधिक लीजेंड लेबल का चयन करें, जिससे उन्हें चालू या बंद किया जा सके। उन परिणामों में अधिक स्पष्टता जोड़ने के लिए ऐसा करें जो तब रहते हैं:

• अलग-अलग परिणाम रेखाएं एक साथ दृष्टिगत रूप से करीब दिखाई देती हैं।
• आप अधिक स्पष्ट रूप से देखना चाहते हैं जब ट्रेंड लाइनें सकारात्मक या नकारात्मक ट्रेंड कर रही हैं, लेकिन चार्ट पर स्टैक्ड परिणामों का समुच्चय इन ट्रेंड लाइनों को समतल कर रहा है।

नोट

जब आप इस तरह से चार्ट से कोई परिणाम निकालते हैं, तो आप उस परिणाम को प्रदर्शित परिणामों के बड़े पूल से निकाल देते हैं। प्रदर्शित परिणामों को हटाने से पूल के विरुद्ध किसी भी शेष परिणाम का प्रदर्शित प्रतिशत मान बदल जाता है क्योंकि यह अनुपात के हर को बदल देता है।

नीचे दिए गए उदाहरण में, चार्ट से एस्केलेटेड और अनएंगेज्ड लेबल हटा दिए गए हैं। टूलटिप से पता चलता है कि 23 नवंबर को 95 परित्यक्त सत्र थे, जो चार्ट पर शेष दृश्यमान परिणामों के 60.5% का प्रतिनिधित्व करता है (यह हल किए गए परित्यक्त परिणामों का योग है)।

वार्तालाप परिणाम स्टैक्ड क्षेत्र चार्ट का स्क्रीनशॉट जिसमें दो परिणाम हटा दिए गए हैं।

वार्तालाप परिणाम डेटा (ग्राफ़ में प्रदर्शित डेटा) डाउनलोड करने के लिए, मेनू आइकन चुनें और CSV डाउनलोड करें चुनें.

नोट

अगर डाउनलोड करते समय चार्ट से कोई भी परिणाम हटा दिया जाता है, तो उनका डेटा CSV में दिखाई नहीं देता है.

वार्तालाप परिणामों के बारे में विस्तृत जानकारी के साथ एक साइड पैनल खोलने के लिए, चार्ट पर विवरण देखें चुनें. वार्तालाप परिणाम साइड पैनल में शामिल हैं:

• सत्र परिणामों का एक पाई चार्ट का विस्तृत विश्लेषण, जिसमें हल किए गए, उन्नीत, और परित्यक्त परिणामों का अपेक्षिक भार (प्रतिशत के रूप में) दिखाया गया है।
• सभी हल किए गए सत्र परिणामों का वर्णन करने वाले "हल किए गए पुष्टि परिणाम कारण" और "हल किए गए निहित परिणाम कारण" का सापेक्ष भार (प्रतिशत के रूप में व्यक्त) दिखाने वाला एक स्टैक्ड बार ग्राफ।
• एक स्टैक्ड बार ग्राफ़ जो सभी एस्केलेटेड सेशन नतीजों का विवरण करता है और सिस्टम इरादा, सिस्टम अनअपेक्षित, तथा उपयोगकर्ता द्वारा अनुरोधित परिणाम कारणों की रिलेटिव वेटिंग (प्रतिशत के रूप में) दिखाता है।
• शीर्ष विषय जो प्रत्येक परिणाम का नेतृत्व करते हैं।

नोट

अपरिष्कृत संख्या जानकारी के साथ टूलटिप देखने के लिए, किसी भी पाई चार्ट या स्टैक्ड बार चार्ट सेगमेंट पर माउस को ले जाएं.

वार्तालाप परिणाम फलक का स्क्रीनशॉट.

एक सत्र निम्नलिखित दो स्थितियों में से एक में आता है:

• अनएंगेज्ड: सत्र तब शुरू होता है जब कोई उपयोगकर्ता आपके एजेंट के साथ इंटरैक्ट करता है या एजेंट उपयोगकर्ता को एक सक्रिय संदेश भेजता है। सत्र एक निष्क्रिय स्थिति में प्रारंभ होता है।

• व्यस्त: उपयोगकर्ता सक्रिय रूप से एजेंट के साथ बातचीत करता है. एजेंट के ऑर्केस्ट्रेशन मोड के आधार पर व्यवहार में अंतर होता है.

  • क्लासिक ऑर्केस्ट्रेशन: कोई सत्र तब व्यस्त माना जाता है जब निम्न में से कोई विषय ट्रिगर होता है:

    • उपयोगकर्ता द्वारा सीधे ट्रिगर किया गया कस्टम विषय
    • विषय को आगे बढ़ाएं
    • फ़ॉलबैक विषय
    • संवादी बढ़ाने वाला विषय

  • जनरेटिव AI ऑर्केस्ट्रेशन: एक सत्र तब व्यस्त हो जाता है जब कोई उपयोगकर्ता सीधे किसी योजना को ट्रिगर करता है और इसमें निम्नलिखित तत्वों में से एक शामिल होता है:

    • गैर-सिस्टम विषय
    • विषय को आगे बढ़ाएं
    • फ़ॉलबैक विषय
    • नॉलेज स्रोत
    • एक उपकरण

एक सक्रिय सत्र का परिणाम निम्नलिखित में से एक होता है:

परिणाम श्रेणी	परिणाम	विवरण
समाधान किया गया		एक सत्र सफलतापूर्वक समाप्त होता है. हल किए गए सत्र दो प्रकार के होते हैं: पुष्टि किए गए हल और अनुमानित हल।
	पुष्टि पूर्ण हुई	एक सेशन को सुलझा हुआ कन्फर्म माना जाता है जब बातचीत का अंत टॉपिक ट्रिगर होता है और यूज़र कन्फर्म करता है कि बातचीत सफल रही।
	स्पष्ट किया गया निहितार्थ	एक सेशन को रिज़ॉल्व्ड इम्प्लाइड माना जाता है जब सेशन यूज़र के कन्फर्मेशन के बिना, बल्कि एजेंट के लॉजिक के आधार पर पूरा हो जाता है. हल होने की अनुमानित स्थिति इस बात पर निर्भर करती है कि आपका एजेंट क्लासिक या जनरेटिव AI ऑर्केस्ट्रेशन का उपयोग करता है या नहीं। - क्लासिक ऑर्केस्ट्रेशन: किसी सत्र को हल किया गया निहित तब माना जाता है जब वार्तालाप का अंत विषय ट्रिगर होता है, और उपयोगकर्ता पुष्टि प्रदान किए बिना सत्र को समय समाप्त होने देता है. - जनरेटिव AI ऑर्केस्ट्रेशन: एक सत्र को हल माना जाता है जब सत्र टाइमआउट हो जाए और कोई सक्रिय प्लान शेष न हो। सक्रिय योजना वह योजना है जो उपयोगकर्ता के इनपुट की प्रतीक्षा कर रही है.
उन्नयन किया गया		जब एस्केलेट टॉपिक ट्रिगर होता है या एजेंट को ट्रांसफ़र करें नोड चलता है, तो एक सेशन खत्म हो जाता है लेकिन उसे एस्केलेटेड माना जाता है (मौजूदा एनालिटिक्स सेशन खत्म हो जाता है, चाहे बातचीत लाइव एजेंट को ट्रांसफर हो या नहीं)। एस्केलेटेड सेशन तीन तरह के होते हैं: सिस्टम द्वारा इच्छित, सिस्टम द्वारा अनपेक्षित, और उपयोगकर्ता द्वारा अनुरोधित.
	सिस्टम का उद्देश्य	किसी निर्माता द्वारा निर्धारित स्वचालित व्यवसाय नियम के परिणामस्वरूप एक सत्र स्वचालित रूप से आगे बढ़ जाता है। विवाद की तीव्रता बातचीत का एक अपेक्षित परिणाम है और ऐसा कुछ नहीं है जिसे जांच या बदलाव की आवश्यकता हो। उदाहरण: एक उपयोगकर्ता $25,000 से अधिक किसी तीसरे पक्ष को स्थानांतरित करना चाहता है। यह राशि किसी व्यवसाय नियम में एक सीमा से अधिक हो जाती है और परिणामस्वरूप सत्र स्वचालित रूप से बढ़ जाता है.
	सिस्टम अनपेक्षित	निर्माता द्वारा निर्धारित एक या अधिक थ्रेसहोल्ड के ऊपर जाने के परिणामस्वरूप एक सत्र में स्वचालित रूप से एस्केलेशन होता है। आमतौर पर, यह परिणाम इंगित करता है कि उपयोगकर्ता बातचीत में फंस गया है और उसे सहायता की आवश्यकता है। उदाहरण: किसी विशेष कार्य को करने में तीन विफलताओं के बाद एक सत्र बढ़ाया जाता है।
	उपयोगकर्ता ने अनुरोध किया	एक सत्र बढ़ाया जाता है क्योंकि वार्तालाप के दौरान एक स्पष्ट उपयोगकर्ता अनुरोध था। उदाहरण: एक उपयोगकर्ता प्रवेश करता है .
छोड़े गए		जब कोई सत्र 30 मिनट के बाद समाप्त हो जाता है और समाधान या बढ़ाई गई स्थिति तक नहीं पहुंचता है, तो सत्र समाप्त हो जाता है और उसे परित्यक्त माना जाता है।

आप टूल कोड संपादक का उपयोग करके पैरामीटर के साथ टूल के परिणाम को भी निर्धारित कर सकते हैं. उदाहरण के लिए, पुष्टि की गई सफलता के लिए या निहित सफलता के लिए।

सहभागिता को मापने और सुधारने के तरीके के बारे में सुझावों और सर्वोत्तम प्रथाओं के लिए सहभागिता को मापने पर मार्गदर्शन दस्तावेज़ देखें.

एजेंट

एजेंटों की सूची आपके मुख्य एजेंट के कनेक्टेड और चाइल्ड एजेंटों के उच्च-स्तरीय वॉल्यूम, प्रदर्शन और स्थिति संबंधी मेट्रिक्स प्रदर्शित करती है. यह सूची प्रकार कॉलम में मुख्य एजेंट के साथ प्रत्येक सूचीबद्ध एजेंट के संबंध प्रकार को दर्शाती है. यदि कोई एजेंट चाइल्ड एजेंट है, तो उसका प्रकार दर्शाया जाता है. कनेक्टेड एजेंटों के पास एक सूचीबद्ध प्रकार होता है जो दर्शाता है कि उन्हें कहाँ बनाया गया था (उदाहरण के लिए, Copilot Studio, Azure AI Foundry)। कॉल मेट्रिक प्रत्येक कनेक्टेड या चाइल्ड एजेंट को मुख्य एजेंट द्वारा किए गए कॉल की कुल संख्या दर्शाती है. सफलता दर यह दर्शाता है कि कुल कॉल में से कितने कॉल सफलता पूर्वक पूर्ण हुए (प्रतिशत के रूप में). स्थिति प्रत्येक कनेक्टेड और चाइल्ड एजेंट की प्रशासनिक स्थिति दर्शाता है.

डिफ़ॉल्ट रूप से एजेंट सूची मुख्य एजेंट के शीर्ष पाँच कनेक्टेड और चाइल्ड एजेंटों को प्रश्नों की कुल संख्या के आधार पर (अधिकतम से न्यूनतम क्रम में) दिखाती है. यदि पाँच से अधिक एजेंट हैं, तो सभी एजेंटों को देखने के लिए सभी देखें चुनें.

नोट

सभी देखें बटन तभी दिखाई देता है जब आपके मुख्य एजेंट से पाँच से अधिक कनेक्टेड या अधीनस्थ एजेंट जुड़े हों।

विश्लेषण पेज के एजेंट सेक्शन का स्क्रीनशॉट.

उत्पन्न उत्तर दर और गुणवत्ता (पूर्वावलोकन)

महत्त्वपूर्ण

इस आलेख में Microsoft Copilot Studio पूर्वावलोकन दस्तावेज़ शामिल हैं और यह परिवर्तन के अधीन है।

पूर्वावलोकन सुविधाएं उत्पादन में उपयोग के लिए नहीं होती हैं और इनकी कार्यक्षमता प्रतिबंधित हो सकती हैं. यह सुविधाएं आधिकारिक रिलीज़ से पहले उपलब्ध होती हैं ताकि आपको शीघ्र पहुँच मिल सकें और प्रतिक्रिया दे सकें.

यदि आप एक उत्पादन-तैयार एजेंट बना रहे हैं, तो Microsoft Copilot Studio का अवलोकन देखें।

जनरेटिव उत्तरों के साथ, आपका एजेंट एआई का उपयोग करके दिए गए निर्देशों और ज्ञान स्रोतों से उपयोगकर्ता प्रश्नों के उत्तर जनरेट कर सकता है। हालाँकि, आपका एजेंट सभी प्रश्नों के उत्तर देने में सक्षम नहीं हो सकता. जेनरेट की गई उत्तर दर और गुणवत्ता अनुभाग अनुत्तरित प्रश्नों और उत्तर की गुणवत्ता को ट्रैक, व्यवस्थित और विश्लेषित करता है, ताकि आप अपने एजेंट के उत्तर देने की क्षमता में सुधार कर सकें.

उत्तर दर और गुणवत्ता अनुभाग।

उत्तर दर चयनित समयावधि में उत्तरित और अनुत्तरित प्रश्नों की संख्या तथा समय के साथ प्रतिशत परिवर्तन दर्शाता है.

उत्तर की गुणवत्ता AI द्वारा दिए गए उत्तरों की गुणवत्ता मापता है. Copilot Studio उत्तर दिए गए प्रश्न के एक नमूना सेट को देखता है और विभिन्न गुणवत्ता का विश्लेषण करता है, जिसमें पूर्णता, प्रासंगिकता और प्रतिक्रिया की ग्राउंडेडनेस का स्तर शामिल है। यदि उत्तर एक निर्धारित मानक को पूरा करता है, तो Copilot स्टूडियो उत्तर को Good गुणवत्ता के रूप में लेबल करता है। Copilot स्टूडियो उन उत्तरों को लेबल करता है जो खराब गुणवत्ता के रूप में उस मानक को पूरा नहीं करते हैं। खराब उत्तरों के लिए, Copilot स्टूडियो गुणवत्ता रेटिंग के लिए एक कारण निर्दिष्ट करता है, और प्रत्येक श्रेणी को असाइन किए गए उत्तरों का प्रतिशत दिखाता है।

चार्ट में बार के किसी भी सेगमेंट पर होवर करके किसी अच्छे या खराब क्वालिटी लेबल के लिए किसी व्यक्तिगत कारण का सापेक्ष भार देखें. टूलटिप गणना किए गए प्रतिशत मान पर पहुंचने के लिए नमूना किए गए उत्तरों की संख्या को भी इंगित करता है।

उत्पन्न उत्तरों की गुणवत्ता का स्क्रीनशॉट, जिसमें व्यक्तिगत कारणों पर मेट्रिक्स दिखाने वाला टूलटिप और स्टैक्ड बार चार्ट शामिल है।

चार्ट के नीचे लेजेंड में, किसी भी क्वालिटी लेबल कारण पर होवर करें ताकि चार्ट में उस कारण को हाइलाइट किया जा सके।

उत्पन्न उत्तरों की गुणवत्ता का स्क्रीनशॉट, जहाँ बार चार्ट पर अप्रासंगिक कारण को उजागर किया गया है।

आप इस सेक्शन के बारे में Microsoft को थम्स अप और थम्स डाउन आइकन का उपयोग करके फीडबैक दे सकते हैं. Microsoft को प्रतिक्रिया सबमिट करें पैनल का उपयोग करके एक टिप्पणी जोड़ें और संबंधित फाइलें साझा करें. इस तरह का वर्णनात्मक फीडबैक प्रदान करके, हम मिलकर अपने उत्पाद में लगातार सुधार कर सकते हैं.

1. Microsoft को प्रतिक्रिया सबमिट करें पैनल पर, उस आइकॉन के आधार पर (जिससे आपने पैनल खोला) प्राकृतिक भाषा में अपने पसंद या नापसंद का वर्णन करें.
2. चुनें कि आप संकेत, उत्पन्न प्रतिक्रिया, प्रासंगिक सामग्री नमूने और अतिरिक्त लॉग फ़ाइलें साझा करना चाहते हैं या नहीं.
3. सबमिट करें चुनें.

Microsoft पैनल पर प्रतिक्रिया सबमिट करें का स्क्रीनशॉट।

विवरण देखें चुनें, जिससे एक साइड पैनल खुलेगा जिसमें आपकी चयनित समयावधि के लिए प्रश्न उत्तर दरों, नॉलेज स्रोत उपयोग और त्रुटि दरों दिखाई देते हैं. आप इन चार्टों का उपयोग यह पहचानने के लिए कर सकते हैं कि कौन से ज्ञान स्रोत उपयोगकर्ताओं की मदद करने में कारगर हैं, और किनमें सुधार किया जाना चाहिए।

यदि आपके एजेंट के चाइल्ड एजेंट हैं, तो साइड पैनल में सभी चुनें ताकि मुख्य एजेंट और चाइल्ड एजेंट दोनों के लिए मेट्रिक्स दिखें मुख्य एजेंट केवल मुख्य एजेंट के लिए, या चाइल्ड एजेंट केवल चाइल्ड एजेंट के लिए मेट्रिक्स दिखाने के लिए.

जनरेट की गई उत्तर दर और गुणवत्ता विवरण पैनल में एजेंट प्रकार की फिल्टरिंग को हाइलाइट करता हुआ एक स्क्रीनशॉट।

• अनुत्तरित प्रश्न यह दिखाता है कि एजेंट ने किसी उपयोगकर्ता क्वेरी का उत्तर क्यों नहीं दिया.
• ज्ञान स्रोत उपयोग उन सत्रों का प्रतिशत दिखाता है, जिनमें एजेंट के पास पहुँच वाले प्रत्येक ज्ञान स्रोत का उपयोग किया गया है।
• सभी स्रोत यह दिखाता है कि प्रत्येक ज्ञान स्रोत का उपयोग कितने प्रतिशत प्रश्नों में किया गया.
• Errors क्वेरीज़ का प्रतिशत दिखाता है, जिसके परिणामस्वरूप प्रत्येक नॉलेज स्रोत प्रकार (उदाहरण के लिए, SharePoint) के लिए ज्ञान-संबंधित त्रुटि हुई.

सभी स्रोतों के तहत, सूचीबद्ध किसी भी नॉलेज स्रोतों के स्तर पर अधिक जानकारी देखने के लिए, किसी व्यक्तिगत स्रोत को चुनें. टूलटिप में शामिल हैं:

• कुल प्रश्नों की संख्या जिन्होंने इस ज्ञान स्रोत को संदर्भित किया, तथा थम्स अप और थम्स डाउन प्रतिक्रियाओं की संख्या.
• किसी विशेष नॉलेज सोर्स को संदर्भित करने वाले प्रश्नों के लिए प्रतिक्रिया गुणवत्ता के रिलेटिव वेटिंग्स का विभाजन दिखाने वाला एक स्टैक्ड बार चार्ट। बार चार्ट के किसी भी हिस्से पर होवर करने पर उस हिस्से की रिलेटिव वेटिंग का मान और उस मान तक पहुँचने के लिए सैंपल किए गए प्रश्नों की संख्या दिखाई देती है।

दिए गए नॉलेज सोर्स के लिए प्रतिक्रिया गुणवत्ता के रिलेटिव वेटिंग्स का स्क्रीनशॉट, जिसमें एक गुणवत्ता मान के लिए टूलटिप दिखाया गया है।

उपकरण का उपयोग

टूल उपयोग सेक्शन एक चार्ट और मेट्रिक्स दिखाता है, जो यह ट्रैक करते हैं कि आपके टूल्स समय के साथ कितनी बार शुरू किए गए और आपका एजेंट इन टूल्स का सफलतापूर्वक कितनी बार उपयोग करता है. यह, यह भी दिखाता है कि आपका एजेंट प्रत्येक टूल का कितनी बार उपयोग करता है और कॉल किए गए टूल्स में से कितने प्रतिशत का सफल उपयोग हुआ।

चार्ट, विश्लेषण पेज के शीर्ष पर परिभाषित तारीख अवधि के दौरान सबसे अधिक उपयोग किए गए शीर्ष पाँच टूल्स दिखाता है.

चार्ट के नीचे दिए गए लेजेंड में, किसी भी टूल पर होवर करें ताकि चार्ट में वह टूल हाईलाइट हो जाए।

टूल उपयोग का ग्राफ़ जिसमें एकल टूल हाइलाइट किया गया है का स्क्रीनशॉट।

चार्ट पर विवरण देखें चुनकर, उस समय अवधि में उपयोग किए गए सभी टूल्स की सूची और उनके ट्रेंड इंडिकेटर्स वाला एक साइड पैनल खोला जा सकता है. टूल उपयोग पैनल पर, आप प्रत्येक टूल के लिए उपयोग किए गए प्रश्नों का प्रतिशत देख सकते हैं। यदि आपके एजेंट में चाइल्ड एजेंट्स शामिल हैं, तो आप मुख्य एजेंट और चाइल्ड एजेंट्स दोनों के लिए गणनाएँ दिखाने के लिए (सभी), केवल मुख्य एजेंट के लिए, या केवल चाइल्ड एजेंट्स के लिए चुन सकते हैं।

टूल उपयोग ग्राफ़ और मीट्रिक का स्क्रीनशॉट.

टूल का स्क्रीनशॉट पैनल हाइलाइटिंग एजेंट प्रकार फ़िल्टरिंग का उपयोग करता है।

संतुष्टि

संतुष्टि अनुभाग एक सत्र के लिए एजेंट प्रतिक्रियाओं, सर्वेक्षण परिणामों और भावना स्कोर की प्रतिक्रियाओं से एकत्र की गई उपयोगकर्ता प्रतिक्रिया दिखाता है। संतुष्टि को दो उप-खंडों में विभाजित किया गया है: एक प्रतिक्रिया अनुभाग, जो विशिष्ट एजेंट प्रतिक्रियाओं के लिए अंगूठे ऊपर, अंगूठे नीचे प्रतिक्रिया और उपयोगकर्ता टिप्पणियों को प्रदर्शित करता है, और एक सर्वेक्षण परिणाम अनुभाग, जो पूरे सत्र के लिए स्पष्ट ग्राहक संतुष्टि (सीएसएटी) स्कोर और एआई-आधारित भावना विश्लेषण प्रदर्शित करता है।

फ़ीडबैक डेटा, Dataverse में कन्वर्सेशन ट्रांसक्रिप्ट टेबल में स्टोर किया जाता है. इस सुविधा का समर्थन करने वाले चैनलों की सूची के लिए, फ़ीचर विवरण देखें.

प्रतिक्रियाएँ

रिएक्शन सेक्शन में, एजेंट के जवाबों और सेशन के सर्वे के नतीजों पर मिले यूज़र फ़ीडबैक को दिखाया जाता है. चार्ट यह गिनता है कि यूज़र्स ने आपके एजेंट से मिले हर जवाब पर मौजूद थम्स अप (पॉज़िटिव) या थम्स डाउन (नेगेटिव) बटन को कितनी बार चुना.

प्रत्युत्तर प्रतिक्रियाएं चार्ट।

उपयोगकर्ता रिएक्शन देने के बाद एक टिप्पणी छोड़ सकते हैं। टिप्पणियां देखने के लिए, विवरण देखें चुनें. प्रतिक्रिया टिप्पणियाँ पैनल पर, टिप्पणियों को फ़िल्टर करने के लिए सभी, अंगूठा ऊपर या अंगूठा नीचे का चयन करें।

नोट

• Microsoft 365 Copilot चैनल पर प्रकाशित एजेंट प्रतिक्रियाओं का समर्थन नहीं करते हैं।
• टिप्पणियाँ देखने के लिए आपके पास बॉट ट्रांसक्रिप्ट व्यूअर सुरक्षा भूमिका होना आवश्यक है.

हर रिएक्शन के लिए, संबंधित उपयोगकर्ता क्वेरी और एजेंट प्रतिक्रिया देखने के लिए टिप्पणी के पास वाले टॉगल को चुनें। विश्लेषण पेज उपयोगकर्ता क्वेरी और एजेंट प्रतिक्रियाओं को 28 दिनों तक स्टोर करता है.

प्रतिक्रिया पैनल पर उपयोगकर्ता क्वेरी और प्रतिक्रिया दिखाने वाले एक्सपैंड–कॉलैप्स टॉगल का स्क्रीनशॉट।

उपयोगकर्ता फ़ीडबैक डिफ़ॉल्ट रूप से चालू रहता है. यदि आप चाहें तो इस सुविधा को बंद कर सकते हैं। आप उपयोगकर्ताओं के लिए उनके फ़ीडबैक का उपयोग कैसे किया जाता है, इस बारे में अस्वीकरण भी जोड़ या संपादित कर सकते हैं:

1. एजेंट खोलें, फिर सेटिंग्स पर जाएं, और उपयोगकर्ता फ़ीडबैक अनुभाग ढूंढें.

2. उपयोगकर्ताओं को इस एजेंट का उपयोग करते समय प्रतिक्रिया देने की सुविधा दें या तो चालू या बंद।

3. अस्वीकरण जोड़ें या संपादित करें ताकि उपयोगकर्ता जान सकें कि उनकी प्रतिक्रिया का उपयोग कैसे किया जाता है. आप गोपनीयता संबंधी जानकारी और सुझाव भी दे सकते हैं।

सत्रों के लिए उपयोगकर्ता संतुष्टि

सत्रों के लिए उपयोगकर्ता संतुष्टि अनुभाग सत्रों के नमूने में उपयोगकर्ता सर्वेक्षण परिणामों और भावना के एआई विश्लेषण के आधार पर उपयोगकर्ता संतुष्टि के बारे में जानकारी दिखाता है:

सत्र टाइल के लिए उपयोगकर्ता संतुष्टि का स्क्रीनशॉट।

• सर्वेक्षण संतुष्टि स्कोर: यह स्कोर 5 में से एक संख्या है, जो उन सत्रों के लिए औसत ग्राहक संतुष्टि (CSAT) स्कोर से निकाली जाती है, जिनमें उपयोगकर्ताओं ने सत्र के अंत में सर्वेक्षण के लिए अनुरोधों का जवाब दिया।

  नोट

  और के स्कोर असंतुष्ट के बराबर होते हैं, के स्कोर को न्यूट्रल माना जाता है, और और के स्कोर संतुष्ट के बराबर होते हैं.

• सत्र द्वारा संतुष्टि: एक स्टैक्ड बार चार्ट जो सर्वेक्षण की प्रत्येक स्कोर श्रेणियों के लिए सापेक्ष भार का प्रदर्शन करता है, जिसमें शामिल हैं , , और . नमूने का आकार और प्रत्येक स्कोर श्रेणी के भार का संख्यात्मक मान देखने के लिए चार्ट के प्रत्येक खंड पर होवर करें।

• भावना विश्लेषण (पूर्वावलोकन): सर्वेक्षण स्कोर के लिए एक पूरक मीट्रिक। यह मीट्रिक एजेंट के लिए समग्र उपयोगकर्ता भावना का मूल्यांकन करने के लिए सत्रों के नमूने से उपयोगकर्ता संदेशों का विश्लेषण करने के लिए AI का उपयोग करता है। संख्यात्मक मान नकारात्मक उपयोगकर्ता भावना वाले सत्रों के प्रतिशत का प्रतिनिधित्व करता है।

विवरण देखने के लिए चयन करें, ताकि प्रत्येक भावना श्रेणी (जैसे सकारात्मक, नकारात्मक, और तटस्थ) के सापेक्ष भार पर गहराई से ध्यान दिया जा सके और यह देखा जा सके कि रिपोर्ट की कॉन्फ़िगर की गई समय अवधि में संतुष्टि मेट्रिक्स कैसे ट्रेंड करते हैं।

संतुष्टि स्कोर प्रवृत्ति ग्राफ का स्क्रीनशॉट.