إنشاء مجموعة اختبار محادثة

يسمح لك تقييم المحادثة بتقييم السلوك العام لوكيلك على مدى تفاعل أطول. وهو يعكس كيفية تفاعل المستخدمين الحقيقيين مع الوكلاء، حيث تعتمد كل استجابة على السياق السابق داخل محادثة مستمرة. يمكنك استخدام هذه التقييمات لتحديد ما إذا كان يمكن للعامل الحفاظ على السياق، وطلب توضيحات، وإكمال المهام متعددة الخطوات.

يمكنك أيضا تشغيل تقييمات استجابة واحدة، والتي تكون مفيدة عندما تريد اختبار وكيلك حول كيفية الإجابة على أسئلة محددة، وعلى القدرات التي يستدعيها، وعلى الصياغة الدقيقة التي يستخدمها في إجاباته.

تستخدم التقييمات مجموعات الاختبار. تتكون مجموعة الاختبار لتقييمات المحادثة من مجموعة تصل إلى 20 حالة اختبار. عند تشغيل تقييم وكيل، يمكنك تحديد مجموعة اختبار ويقوم Copilot Studio بتشغيل كل حالة اختبار في تلك المجموعة ضد الوكيل الخاص بك.

يمكنك إنشاء حالات اختبار ضمن مجموعة اختبار عن طريق استيرادها باستخدام جدول بيانات أو استخدام الذكاء الاصطناعي لإنشاء رسائل استنادا إلى تصميم الوكيل وموارده. يمكنك بعد ذلك اختيار الطريقة التي تريد بها قياس جودة استجابات وكيلك لكل حالة اختبار ضمن مجموعة اختبار.

لمزيد من المعلومات حول كيفية عمل تقييم العامل، راجع حول تقييم العامل.

لمعرفة كيفية تحرير مجموعة اختبار موجودة، راجع تغيير تفاصيل مجموعة الاختبار.

Important

تتوفر نتائج الاختبار في Copilot Studio لمدة 89 يوما. لحفظ نتائج الاختبار لفترة أطول، قم بتصدير النتائج إلى ملف CSV.

إنشاء مجموعة اختبار محادثة

1. انتقل إلى صفحة التقييم الخاصة بوكيلك.

1. حدد تقييم جديد، ثم حدد محادثة.

   

2. يمكنك إنشاء حالات اختبار متعددة الأدوار باستخدام أي من الطرق التالية:

   • مجموعة المحادثات السريعة: إنشاء 10 محادثات قصيرة تلقائيا استنادا إلى وصف وكيلك وتعليماته وقدراته.

   • مجموعة المحادثات الكاملة: إنشاء محادثات باستخدام معرفة الوكيل أو الموضوعات المحددة. في هذا الخيار يمكنك تحديد إنشاء محادثات قصيرة أو طويلة.

   • استخدام دردشة الاختبار: تحويل أحدث دردشة اختبار إلى حالة اختبار.

ملاحظة

تدعم مجموعات اختبار المحادثة ما يصل إلى 20 حالة اختبار. تدعم كل حالة اختبار ما يصل إلى 12 رسالة إجمالية، وهي 6 أزواج من الأسئلة والأجوبة.

1. ضمن الاسم، اكتب اسما لمجموعة الاختبار الخاصة بك.

2. قم بتغيير أساليب الاختبار التي تريد استخدامها أو إضافتها. بالنسبة لمجموعات اختبار المحادثة، يمكنك إضافة الجودة العامة أو مطابقة الكلمة الأساسية أو تطابق القدرات أو أساليب الاختبار المخصصة للتصنيف .

   • إضافة أسلوب جديد:
     1. حدد Add test method.
     2. حدد جميع الطرق التي تريد الاختبار بها، ثم حدد موافق. يمكنك إضافة أساليب متعددة.
     3. بالنسبة لبعض الأساليب، قم بتعيين درجة النجاح، ثم حدد موافق. تحدد درجة النجاح الْمعايير الْتي تؤدي إلى نجاح أو فشل.
     4. تتطلب بعض الأساليب إضافة استجابات أو كلمات أساسية متوقعة لكل حالة من حالات الاختبار الخاصة بك. لمزيد من المعلومات، راجع اختيار أساليب التقييم.
   • حدد أسلوب اختبار موجود لتحريره أو حذفه.

   أسلوب الاختبار	المقاييس	نوع مجموعة الاختبار	التقييم	تكوينات
   جودة عامة	ما مدى جودة استجابات حالة الاختبار بناءً على الصفات المحددة	استجابة واحدة أو محادثة واحدة	تم التقيم على أساس 100%	‏‫بلا
   مقارنة المعنى	مدى تطابق معنى إجابة حالة الاختبار مع الإجابة المتوقعة	استجابة واحدة	تم التقيم على أساس 100%	درجة النجاح، الإجابة المتوقعة
   استخدام القدرة	ما إذا كانت حالة الاختبار تستخدم جميع الموارد المتوقعة أو أي موارد متوقعة	استجابة واحدة	تمرير/فشل	القدرات المتوقعة
   مطابقة الكلمة الأساسية	ما إذا كانت حالة الاختبار تستخدم كل الكلمات الأساسية أو العبارات المتوقعة أو أي منها	استجابة واحدة أو محادثة واحدة	تمرير/فشل	الكلمات الأساسية أو العبارات المتوقعة
   تشابه النص	مدى تطابق نص إجابة حالة الاختبار مع الإجابة المتوقعة	استجابة واحدة	تم التقيم على أساس 100%	درجة النجاح، الإجابة المتوقعة
   مطابقة تامة	ما إذا كانت إجابة حالة الاختبار تطابق الإجابة المتوقعة بالضبط	استجابة واحدة	تمرير/فشل	الإجابة المتوقعة
   مخصص	ما إذا كانت استجابة حالة الاختبار تفي بمعاييرك أو توقعاتك المحددة.	استجابة واحدة أو محادثة واحدة	اجتياز/رسوب (استيفاء معايير التسمية المحددة)	الاسم، إرشادات التقييم، التسميات

3. تحرير تفاصيل حالات الاختبار. تتطلب جميع أساليب الاختبار، باستثناء الجودة العامة، استجابات أو كلمات أساسية متوقعة. لمزيد من المعلومات حول تحرير حالات الاختبار، راجع تعديل مجموعة اختبار.

4. حدد ملف تعريف المستخدم، ثم حدد الحساب الذي تريد استخدامه لمجموعة الاختبار هذه أو أضفه، أو تابع دون مصادقة. يستخدم التقييم هذا الحساب للاتصال بمصادر المعرفة والأدوات أثناء الاختبار. للحصول على معلومات حول إضافة ملفات تعريف المستخدمين وإدارتها، راجع إدارة ملفات تعريف المستخدمين والاتصالات.

ملاحظة

يستخدم الاختبار التلقائي مصادقة حساب الاختبار المحدد. إذا كان لدى وكيلك مصادر معارف أو اتصالات تتطلب مصادقة محددة، فحدد الحساب المناسب لاختبارك.

1. تحرير أو إنشاء المزيد من حالات الاختبار. تعرف على المزيد في تحرير حالات الاختبار ضمن مجموعة اختبار.

2. حدد Save لتحديث مجموعة الاختبار دون تشغيل حالات الاختبار أو Evaluate لتشغيل مجموعة الاختبار على الفور.