הערכת סוכן (תצוגה מקדימה)

‏‫[מאמר זה הוא תיעוד קדם-הפצה והוא עשוי להשתנות.]‬

לשונית Assess בחוויית הסוכן החדש מספקת בדיקות מובנות וניתנות לחזרה עבור הסוכן שלך. השתמש בהערכות כדי למדוד איכות סוכן במקרי בדיקה, לעקוב אחרי שיפורים לאורך זמן, ולאמת את התנהגות הסוכן שלך לפני שאתה מפרסם אותה.

Important

  • זוהי תכונת תצוגה מקדימה המוכנה לסביבת ייצור.
  • תכונות תצוגה מקדימה שמוכנות לסביבת ייצור כפופות לתנאי שימוש משלימים.

מהי הערכת סוכן?

הערכת סוכן מאפשרת לך לבדוק באופן שיטתי את תגובות הסוכן שלך מול תקני איכות. במקום לבדוק כל תרחיש ידנית בלשונית התצוגה המקדימה , צור הערכות עם שיחות בדיקה, הגדר כיצד למדוד תגובות, והריץ את ההערכות כדי לקבל תוצאות כמותיות.

הערכה עוזרת לך לענות על שאלות כאלה:

  • האם הסוכן עונה נכון במגוון תרחישים צפויים?
  • האם שינוי בקונפיגורציה שיפר או פגע באיכות התגובה?
  • האם הסוכן קורא לכלים כשצריך?

מושגים עיקריים

המושגים הבאים הם מרכזיים בעת ביצוע הערכות ב-Copilot Studio:

שיחות

שיחה היא מקרה בדיקה שמייצג תרחיש שאתה רוצה שהסוכן שלך יטפל בו. כל שיחה כוללת הודעות משתמשים ותגובות צפויות מהסוכן. ארגן שיחות לפי הערכות. צור שיחות ידנית, יצר אותן עם בינה מלאכותית, או העלה אותן מקובץ CSV.

ההערכות

הערכה היא מערך בדיקות בשם שמשלב שיחות עם שיטת בדיקה. אתה יוצר הערכות מתוך לשונית הערכה , מוסיף להן שיחות, ואז מריץ אותן כדי להפיק תוצאות עם ניקוד.

שיטות בדיקה

שיטות בדיקה מגדירות כיצד תגובות הסוכן מדורגות. נכון להיום, שיטת הבדיקה היחידה הזמינה היא איכות כללית, הערכה מבוססת בינה מלאכותית האם התגובות עומדות בסטנדרטים של איכות, כגון רלוונטיות ושלמות.

הערה

שיטת בדיקת האיכות הכללית אינה משווה תשובות לתשובות הצפויות.

פרופיל משתמש

ההערכות מתבצעות תחת פרופיל משתמש. נהל איזה פרופיל מאומת מריץ את ההערכה כך שהכלים והקשרים של הסוכן יהיו ניתנים לבדיקה מלאה.

תהליך הערכה

עקבו אחר השלבים הבאים כדי להעריך סוכן:

  1. צור הערכה: בלשונית הערכה , התחל הערכה חדשה. למידע נוסף ביצירת מערך בדיקות לסוכן.
  2. הוסף שיחות: הוסף שיחות בדיקה על ידי כתיבתן ידנית, יצירתן באמצעות בינה מלאכותית או העלאת קובץ CSV.
  3. הגדר: שם להערכה, לבחור שיטת בדיקה, לבחור את גרסת הסוכן ולהגדיר את פרופיל המשתמש.
  4. הרץ את ההערכה: בחר הערכה כדי להריץ את הבדיקה והמתין לתוצאות. למדו עוד ב'ערכו הערכה עבור סוכן'.
  5. סקירת תוצאות: ניתחו ציונים וזיהו תחומים לשיפור. למידע נוסף ב- הצג תוצאות הערכה עבור סוכן.
  6. חזור: התאם את ההוראות, הידע או הכלים של הסוכן שלך, ואז הרץ שוב את ההערכה כדי למדוד את ההשפעה.