שתף באמצעות


מיטוב ביצועים עבור עומסי עבודה של יישומים חכמים

יעילות ביצועים היא היכולת של עומס העבודה להתרחב ביעילות כדי לעמוד בדרישות שמציבים לו המשתמשים. ניטור הביצועים של עומס העבודה של היישום החכם חיוני כדי להבטיח שהוא יפעל ביעילות.

צוות עומס העבודה צריך לקבוע מדדי ביצועים מרכזיים, לבדוק באופן קבוע את ביצועי המערכת ולאבחן בעיות באופן מיידי. הליכי ניטור ואבחון יעילים מסייעים לשמור על אמינות המערכת ושביעות רצון המשתמשים.

הגדרת יעדי ביצועים

זיהוי מדדי ביצועים מרכזיים כרוך בקביעת המדידות החיוניות העוקבות אחר ההתקדמות לקראת השגת יעדי ביצועים של עומס עבודה. מדדים אלה מספקים דרך שניתנת לכימות למדוד ולשפר את יעילות הביצועים.

כאשר מזהים מדדי מפתח שיש להתמקד בהם, כדאי לשקול מדדים הקשורים לקיבולת, זמן תגובה, שיעור סטייה ומעורבות ותוצאות:

  • קיבולת: תפוקה והתרחשות בו-זמנית הם מדדי קיבולת לדוגמה. תפוקה מתייחסת ליכולת לטפל במספר מסוים של טרנזקציות בתוך פרק זמן נתון. לדוגמה, סוכן עשוי לטפל ב- 200,000 הפעלות צ'אט בחודש. קחו בחשבון גם שינויים עונתיים ואת השיא המקסימלי הצפוי של שיחות במקביל. התרחשות בו-זמנית היא מדד של משתמשים או פעולות בו זמנית. לדוגמה, סוכן עשוי לטפל במקסימום של 5,000 צ'אטים בו-זמניים בזמני השיא. הבנת אמצעי האחסון של היעד עוזרת לאמת את ארכיטקטורת היעד ואת קנה המידה שלו.

  • זמן תגובה‬: השהייה וזמן טעינה הם מדדי זמן תגובה נפוצים. השהייה היא הזמן שלוקח להגיב לבקשה (200 אלפיות שניות). זמן טעינה הוא הזמן שלוקח לסוכן להיות פעיל ולהגיב להודעה הראשונה. כדאי להבין את זמן ההשהיה המרבי הצפוי עבור סוכן לענות על שאילתות, ולהגדיר גישה לטיפול בפעולות ארוכות טווח (לדוגמה, המתנה למערכת חיצונית שתחזיר נתונים).

  • שיעור סטייה: בהקשר של בינה מלאכותית שיחתית, סטייה היא אינדיקטור המייצג את אחוז הבקשות שהושלמו באופן בשירות עצמי שאחרת היו מטופלות על ידי נציגי שירות הלקוחות. במילים אחרות, מדד זה מתייחס למספר המשימות שצוות כבר לא צריך לטפל בהן בגלל אוטומציה. אופטימיזציה של שיעור הסטייה לסוכן היא אחד מתחומי המיקוד המובילים עבור ארגונים שרוצים להשיג את יעדיהם העסקיים, מהחזר על השקעה (ROI) ושביעות רצון הלקוחות (CSAT), ועד לשיפור הביצועים הכוללים של סוכנים. Microsoft Copilot Studio מספק סקירה כללית של ביצועי הסוכנים, כולל אינדיקטורים מרכזיים כגון שיעור רזולוציה, שיעור הסלמה ו- CSAT.

  • מדידת מעורבות ותוצאות: מעקב אחר מעורבות בשיחה ואחר התוצאות הוא חיוני למדידת מדדי הביצועים של הסוכנים ולגילוי תחומים לשיפור. מידע נוסף בנושא מדידת מעורבות של סוכנים ומדידת תוצאות של סוכנים.

תכנון ביצועים

למשאבים בעומס העבודה שלך יש מגבלות ביצועים. מגבלות ביצועים חלות על תכונות בתוך כל שירות. צריך להבין את מגבלות המשאבים בעומס העבודה שלך ולקחת בחשבון את המגבלות הללו להחלטות העיצוב שלך. לדוגמה, צריך לדעת אם מגבלות משאבים מחייבות אותך לשנות את גישת העיצוב או לשנות את המשאבים לחלוטין.

  • הבנת נפחי היעד. נפחי היעד עוזרים לאמת את ארכיטקטורת היעד ואת קנה המידה שלו, את היבטי הרישוי של הסוכנים ואת ההשפעה הפוטנציאלית על האחסון ב- Dataverse עבור תמלילי שיחות.
  • להבין את מגבלות הפלטפורמה. בעת אינטגרציה של עומס העבודה של היישומים החכמים עם מערכות חיצוניות, לדוגמה באמצעות Power Automate או בקשות HTTP, חשוב לוודא שכל רכיב יכול להתמודד עם העומס.
  • זיהוי צווארי בקבוק. יש למדוד את התפוקה ואת זמני התגובה‬ כדי לזהות את הרכיבים הספציפיים של המערכת שלך שעלולים להיות בעייתיים ככל שעומס העבודה יגדל. זהו צווארי בקבוק בתהליך מקצה לקצה באמצעות יכולות ניתוח כריית תהליכים כגון עיבוד מחדש וניתוח סיבות שורש.

מידע נוסף: המלצות לתכנון ביצועים

ניטור ביצועים

מיטוב ביצועים דורשת נתונים כדי למדוד את הביצועים הנוכחיים של עומס עבודה או זרימה מול יעדי הביצועים שלו. אספו כמות מספקת ומגוונת של נתונים כדי למדוד במדויק את ביצועי הקוד והתשתית מול יעדי ביצועים מוגדרים. יש לוודא שכל רכיב וזרימה בתוך עומס העבודה מייצרים באופן אוטומטי מדדים ויומנים רציפים ומשמעותיים.

ניטור קפדני של ביצועי עומס העבודה של היישום החכם חיוני כדי להבטיח שהוא יפעל ביעילות גם בזמני שיא.

Copilot Studio מספק ניתוח מקיף ומוכן לשימוש שמאפשר להבין את השימוש בסוכן ואת מדדי ביצועי המפתח.

ניתן להציג דוחות שקשורים לנושאים הבאים:

  • ביצועים ושימוש
  • שביעות רצון לקוחות
  • פרטי הפעלה
  • שימוש בנושאים
  • הפעלות שחויבו

בנוסף לתכונות הניתוח המקוריות של Copilot Studio, אפשר לשלוח נתוני מדידת שימוש אל Application Insights. מידע נוסף בנושא לכידת מדידת שימוש באמצעות Application Insights. ניתן לנטר ביצועים באופן רציף ולזהות חריגות באמצעות כלים כגון Azure Monitor, Log Analytics Application Insights והתראות.

הגדירו את מחווני ביצועי המפתח (KPI) שבכוונתכם לפקח עליהם כדי למדוד את הצלחת עומס העבודה של היישום החכם שלכם, כגון שיעור מעורבות, קצב רזולוציה וקצב הסטיה. תחילה, בדקו את לוחות המחוונים המקוריים כדי להבין את הנתונים הזמינים. לאחר מכן, החליטו אם יצירת דוח מותאם אישית תענה טוב יותר על הצרכים הספציפיים שלכם.

למידע נוסף:

מיטוב ביצועים מתמשך

מיטוב יזום של ביצועים כרוך ביישום אמצעים לשיפור הביצועים של עומס העבודה לפני שמתעוררות בעיות. אמצעים פרואקטיביים כוללים זיהוי צווארי בקבוק פוטנציאליים, ניטור מדדי ביצועים ויישום של מיטוב כדי להבטיח שעומס העבודה פועל ביעילות ועומד ביעדי הביצועים.

כדי לשפר ללא הרף את עומס העבודה של היישומים החכמים, יש לתזמן סקירות קבועות של ביצועי הסוכנים:

מחוון ביצועים הגדרה
שיעור הפתרונות אחוז בקשות המשתמשים שנפתרו בהצלחה על-ידי סוכן בלי צורך בהסלמה לנציג שירות לקוחות.
שיעור מעורבות אחוז מסך ההפעלות עם מעורבות. הפעלה נחשבת למעורבת כאשר משתמש מקיים אינטראקציה עם סוכן בדרך משמעותית, כגון הפעלת נושא שאינו מערכת, הסלמת ההפעלה או הפעלת נושא בסיס.
שיעור נטישה אחוז ההפעלות המעורבות שהסתיימו ללא הגעה לפתרון או הסלמה. בעיקרו של דבר, המדד הזה מודד באיזו תדירות משתמשים עוזבים או מפסיקים לקיים אינטראקציה עם סוכן לפני שהבעיה שלהם נפתרת או מוסלמת לנציג.
שיעור ההפניה אחוז ההפעלות המעורבות שמועברות לנציג. מדד זה הוא המפתח להבנת התדירות שבה סוכן אינו מסוגל לפתור שאילתות משתמשים בעצמו ודורש התערבות אנושית.
אמירות לא מזוהות מתרחש כאשר מודל הבנת השפה הטבעית (NLU) של סוכן אינו יכול להתאים קלט משתמש ליעד או לנושא מוגדרים מראש. למערכת אין אפשרות לקבוע את כוונת המשתמש בהתבסס על הקלט שסופק.
CSAT שביעות הרצון של הלקוח.
נושאים ברזולוציה נמוכה מתייחס לנושאי שיחה שלעתים קרובות אינם מצליחים לפתור שאילתות משתמשים ביעילות. נושאים אלה מובילים לעתים קרובות לחוסר שביעות רצון של המשתמש, נטישה או הסלמה לנציג.

סקירה זו מסייעת לתעדף את צבר העדכונים של סוכנים. לדוגמה, אם אמירות לא מזוהות מוסלמות לעתים קרובות לנציג שירות לקוחות, נצלו את ההזדמנות כדי לשפר את ההטייה. נתחו דפוסי משתמש שמפעילים חזרה למצב בסיס ואמירות לא מזוהות, ובצעו אימון של נושאים קיימים או צרו נושאים חדשים כדי לצייד את הסוכן כך שהוא יוכל לענות טוב יותר על צרכי המשתמש.

למידע נוסף: