מדריך למשתמש: הערכה אוטומטית של סיכומים

הערכה אוטומטית של סיכומים (הערכה עצמית) בודקת את איכות הסיכומים על סמך שלושה מדדים: דיוק, שלמות ועמידה בדרישות. התכונה הזו עוזרת לכם להעריך את האיכות של מחוללי הסיכומים, וזה חשוב כשמבצעים התאמה של הגדרות מותאמות אישית של קטעים או כשמשדרגים תוכנה שמשפיעה על מודלים של סיכומים. לפרטים נוספים על מדדי ההערכה, אפשר לעיין במאמר מדדי הערכה אוטומטית של סיכומים.

לפני שמתחילים

• ליצור מחולל סיכומים שמפיק סיכומים אפשריים להערכה.
• הגדרות הקטע בגנרטור משמשות כבסיס אמין להערכה.
• כדי שהציון הסופי ישקף את איכות הגנרטור, ההוראות בכל קטע צריכות להיות זהות לאלה שבגנרטור.

יצירת בקשה להערכה אוטומטית של סיכום

כדי ליצור מחולל סיכומים:

1. עוברים אל מסוף Agent Assist ונכנסים לחשבון.

   כניסה למסוף

2. בוחרים את הפרויקט הרצוי.

3. לוחצים על הערכות > הערכה חדשה.

4. מזינים שם לתצוגה ייחודי ובוחרים מחולל שמתאים לסיכום המועמד.

5. לוחצים על הבא.

6. בוחרים מערך נתונים להערכה באחת משתי האפשרויות הבאות:

   • מדגם אקראי של שיחות מטווח תאריכים: אם שילמתם על תכונת הסיכום של Agent Assist, מציינים טווח תאריכים ומספר מקסימלי של שיחות. ההערכות בוחרות באופן אקראי עד המספר המקסימלי של שיחות וסיכומים מההיסטוריה שלכם.
   • בחירת מערך נתונים ספציפי: בחירה של מדגם ספציפי של שיחות שאספתם באמצעות Customer Experience Insights.

7. בוחרים מקור לסיכום מבין האפשרויות הבאות:

   • תייצר רק סיכומים חסרים באמצעות הגנרטור שצוין. אתם משלמים את העלות של יצירת הסיכום
   • ליצור סיכומים חדשים לכל השיחות. אתם משלמים את העלות של יצירת הסיכום
   • לא ליצור סיכומים. במקום זאת, אפשר להשתמש בסיכומים קיימים שנמצאים במערך הנתונים. תצטרכו לשלם עלות אחרת.

8. לוחצים על הבא.

9. לוחצים על Select folder (בחירת תיקייה), בוחרים תיקייה ב-Cloud Storage בקטגוריה לאחסון התוצאה ולוחצים על Ok (אישור). ההערכה האוטומטית נכתבת לקובץ CSV ונשמרת בקטגוריה של Cloud Storage.

10. לוחצים על Run. זו פעולה ממושכת. ההערכה החדשה מופיעה בטבלה.

הערכות

כדי לראות רשימה של מחוללי סיכומים ושל הפעלות של סשן הערכה שהושלמו:

1. עוברים אל מסוף Agent Assist ונכנסים לחשבון. כניסה למסוף
2. בוחרים את הפרויקט הרצוי.
3. לוחצים על הערכות.
4. אופציונלי: כדי להפוך את סדר הזמנים של היצירה, לוחצים על keyboard_arrow_down למטה בכותרת העמודה זמן יצירה.

סינון הרשימה

כדי לסנן את הרשימה ולחפש הערכה ספציפית:

1. לוחצים על סינון ההערכות.

2. בוחרים אחת מהאפשרויות האלה:

   • השם המוצג
   • שם הגנרטור
   • זמן יצירה

3. מזינים את הערך של הפרמטר.

מחיקת הערכה

1. מחכים עד שהגנרטור יסיים להריץ את ההערכה.
2. לוחצים על מחיקה מחיקה כדי לנקות את ההערכה.

צפייה בתוצאות ההערכה

כדי לראות את תוצאות ההערכה המפורטות ממסוף Agent Assist, פועלים לפי השלבים הבאים.

1. עוברים אל מסוף Agent Assist ונכנסים לחשבון. כניסה למסוף
2. בוחרים את הפרויקט הרצוי.
3. לוחצים על הערכות.
4. כדי לראות את פרטי ההערכה, כולל הפרטים הבאים, לוחצים על שורה כלשהי ברשימה:
   • השם המוצג של הגנרטור
   • מספר השיחות
   • אם יש מערכי נתונים של Customer Experience Insights, השם של מערך הנתונים המשויך של Customer Experience Insights
   • מועד הרצה
   • פלט של Cloud Storage
   • תוצאות הביצועים הכוללות של מערך נתונים שלם
   • תוצאות ברמת השיחה לכל שיחה במערך נתונים

תוצאות ברמת השיחה

תוצאות ההערכה ברמת השיחה מוצגות בטבלה ב-Agent Assist.

1. בדף פרטי ההערכה, לוחצים על שורה כלשהי בטבלה תוצאות ברמת השיחה כדי לראות תוצאות מפורטות, סיכום ותמליל של השיחה.
2. לוחצים על קטע כדי לראות דוגמאות לקטע הזה מהסיכום.

השוואת תוצאות

כדי להשוות בין תוצאות של הערכות שונות:

1. במסוף של Agent Assist, עוברים אל Evaluations (הערכות).
2. לוחצים על הערכה כדי לראות את הפרטים שלה. ההערכה הזו מספקת את הבסיס להשוואה וקובעת אילו מדדים ייכללו בהשוואה.
3. כדי להוסיף עוד הערכות להשוואה, לוחצים על השוואה > הוספת הרצה. אפשר להשוות עד חמש הערכות בו-זמנית. כל שם לתצוגה מודגש באפור.
4. כדי להסיר הערכה מההשוואה, לוחצים על סגירה סגירה.

השוואה בין גרסאות של יוצר סיכומים

אפשר גם להשתמש בהערכה אוטומטית של סיכומים כדי להשוות בין סיכומים מגרסאות שונות של מחולל סיכומים. צריך אוסף של תמלילי שיחות.

הדוגמה הבאה מציגה השוואה בין תוצאות הערכה שמבוססות על גנרטור סיכומים v4.0 ועל גנרטור סיכומים v5.0.

שלב 1: יוצרים גרסה חדשה של מחולל הסיכומים

אם עדיין לא השתמשתם בכלי ליצירת סיכומים, אתם יכולים לפעול לפי ההוראות כדי ליצור כלי כזה שמבוסס על גרסה 4.0 של סיכום. לאחר מכן, מבצעים את השלבים הבאים כדי ליצור גנרטור שני שמשתמש בסיכום גרסה 5.0:

1. מנווטים אל הדף Agent Assist console > Summarization.
2. לוחצים על more_vert ליד הגנרטור > שכפול הגנרטור > שם העותק של הגנרטור.
3. בשדה Version (גרסה), בוחרים באפשרות 5.0 ולוחצים על Save (שמירה).

שלב 2: יצירת מערך נתונים

פועלים לפי ההוראות ליצירת מערך נתונים עם עד 100 שיחות. אפשר ליצור עד 100 שיחות לכל הערכה.

שלב 3: יצירת הערכות של סיכומים

כדי ליצור כל הערכה, פועלים לפי השלבים הבאים.

1. עוברים אל Agent Assist Console, נכנסים לחשבון ובוחרים את הפרויקט.
2. לוחצים על הערכות > הערכה חדשה.
3. מזינים שם מוצג ייחודי.
4. בוחרים את הגנרטור של סיכום 4.0.
5. לוחצים על הבא.
6. בוחרים באפשרות בחירת מערך נתונים ספציפי.
7. בוחרים באפשרות יצירת סיכומים.
8. לוחצים על הבא > בחירת תיקייה.
9. בוחרים תיקייה ב-Cloud Storage לאחסון התוצאה ולוחצים על אישור. ההערכה האוטומטית נכתבת לקובץ CSV ונשמרת בקטגוריה של Cloud Storage.
10. לוחצים על Run. זו פעולה ממושכת. ההערכה החדשה מופיעה בטבלה.

חוזרים על שלבים 2 עד 10 עבור מחולל הסיכומים 5.0, ומשתמשים באותו מערך נתונים.

שלב 4: השוואה בין תוצאות ההערכה

פועלים לפי ההוראות להשוואת התוצאות. ב-Agent Assist מוצגת השוואה בין שתי תוצאות ההערכה. אם מחולל אחד קיבל ציונים גבוהים יותר מהשני, הציונים הגבוהים יותר יסומנו בירוק. אם לשני הגנרטורים יש ניקוד זהה, הם גם יסומנו בירוק.

מגבלה

הערכה אוטומטית של סיכומים לא תומכת ב-VPC Service Controls.

אזורים שבהם השירות זמין

ההערכה האוטומטית של סיכומים זמינה רק בשלושה אזורים של Agent Assist. רשימת האזורים שבהם כל תכונה זמינה מופיעה בטבלת האזורים.