משאב: EvaluationMatcher
התאמה להערכה.
| ייצוג ב-JSON |
|---|
{ "name": string, "displayName": string, "description": string, // Union field |
| שדות | |
|---|---|
name |
מזהה. שם המשאב של ההתאמה להערכה. |
displayName |
חובה. השם הקריא לאנשים של ההתאמה להערכה. |
description |
זה שינוי אופציונלי. תיאור ההתאמה להערכה. |
שדה של איחוד matcher. ההתאמה שבה משתמשים להתאמת ההערכה. ההתאמה צריכה להפיק תוצאה בוליאנית שמציינת אם ההתאמה של ההערכה עברה או לא. הערך matcher יכול להיות רק אחד מהבאים: |
|
orderResultMatcher |
זה שינוי אופציונלי. התאמה של הערכה לתוצאה של הזמנה. |
agentUtteranceStringMatcher |
זה שינוי אופציונלי. התאמת הערכה למחרוזת של אמירה של נציג. |
llmJudgementMatcher |
זה שינוי אופציונלי. התאמה להערכה באמצעות שיפוט של מודל שפה גדול (LLM). |
OrderResultMatcher
התאמה של הערכה לתוצאה של הזמנה.
| ייצוג ב-JSON |
|---|
{
"expectedOrder": {
object ( |
| שדות | |
|---|---|
expectedOrder |
חובה. ההזמנה הצפויה להתאמה. הסדר בפועל חייב להתאים לסדר הצפוי אחרי הנורמליזציה. הבדיקה עוברת אם כל השדות והכמויות תואמים. כדי לטפל בהשמטת שדות באופן עקבי, המערכת מתעלמת מכמויות ברירת מחדל של 1 במהלך ההשוואה. |
expectedLegacyOrder |
זה שינוי אופציונלי. מצב ההזמנה הקודם שצפוי להתאים. משמש כאשר בהקשר ההערכה, useLegacyOrderState מוגדר כ-true. |
AgentUtteranceStringMatcher
התאמת הערכה למחרוזת של אמירה של נציג.
| ייצוג ב-JSON |
|---|
{ "invert": boolean, // Union field |
| שדות | |
|---|---|
invert |
זה שינוי אופציונלי. אם הערך הוא True, תנאי ההתאמה הפוך (למשל, "לא מכיל" או "לא תואם"). |
שדה של איחוד הערך |
|
contains |
זה שינוי אופציונלי. האמירה של הנציג צריכה להכיל את מחרוזת המשנה הזו. |
regex |
זה שינוי אופציונלי. הביטוי של הנציג צריך להתאים לביטוי הרגולרי הזה. |
LLMJudgementMatcher
התאמה להערכה באמצעות שיפוט של LLM עם ההנחיה הבאה: "אתה עוזר אישי שמסייע למשתמשים לבצע הזמנות ממסעדה. יוצגו לך קלט של משתמשים ותשובות של סוכנים. המשימה שלך היא לקבוע אם התשובה של הנציג עומדת בקריטריונים הבאים: {criteria}"
| ייצוג ב-JSON |
|---|
{ "criteria": string, "invert": boolean } |
| שדות | |
|---|---|
criteria |
חובה. הקריטריונים שלפיהם המודל הגדול של השפה (LLM) בודק אם התשובה של הנציג עוברת את הבדיקה. |
invert |
זה שינוי אופציונלי. אם הערך הוא True, תנאי ההתאמה הפוך (למשל, "לא מכיל"). |
Methods |
|
|---|---|
|
יוצרת EvaluationMatcher. |
|
מחיקת ה-EvaluationMatcher שצוין. |
|
מקבל EvaluationMatcher. |
|
הצגת רשימה של EvaluationMatchers. |
|
מעדכן את ה-EvaluationMatcher שצוין. |