השוואה בין הנחיות

התכונה Compare מאפשרת לכם לראות איך הנחיה, מודל או הגדרת פרמטר שונים משנים את הפלט של המודל. אתם יכולים לראות את כל ההנחיות והתשובות שלהן זו לצד זו כדי להשוות ולנתח אותן בדרכים הבאות:

  • באמצעות פרומפט חדש.
  • עם הנחיה שמורה אחרת.
  • עם אמת קרקע (ground truth).

לפני שמתחילים

כדי לגשת לתכונה "השוואה", פועלים לפי השלבים הבאים:

  1. נכנסים לדף Create prompt במסוף Google Cloud .

    מעבר אל "יצירת הנחיה"

  2. לוחצים על השוואה. הדף השוואה מופיע.

יצירת הנחיה בתכונה "השוואה"

בדף השוואה, אתם יכולים ליצור הנחיה לפני שאתם בוחרים הנחיה אחרת כדי להשוות בין התוצאות.

כדי ליצור הנחיה, פועלים לפי השלבים הבאים:

  1. בשדה הנחיה חדשה, מזינים את ההנחיה.

  2. לוחצים על שליחת ההנחיות. התשובה של המודל מופיעה מתחת לטקסט של ההנחיה שהזנתם.

  3. לוחצים על Save as new. מופיעה תיבת הדו-שיח הנחיית שמירה.

  4. בשדה שם ההנחיה, מזינים את השם של ההנחיה החדשה.

  5. בשדה Region, בוחרים את האזור או משאירים את אזור ברירת המחדל.

  6. אם חלים מפתחות הצפנה בניהול הלקוח (CMEK), מבצעים את הפעולות הבאות:

    1. מסמנים את התיבה Customer-managed encryption key (CMEK).
    2. בוחרים מפתח מהשדה Select a Cloud Key Management Service key.
  7. לוחצים על Save כדי לשמור את ההנחיה ברשימת ההנחיות לשימוש בדף Compare saved prompt.

  8. לוחצים על שליחת הנחיות כדי להשוות בין ההנחיות והתשובות שלהן.

אתם יכולים לעדכן את ההנחיות ולשמור את הגרסאות המעודכנות כהנחיות חדשות.

השוואה באמצעות הנחיה חדשה

כדי להשוות בין ההנחיה השמורה להנחיה חדשה, פועלים לפי השלבים הבאים:

  1. לוחצים על השוואה של הנחיה חדשה. מופיע החלון השוואה.
  2. אופציונלי: לוחצים על Switch model כדי להשתמש במודל אחר במקום במודל ברירת המחדל.
  3. אופציונלי: מרחיבים את הקטע Outputs.
  4. פלט:
    1. אופציונלי: אם רוצים שהמודל יפיק פלט בפורמט ספציפי כמו JSON, לוחצים על המתג Structured output. אחרי שבוחרים באפשרות פלט מובנה, האפשרויות של ביסוס נתונים מושבתות כי אין תמיכה בביסוס נתונים עם פלט מובנה.
    2. אופציונלי: משנים את Thinking budget לאחת מהאפשרויות הבאות:
      • אוטומטי: המודל חושב רק כשיש צורך. המודל מתאים את מידת החשיבה או הניתוח של מצב מסוים לפי מה שנדרש באותו רגע.
      • ידני: אתם יכולים לשנות את מספר הטוקנים של תקציב החשיבה.
      • כבוי: המודל לא משתמש בתקציבים או בתהליכי חשיבה.
  1. אופציונלי: מרחיבים את הקטע כלים.
  2. כלים:
    1. בוחרים באחת מהאפשרויות הבאות:
      • עיגון: Google: עיגון באמצעות חיפוש Google או מפות Google.
      • ‫Grounding: Your data: עיגון באמצעות RAG Engine ב-Gemini Enterprise Agent Platform, חיפוש מבוסס סוכנים ב-Gemini Enterprise Agent Platform או Elasticsearch.
        1. אם בוחרים באפשרות Grounding: Your data, בוחרים את מקור הנתונים שבו רוצים להשתמש.
  1. אופציונלי: מרחיבים את הקטע מתקדם:
  2. מתקדם:
    1. בוחרים באפשרות אזור.
    2. לוחצים על הגדרות של מסנן הבטיחות. מופיעה תיבת דו-שיח. משאירים את ברירת המחדל מושבת, או בוחרים באחת מהאפשרויות הבאות: חסימה של מעט, חסימה של חלק או חסימה של רוב:
      • דברי שטנה: תגובות שליליות או פוגעניות שמתמקדות בזהות או במאפיינים מוגנים.
      • תוכן מסוכן: תוכן שמקדם או מאפשר גישה למוצרים, לשירותים ולפעילויות שגורמים נזק.
      • תוכן מיני בוטה: מכיל אזכורים של מעשים מיניים או תוכן גס אחר.
      • תוכן שמטרתו הטרדה: תגובות זדוניות, מאיימות, פוגעניות או בריוניות שמכוונות לאדם אחר.
    3. לוחצים על שמירה כדי לשמור את ההגדרות ולסגור את תיבת הדו-שיח.
    4. בשדה טמפרטורה, בוחרים את הטמפרטורה. הטמפרטורה שולטת באקראיות בבחירת האסימון. טמפרטורה נמוכה יותר מתאימה כשמצפים לתשובה נכונה או מדויקת. טמפרטורה גבוהה יותר יכולה להוביל לתוצאות מגוונות או לא צפויות.
    5. בשדה Output token limit, בוחרים את מגבלת הטוקנים לפלט. מגבלת האסימונים לפלט קובעת את כמות הטקסט המקסימלית שאפשר להפיק מהנחיה אחת. טוקן הוא בערך ארבעה תווים.
    6. בשדה מספר התשובות המקסימלי, בוחרים את מספר התשובות המקסימלי. אם המספר המקסימלי של תשובות המודל שנוצרו לכל הנחיה. יכול להיות שהתשובות עדיין ייחסמו בגלל מסנני בטיחות או כללי מדיניות אחרים.
    7. בוחרים ערך בשדה Top-P. הערך של Top-p משנה את האופן שבו המודל בוחר אסימונים לפלט.
    8. לוחצים על המתג בשדה הצגת התשובות של המודל בזמן אמת. אם בוחרים באפשרות הזו, התשובות מודפסות תוך כדי שהן נוצרות.
    9. מזינים רצף תחנות בשדה הוספת רצף תחנות. לוחצים על Enter אחרי כל רצף.
  1. לוחצים על שמירה כדי לשמור את השינויים בהגדרות.
  2. לוחצים על אישור.
  3. לוחצים על שליחת הנחיות כדי להשוות בין ההנחיות והתשובות שלהן.

מידע נוסף על מגבלות האסימונים בכל מודל זמין במאמר שליטה בתקציב החשיבה.

השוואה להנחיה שמורה אחרת

כדי להשוות בין ההנחיה השמורה להנחיה שמורה אחרת:

  1. לוחצים על השוואה להנחיה שנשמרה. החלונית הנחיה קיימת תופיע.
  2. בוחרים עד שתי הנחיות קיימות להשוואה.

    1. בוחרים שם להנחיה. אם יש הרבה הנחיות ברשימה, לוחצים על השדה Filter ובוחרים את המאפיין שלפיו רוצים לסנן. מזינים ערך ולוחצים על Enter.
    2. לוחצים על אישור. בדף Compare מוצגות ההנחיות שבחרתם לצד הנחיות אחרות שיצרתם או בחרתם להשוואה.
  3. לוחצים על שליחת הנחיות כדי להשוות בין ההנחיות והתשובות שלהן.

השוואה לאמת קרקע (ground truth)

אמת קרקע (ground truth) היא התשובה המועדפת עליכם להנחיה. כל שאר התשובות של המודל נבדקות בהשוואה לתשובת אמת הקרקע.

כדי להשוות בין ההנחיה השמורה לבין אמת קרקע (ground truth):

  1. לוחצים על אמת קרקע (ground truth). החלונית Ground truth מופיעה.
  2. כדי ליצור מדדי הערכה נוספים, צריך להזין את אמת הקרקע (ground truth).
  3. לוחצים על שמירה כדי לשמור את אמת הקרקע.
  4. לוחצים על שליחת הנחיות כדי להשוות בין ההנחיות והתשובות שלהן.

מדדי ההערכה שנוצרים כשמשווים בין הנחיה לבין אמת קרקע (ground truth) לא מושפעים מהאזור שבוחרים.

המאמרים הבאים