יצירת טקסט דינמי מבוסס-AI באמצעות הפונקציה AI.GENERATE_TEXT
במסמך הזה מוסבר איך ליצור מודל מרוחק ב-BigQuery ML שמייצג מודל של Gemini Enterprise Agent Platform, ואז להשתמש במודל המרוחק הזה עם הפונקציה AI.GENERATE_TEXT כדי ליצור טקסט דינמי מבוסס-AI.
אפשר להשתמש בסוגים הבאים של מודלים מרוחקים:
- מודלים מרוחקים בכל אחד מהמודלים של Gemini שזמינים לכלל המשתמשים או בגרסת טרום-השקה (Preview).
- מודלים מרוחקים ב-Anthropic Claude.
- מודלים מרוחקים במודלים של Llama
- מודלים מרוחקים ב-מודלי AI של Mistral
- מודלים מרוחקים מעל מודלים פתוחים נתמכים.
בהתאם למודל של Agent Platform שתבחרו, תוכלו ליצור טקסט דינמי מבוסס-AI על סמך קלט של נתונים לא מובְנים מטבלאות אובייקטים או קלט של טקסט מטבלאות רגילות.
התפקידים הנדרשים
כדי ליצור מודל מרוחק וליצור טקסט דינמי מבוסס-AI, צריך את התפקידים הבאים בניהול זהויות והרשאות גישה (IAM):
- יצירה ושימוש במערכי נתונים, בטבלאות ובמודלים של BigQuery:
התפקיד "עריכת נתונים ב-BigQuery" (
roles/bigquery.dataEditor) בפרויקט. יצירה, הקצאה ושימוש בחיבורים ל-BigQuery: התפקיד "אדמין של חיבורים ל-BigQuery" (
roles/bigquery.connectionsAdmin) בפרויקט.אם לא הגדרתם חיבור כברירת מחדל, אתם יכולים ליצור ולהגדיר חיבור כחלק מהרצת ההצהרה
CREATE MODEL. כדי לעשות את זה, צריך להיות לכם תפקיד אדמין ב-BigQuery (roles/bigquery.admin) בפרויקט. מידע נוסף זמין במאמר הגדרת החיבור שמוגדר כברירת מחדל.נותנים הרשאות לחשבון השירות של החיבור: אדמין של IAM בפרויקט (
roles/resourcemanager.projectIamAdmin) בפרויקט שמכיל את נקודת הקצה של Gemini Enterprise Agent Platform. זה הפרויקט הנוכחי של מודלים מרוחקים שיוצרים על ידי ציון שם המודל כנקודת קצה. זה הפרויקט שמזוהה בכתובת ה-URL של מודלים מרוחקים שאתם יוצרים על ידי ציון כתובת URL כנקודת קצה.אם אתם משתמשים במודל המרוחק כדי לנתח נתונים לא מובְנים מטבלת אובייקטים, והקטגוריה של Cloud Storage שבה אתם משתמשים בטבלת האובייקטים נמצאת בפרויקט אחר מנקודת הקצה של Agent Platform, אתם צריכים גם את התפקיד "אדמין של Storage" (
roles/storage.admin) בקטגוריה של Cloud Storage שבה משתמשת טבלת האובייקטים.יצירת משימות ב-BigQuery: התפקיד "משתמש במשימות BigQuery" (
roles/bigquery.jobUser) בפרויקט.
התפקידים המוגדרים מראש האלה מכילים את ההרשאות שנדרשות כדי לבצע את המשימות שמפורטות במאמר הזה. כדי לראות את ההרשאות הנדרשות, מרחיבים את הקטע Required Permissions:
ההרשאות הנדרשות
- יצירת מערך נתונים:
bigquery.datasets.create - יצירה, הקצאה ושימוש בחיבור:
bigquery.connections.* - מגדירים את ההרשאות של חשבון השירות:
resourcemanager.projects.getIamPolicyו-resourcemanager.projects.setIamPolicy - יוצרים מודל ומריצים הסקה:
bigquery.jobs.createbigquery.models.createbigquery.models.getDatabigquery.models.updateDatabigquery.models.updateMetadata
יכול להיות שתוכלו לקבל את ההרשאות האלה גם באמצעות תפקידים בהתאמה אישית או תפקידים מוגדרים מראש אחרים.
לפני שמתחילים
-
בדף לבחירת הפרויקט במסוף Google Cloud , בוחרים פרויקט ב- Google Cloud או יוצרים אותו.
התפקידים שנדרשים כדי לבחור או ליצור פרויקט
- בחירת פרויקט: כדי לבחור פרויקט לא נדרש תפקיד IAM ספציפי – אתם יכולים לבחור כל פרויקט שקיבלתם בו תפקיד.
-
יצירת פרויקט: כדי ליצור פרויקט, צריך את התפקיד "יצירת פרויקטים" (
roles/resourcemanager.projectCreator), שכולל את ההרשאהresourcemanager.projects.create. איך מקצים תפקידים?
-
מפעילים את ממשקי ה-API של BigQuery, של BigQuery Connection ושל Agent Platform API, אם הם עדיין לא מופעלים.
התפקידים שנדרשים כדי להפעיל ממשקי API
כדי להפעיל ממשקי API, צריך את ההרשאה
serviceusage.services.enable. אם יצרתם את הפרויקט, סביר להניח שכבר יש לכם את ההרשאה הזו דרך התפקיד "בעלים" (roles/owner). אחרת, תוכלו לקבל את ההרשאה הזו דרך התפקיד "אדמין בממשק 'שימוש בשירות'" (roles/serviceusage.serviceUsageAdmin). איך מקצים תפקידים
יצירת קבוצת נתונים
יוצרים מערך נתונים ב-BigQuery שיכיל את המשאבים:
המסוף
נכנסים לדף BigQuery במסוף Google Cloud .
בחלונית השמאלית, לוחצים על Explorer:

אם החלונית הימנית לא מוצגת, לוחצים על הרחבת החלונית הימנית כדי לפתוח אותה.
בחלונית Explorer, לוחצים על שם הפרויקט.
לוחצים על View actions > Create dataset.
בדף Create dataset, מבצעים את הפעולות הבאות:
בשדה Dataset ID, מקלידים שם למערך הנתונים.
בקטע Location type, בוחרים באפשרות Region או Multi-region.
- אם בחרתם באפשרות Region, בוחרים מיקום מהרשימה Region.
- אם בחרתם באפשרות מספר אזורים, בחרו באפשרות US או Europe מהרשימה מספר אזורים.
לוחצים על Create dataset.
BQ
יצירת חיבור
יוצרים חיבור למשאבים ב-Cloud כדי להשתמש במודל המרוחק, ומקבלים את חשבון השירות של החיבור. יוצרים את החיבור באותו מיקום של מערך הנתונים שיצרתם בשלב הקודם.
אם הגדרתם חיבור כברירת מחדל או שיש לכם את התפקיד אדמין ב-BigQuery, אתם יכולים לדלג על השלב הזה.
בוחרים באחת מהאפשרויות הבאות:המסוף
נכנסים לדף BigQuery.
בחלונית הימנית, לוחצים על Explorer:

אם החלונית הימנית לא מוצגת, לוחצים על Expand left pane כדי לפתוח אותה.
בחלונית Explorer, מרחיבים את שם הפרויקט ולוחצים על Connections.
בדף Connections, לוחצים על Create connection.
בשדה Connection type, בוחרים באפשרות Vertex AI remote models, remote functions, BigLake and Spanner (Cloud Resource).
בשדה מזהה החיבור, נותנים שם לחיבור.
בשדה Location type, בוחרים מיקום לחיבור. החיבור צריך להיות באותו מיקום כמו המשאבים האחרים, למשל מערכי נתונים.
לוחצים על יצירת חיבור.
לוחצים על מעבר לחיבור.
בחלונית Connection info, מעתיקים את מזהה חשבון השירות כדי להשתמש בו בשלב מאוחר יותר.
SQL
משתמשים בהצהרה CREATE CONNECTION:
נכנסים לדף BigQuery במסוף Google Cloud .
בעורך השאילתות, מזינים את ההצהרה הבאה:
CREATE CONNECTION [IF NOT EXISTS] `CONNECTION_NAME` OPTIONS ( connection_type = "CLOUD_RESOURCE", friendly_name = "FRIENDLY_NAME", description = "DESCRIPTION" );
מחליפים את מה שכתוב בשדות הבאים:
-
CONNECTION_NAME: שם החיבור בפורמטPROJECT_ID.LOCATION.CONNECTION_ID,LOCATION.CONNECTION_IDאוCONNECTION_ID. אם לא מציינים את הפרויקט או המיקום, הם נגזרים מהפרויקט ומהמיקום שבהם ההצהרה מופעלת. -
FRIENDLY_NAME(אופציונלי): שם תיאורי לחיבור. -
DESCRIPTION(אופציונלי): תיאור של החיבור.
-
לוחצים על הפעלה.
מידע נוסף על הרצת שאילתות זמין במאמר הרצת שאילתה אינטראקטיבית.
BQ
בסביבה של שורת הפקודה, יוצרים חיבור:
bq mk --connection --location=REGION --project_id=PROJECT_ID \ --connection_type=CLOUD_RESOURCE CONNECTION_ID
הפרמטר
--project_idמבטל את פרויקט ברירת המחדל.מחליפים את מה שכתוב בשדות הבאים:
-
REGION: אזור החיבור שלכם -
PROJECT_ID: מזהה הפרויקט ב- Google Cloud -
CONNECTION_ID: מזהה לחיבור
כשיוצרים משאב חיבור, BigQuery יוצר חשבון שירות ייחודי של המערכת ומשייך אותו לחיבור.
פתרון בעיות: אם מופיעה שגיאת החיבור הבאה, עדכנו את Google Cloud SDK:
Flags parsing error: flag --connection_type=CLOUD_RESOURCE: value should be one of...
-
מאחזרים ומעתיקים את מזהה חשבון השירות כדי להשתמש בו בשלב מאוחר יותר:
bq show --connection PROJECT_ID.REGION.CONNECTION_ID
הפלט אמור להיראות כך:
name properties 1234.REGION.CONNECTION_ID {"serviceAccountId": "connection-1234-9u56h9@gcp-sa-bigquery-condel.iam.gserviceaccount.com"}
Python
לפני שמנסים את הדוגמה הזו, צריך לפעול לפי הוראות ההגדרה של Python במדריך למתחילים של BigQuery באמצעות ספריות לקוח. למידע נוסף, קראו את מאמרי העזרה של BigQuery Python API.
כדי לבצע אימות ב-BigQuery, צריך להגדיר את Application Default Credentials. מידע נוסף זמין במאמר הגדרת אימות לספריות לקוח.
Node.js
לפני שמנסים את הדוגמה הזו, צריך לפעול לפי הוראות ההגדרה של Node.js במדריך למתחילים של BigQuery באמצעות ספריות לקוח. למידע נוסף, קראו את מאמרי העזרה של BigQuery Node.js API.
כדי לבצע אימות ב-BigQuery, צריך להגדיר את Application Default Credentials. מידע נוסף זמין במאמר הגדרת אימות לספריות לקוח.
Java
לפני שמנסים את הדוגמה הזו, צריך לפעול לפי הוראות ההגדרה של Java במדריך למתחילים של BigQuery באמצעות ספריות לקוח. למידע נוסף, קראו את מאמרי העזרה של BigQuery Java API.
כדי לבצע אימות ב-BigQuery, צריך להגדיר את Application Default Credentials. מידע נוסף זמין במאמר הגדרת אימות לספריות לקוח.
Terraform
משתמשים במשאב google_bigquery_connection.
כדי לבצע אימות ב-BigQuery, צריך להגדיר את Application Default Credentials. מידע נוסף זמין במאמר הגדרת אימות לספריות לקוח.
בדוגמה הבאה נוצר קישור למשאבים ב-Cloud בשם my_cloud_resource_connection באזור US:
כך מחילים את ההגדרות של Terraform בפרויקט ב- Google Cloud :
הכנת Cloud Shell
- מפעילים את Cloud Shell.
-
מגדירים את פרויקט ברירת המחדל ב- Google Cloud שבו רוצים להחיל את ההגדרות של Terraform.
תצטרכו להריץ את הפקודה הזו רק פעם אחת לכל פרויקט, ותוכלו לעשות זאת בכל ספרייה.
export GOOGLE_CLOUD_PROJECT=PROJECT_ID
אם תגדירו ערכים ספציפיים בקובץ התצורה של Terraform, הם יבטלו את ערכי ברירת המחדל של משתני הסביבה.
הכנת הספרייה
לכל קובץ תצורה של Terraform צריכה להיות ספרייה משלו (שנקראת גם מודול ברמה הבסיסית).
-
יוצרים ספרייה חדשה ב-Cloud Shell ובה יוצרים קובץ חדש. שם הקובץ חייב לכלול את הסיומת
.tf, למשלmain.tf. במדריך הזה, הקובץ נקראmain.tf.mkdir DIRECTORY && cd DIRECTORY && touch main.tf
-
אם אתם עוקבים אחרי המדריך, תוכלו להעתיק את הקוד לדוגמה בכל קטע או שלב.
מעתיקים את הקוד לדוגמה בקובץ
main.tfהחדש שיצרתם.לחלופין, אפשר גם להעתיק את הקוד מ-GitHub. כדאי לעשות את זה כשקטע הקוד של Terraform הוא חלק מפתרון מקצה לקצה.
- בודקים את הפרמטרים לדוגמה ומשנים אותם בהתאם לסביבה שלכם.
- שומרים את השינויים.
-
מפעילים את Terraform. צריך לעשות זאת רק פעם אחת לכל ספרייה.
terraform init
אופציונלי: תוכלו לכלול את האפשרות
-upgrade, כדי להשתמש בגרסה העדכנית ביותר של הספק של Google:terraform init -upgrade
החלה של השינויים
-
בודקים את ההגדרות ומוודאים שהמשאבים שמערכת Terraform תיצור או תעדכן תואמים לציפיות שלכם:
terraform plan
מתקנים את ההגדרות לפי הצורך.
-
מריצים את הפקודה הבאה ומזינים
yesבהודעה שמופיעה, כדי להחיל את הגדרות Terraform:terraform apply
ממתינים עד שב-Terraform תוצג ההודעה "Apply complete!".
- פותחים את הפרויקט ב- Google Cloud כדי להציג את התוצאות. במסוף Google Cloud , נכנסים למשאבים בממשק המשתמש כדי לוודא שהם נוצרו או עודכנו ב-Terraform.
הקצאת תפקיד לחשבון השירות של החיבור למודל המרוחק
אתם צריכים לתת את התפקיד "משתמש בפלטפורמת הסוכנים" לחשבון השירות של החיבור שבו משתמש המודל המרוחק.
אם אתם מתכננים לציין את נקודת הקצה של המודל המרוחק ככתובת URL, לדוגמה endpoint = 'https://us-central1-aiplatform.googleapis.com/v1/projects/myproject/locations/us-central1/publishers/google/models/gemini-2.0-flash', הקצו את התפקיד הזה באותו פרויקט שציינתם בכתובת ה-URL.
אם אתם מתכננים לציין את נקודת הקצה של המודל המרוחק באמצעות שם המודל, לדוגמה endpoint = 'gemini-2.0-flash', הקצו את התפקיד הזה באותו פרויקט שבו אתם מתכננים ליצור את המודל המרוחק.
אם מקצים את התפקיד בפרויקט אחר, מופיעה השגיאה bqcx-1234567890-wxyz@gcp-sa-bigquery-condel.iam.gserviceaccount.com does not have the permission to access resource.
כדי להקצות את התפקיד "משתמש בפלטפורמת הסוכנים":
המסוף
נכנסים לדף IAM & Admin.
לוחצים על הוספה.
תיבת הדו-שיח Add principals נפתחת.
בשדה New principals, מזינים את מזהה חשבון השירות שהעתקתם קודם.
בשדה Select a role, מחפשים את Agent Platform User.
לוחצים על Save.
gcloud
משתמשים בפקודה gcloud projects add-iam-policy-binding.
gcloud projects add-iam-policy-binding 'PROJECT_NUMBER' --member='serviceAccount:MEMBER' --role='roles/aiplatform.user' --condition=None
מחליפים את מה שכתוב בשדות הבאים:
-
PROJECT_NUMBER: מספר הפרויקט -
MEMBER: מזהה חשבון השירות שהעתקתם קודם
הקצאת תפקיד לחשבון השירות של החיבור לטבלת האובייקטים
אם אתם משתמשים במודל המרוחק כדי ליצור טקסט דינמי מבוסס-AI מנתונים של טבלת אובייקטים, העניקו לחשבון השירות של החיבור לטבלת האובייקטים את התפקיד 'משתמש בפלטפורמת הסוכנים' באותו פרויקט שבו אתם מתכננים ליצור את המודל המרוחק. אם לא, אפשר לדלג על השלב הזה.
כדי למצוא את חשבון השירות של החיבור לטבלת האובייקטים:
נכנסים לדף BigQuery.
בחלונית השמאלית, לוחצים על Explorer:

אם החלונית הימנית לא מוצגת, לוחצים על הרחבת החלונית הימנית כדי לפתוח אותה.
בחלונית Explorer, לוחצים על Datasets ובוחרים מערך נתונים שמכיל את טבלת האובייקטים.
לוחצים על סקירה כללית > טבלאות, ואז בוחרים את טבלת האובייקטים.
בחלונית העריכה, לוחצים על הכרטיסייה פרטים.
שימו לב לשם החיבור בשדה מזהה החיבור.
בחלונית Explorer, לוחצים על Connections.
בוחרים את החיבור שתואם לחיבור שבשדה Connection ID בטבלת האובייקטים.
מעתיקים את הערך בשדה Service account ID.
כדי להקצות את התפקיד:
המסוף
נכנסים לדף IAM & Admin.
לוחצים על הוספה.
תיבת הדו-שיח Add principals נפתחת.
בשדה New principals, מזינים את מזהה חשבון השירות שהעתקתם קודם.
בשדה Select a role, מחפשים את Agent Platform User.
לוחצים על Save.
gcloud
משתמשים בפקודה gcloud projects add-iam-policy-binding.
gcloud projects add-iam-policy-binding 'PROJECT_NUMBER' --member='serviceAccount:MEMBER' --role='roles/aiplatform.user' --condition=None
מחליפים את מה שכתוב בשדות הבאים:
-
PROJECT_NUMBER: מספר הפרויקט -
MEMBER: מזהה חשבון השירות שהעתקתם קודם
הפעלת מודל של שותף
השלב הזה נדרש רק אם רוצים להשתמש במודלים של Anthropic Claude, Llama או Mistral AI.
במסוף Google Cloud , נכנסים לדף Model Garden ב-Agent Platform.
מחפשים את המודל של השותף שרוצים להשתמש בו.
לוחצים על כרטיס המודל.
בדף המודל, לוחצים על Enable.
ממלאים את פרטי ההפעלה הנדרשים ולוחצים על הבא.
בקטע תנאים והגבלות, מסמנים את התיבה.
לוחצים על Agree (אישור) כדי לאשר את התנאים וההגבלות ולהפעיל את המודל.
בחירת שיטת פריסה של מודל פתוח
אם אתם יוצרים מודל מרוחק על בסיס מודל פתוח נתמך, אתם יכולים לפרוס את המודל הפתוח באופן אוטומטי בזמן שאתם יוצרים את המודל המרוחק. כדי לעשות את זה, צריך לציין את מזהה המודל של Agent Platform Model Garden או של Hugging Face בהצהרת CREATE MODEL.
לחלופין, אתם יכולים לפרוס באופן ידני את המודל הפתוח קודם, ואז להשתמש במודל הפתוח הזה עם המודל המרוחק על ידי ציון נקודת הקצה של המודל בהצהרה CREATE MODEL. מידע נוסף זמין במאמר פריסת מודלים פתוחים.
יצירת מודל מרוחק של BigQuery ML
יוצרים מודל מרוחק:
מודלים של Agent Platform
נכנסים לדף BigQuery במסוף Google Cloud .
יוצרים מודל מרוחק באמצעות עורך ה-SQL:
CREATE OR REPLACE MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME` REMOTE WITH CONNECTION {DEFAULT | `PROJECT_ID.REGION.CONNECTION_ID`} OPTIONS (ENDPOINT = 'ENDPOINT');
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שתכיל את המודל. מערך הנתונים הזה צריך להיות באותו מיקום של החיבור שבו אתם משתמשים. -
MODEL_NAME: שם המודל. -
REGION: האזור שבו משתמשים בחיבור. -
CONNECTION_ID: המזהה של החיבור ל-BigQuery.כדי לקבל את הערך הזה, מציגים את פרטי החיבור במסוף Google Cloud ומעתיקים את הערך בקטע האחרון של מזהה החיבור המלא שמוצג ב-Connection ID. לדוגמה,
projects/myproject/locations/connection_location/connections/myconnection. -
ENDPOINT: נקודת הקצה של המודל ב-Agent Platform שבו רוצים להשתמש.במודלים שעברו אימון מראש ב-Agent Platform, במודלים של Claude ובמודלים של Mistral AI, מציינים את שם המודל. בחלק מהמודלים האלה, אפשר לציין גרסה ספציפית של המודל כחלק מהשם. במודלים נתמכים של Gemini, אתם יכולים לציין את נקודת הקצה הגלובלית כדי לשפר את הזמינות.
במודלים של Llama, מציינים נקודת קצה (endpoint) של OpenAI API בפורמט
openapi/<publisher_name>/<model_name>. לדוגמה,openapi/meta/llama-3.1-405b-instruct-maas.למידע על שמות וגרסאות של מודלים נתמכים, ראו
ENDPOINT.המודל של Agent Platform שאתם מציינים צריך להיות זמין במיקום שבו אתם יוצרים את המודל המרוחק. מידע נוסף זמין במאמר מיקומים.
מודלים פתוחים חדשים
נכנסים לדף BigQuery במסוף Google Cloud .
יוצרים מודל מרוחק באמצעות עורך ה-SQL:
CREATE OR REPLACE MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME` REMOTE WITH CONNECTION {DEFAULT | `PROJECT_ID.REGION.CONNECTION_ID`} OPTIONS ( {HUGGING_FACE_MODEL_ID = 'HUGGING_FACE_MODEL_ID' | MODEL_GARDEN_MODEL_NAME = 'MODEL_GARDEN_MODEL_NAME'} [, HUGGING_FACE_TOKEN = 'HUGGING_FACE_TOKEN' ] [, MACHINE_TYPE = 'MACHINE_TYPE' ] [, MIN_REPLICA_COUNT = MIN_REPLICA_COUNT ] [, MAX_REPLICA_COUNT = MAX_REPLICA_COUNT ] [, RESERVATION_AFFINITY_TYPE = {'NO_RESERVATION' | 'ANY_RESERVATION' | 'SPECIFIC_RESERVATION'} ] [, RESERVATION_AFFINITY_KEY = 'compute.googleapis.com/reservation-name' ] [, RESERVATION_AFFINITY_VALUES = RESERVATION_AFFINITY_VALUES ] [, ENDPOINT_IDLE_TTL = ENDPOINT_IDLE_TTL ] );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שתכיל את המודל. מערך הנתונים הזה צריך להיות באותו מיקום של החיבור שבו אתם משתמשים. -
MODEL_NAME: שם המודל. -
REGION: האזור שבו משתמשים בחיבור. -
CONNECTION_ID: המזהה של החיבור ל-BigQuery.כדי לקבל את הערך הזה, מציגים את פרטי החיבור במסוף Google Cloud ומעתיקים את הערך בקטע האחרון של מזהה החיבור המלא שמוצג ב-Connection ID. לדוגמה,
projects/myproject/locations/connection_location/connections/myconnection. -
HUGGING_FACE_MODEL_ID: ערךSTRINGשמציין את מזהה המודל של מודל Hugging Face נתמך, בפורמטprovider_name/model_name. לדוגמה,deepseek-ai/DeepSeek-R1. כדי לקבל את מזהה המודל, לוחצים על שם המודל ב-Hugging Face Model Hub ומעתיקים את מזהה המודל מהחלק העליון של כרטיס המודל. -
MODEL_GARDEN_MODEL_NAME: ערך מסוגSTRINGשמציין את מזהה המודל ואת גרסת המודל של מודל נתמך ב-Model Garden של Gemini Enterprise Agent Platform, בפורמטpublishers/publisher/models/model_name@model_version. לדוגמה,publishers/openai/models/gpt-oss@gpt-oss-120b. כדי לקבל את מזהה המודל, לוחצים על כרטיס המודל ב-Agent Platform Model Garden ואז מעתיקים את מזהה המודל מהשדה Model ID. כדי לקבל את גרסת ברירת המחדל של המודל, מעתיקים אותה מהשדה Version בכרטיס המודל. כדי לראות גרסאות אחרות של המודל שאפשר להשתמש בהן, לוחצים על Deploy model ואז על השדה Resource ID. -
HUGGING_FACE_TOKEN: ערךSTRINGשמציין את טוקן הגישה של המשתמש ב-Hugging Face שבו רוצים להשתמש. אפשר לציין ערך לאפשרות הזו רק אם מציינים גם ערך לאפשרותHUGGING_FACE_MODEL_ID.האסימון חייב להיות לפחות עם התפקיד
read, אבל אפשר גם להשתמש באסימונים עם היקף רחב יותר. האפשרות הזו נדרשת כשהמודל שזוהה על ידי הערךHUGGING_FACE_MODEL_IDהוא מודל פרטי או מודל עם גישה מוגבלת (gated) של Hugging Face.בחלק מהמודלים המוגבלים, צריך לאשר באופן מפורש את התנאים וההגבלות כדי לקבל גישה. כדי לאשר את התנאים האלה, צריך לפעול לפי השלבים הבאים:
- עוברים לדף של המודל באתר Hugging Face.
- מוצאים את התנאים וההגבלות של המודל וקוראים אותם. בדרך כלל, קישור להסכם השירות מופיע בכרטיס המודל.
- מאשרים את התנאים שמופיעים בדף.
-
MACHINE_TYPE: ערךSTRINGשמציין את סוג המכונה שבה משתמשים כשפורסים את המודל ב-Agent Platform. למידע על סוגי המכונות הנתמכים, קראו את המאמר סוגי מכונות. אם לא מציינים ערך לאפשרותMACHINE_TYPE, המערכת משתמשת בסוג המכונה שמוגדר כברירת מחדל למודל ב-Agent Platform Model Garden. -
MIN_REPLICA_COUNT: ערךINT64שמציין את המספר המינימלי של רפליקות של מכונות שבהן נעשה שימוש כשפורסים את המודל בנקודת קצה (endpoint) של Agent Platform. השירות מגדיל או מקטין את מספר הרפליקות לפי הצורך, בהתאם לעומס ההסקה בנקודת הקצה. מספר הרפליקות שבהן נעשה שימוש אף פעם לא נמוך מהערך שלMIN_REPLICA_COUNTואף פעם לא גבוה מהערך שלMAX_REPLICA_COUNT. הערך שלMIN_REPLICA_COUNTחייב להיות בטווח[1, 4096]. ערך ברירת המחדל הוא1. -
MAX_REPLICA_COUNT: ערךINT64שמציין את המספר המקסימלי של רפליקות של מכונות שבהן נעשה שימוש כשפורסים את המודל בנקודת קצה (endpoint) של Agent Platform. השירות מגדיל או מקטין את מספר הרפליקות לפי הצורך, בהתאם לעומס ההסקה בנקודת הקצה. מספר הרפליקות שבהן נעשה שימוש אף פעם לא נמוך מהערך שלMIN_REPLICA_COUNTואף פעם לא גבוה מהערך שלMAX_REPLICA_COUNT. הערך שלMAX_REPLICA_COUNTחייב להיות בטווח[1, 4096]. ערך ברירת המחדל הוא הערך שלMIN_REPLICA_COUNT. -
RESERVATION_AFFINITY_TYPE: קובע אם המודל שנפרס משתמש בהזמנות של Compute Engine כדי להבטיח את הזמינות של המכונה הווירטואלית (VM) בזמן הצגת החיזויים, ומציין אם המודל משתמש במכונות וירטואליות מכל ההזמנות הזמינות או רק מהזמנה ספציפית אחת. מידע נוסף זמין במאמר הגדרת מאפייני הזמנת מקום ב-Compute Engine.אפשר להשתמש רק בהזמנות של Compute Engine שמשותפות עם Agent Platform. מידע נוסף זמין במאמר אישור לשימוש בהזמנה.
הערכים הנתמכים הם:
-
NO_RESERVATION: לא נעשה שימוש בהזמנה כשפורסים את המודל בנקודת קצה של Agent Platform. הגדרתNO_RESERVATIONזהה לאי-הגדרה של זיקה להזמנה. -
ANY_RESERVATION: פריסת המודל של Agent Platform צורכת מכונות וירטואליות (VM) מהזמנות של Compute Engine שנמצאות בפרויקט הנוכחי או שמשותפות עם הפרויקט, ומוגדרות לצריכה אוטומטית. רק מכונות וירטואליות שעומדות בדרישות הבאות משמשות למשימה:- הם משתמשים בסוג המכונה שצוין בערך
MACHINE_TYPE. - אם מערך הנתונים ב-BigQuery שבו אתם יוצרים את המודל המרוחק נמצא באזור אחד, ההזמנה צריכה להיות באותו אזור. אם מערך הנתונים נמצא באזור
US, ההזמנה חייבת להיות באזורus-central1. אם מערך הנתונים נמצא באזורEU, ההזמנה צריכה להיות באזורeurope-west4.
אם אין מספיק קיבולת בהזמנות הזמינות, או אם לא נמצאו הזמנות מתאימות, המערכת מקצה מכונות וירטואליות של Compute Engine על פי דרישה כדי לעמוד בדרישות המשאבים.
- הם משתמשים בסוג המכונה שצוין בערך
-
SPECIFIC_RESERVATION: פריסת המודל של Agent Platform צורכת מכונות וירטואליות רק מההזמנה שציינתם בערךRESERVATION_AFFINITY_VALUES. צריך להגדיר את הבקשה לשימוש ספציפי. הפריסה תיכשל אם אין מספיק קיבולת בהזמנה שצוינה.
-
-
RESERVATION_AFFINITY_KEY: המחרוזתcompute.googleapis.com/reservation-name. צריך לציין את האפשרות הזו כשהערך שלRESERVATION_AFFINITY_TYPEהואSPECIFIC_RESERVATION. -
RESERVATION_AFFINITY_VALUES: ערךARRAY<STRING>שמציין את שם המשאב המלא של ההזמנה ב-Compute Engine, בפורמט הבא:
projects/myproject/zones/reservation_zone/reservations/reservation_nameלדוגמה,
RESERVATION_AFFINITY_values = ['projects/myProject/zones/us-central1-a/reservations/myReservationName'].אפשר לקבל את שם ההזמנה והאזור מהדף Reservations במסוף Google Cloud . מידע נוסף זמין במאמר הצגת הזמנות.
צריך לציין את האפשרות הזו כשהערך של
RESERVATION_AFFINITY_TYPEהואSPECIFIC_RESERVATION. -
ENDPOINT_IDLE_TTL: ערך מסוגINTERVALשמציין את משך הזמן של חוסר הפעילות שאחריו המודל הפתוח יוסר באופן אוטומטי מנקודת הקצה של Agent Platform.כדי להפעיל ביטול פריסה אוטומטי, מציינים ערך של ליטרל מרווח בין 390 דקות (6.5 שעות) ל-7 ימים. לדוגמה, אם מציינים
INTERVAL 8 HOUR, פריסת המודל תבוטל אחרי 8 שעות של חוסר פעילות. ערך ברירת המחדל הוא 390 דקות (6.5 שעות).חוסר פעילות של מודל מוגדר כמשך הזמן שחלף מאז שבוצעה אחת מהפעולות הבאות במודל:
- מריצים את ההצהרה
CREATE MODEL. - הרצת ההצהרה
ALTER MODELכשהארגומנטDEPLOY_MODELמוגדר כ-TRUE. - שליחת בקשת הסקה לנקודת הקצה של המודל. לדוגמה, על ידי הפעלת הפונקציה
AI.GENERATE_EMBEDDINGאוAI.GENERATE_TEXT.
כל אחת מהפעולות האלה מאפסת את טיימר חוסר הפעילות לאפס. האיפוס מופעל בתחילת המשימה ב-BigQuery שמבצעת את הפעולה.
אחרי ביטול הפריסה של המודל, בקשות להסקת מסקנות שנשלחות למודל מחזירות שגיאה. האובייקט של המודל ב-BigQuery לא משתנה, כולל המטא-נתונים של המודל. כדי להשתמש שוב במודל להסקת מסקנות, צריך לפרוס אותו מחדש על ידי הפעלת ההצהרה
ALTER MODELבמודל והגדרת האפשרותDEPLOY_MODELל-TRUE. - מריצים את ההצהרה
מודלים פתוחים שנפרסו
נכנסים לדף BigQuery במסוף Google Cloud .
יוצרים מודל מרוחק באמצעות עורך ה-SQL:
CREATE OR REPLACE MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME` REMOTE WITH CONNECTION {DEFAULT | `PROJECT_ID.REGION.CONNECTION_ID`} OPTIONS ( ENDPOINT = 'https://ENDPOINT_REGION-aiplatform.googleapis.com/v1/projects/ENDPOINT_PROJECT_ID/locations/ENDPOINT_REGION/endpoints/ENDPOINT_ID' );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שתכיל את המודל. מערך הנתונים הזה צריך להיות באותו מיקום של החיבור שבו אתם משתמשים. -
MODEL_NAME: שם המודל. -
REGION: האזור שבו משתמשים בחיבור. -
CONNECTION_ID: המזהה של החיבור ל-BigQuery.כדי לקבל את הערך הזה, מציגים את פרטי החיבור במסוף Google Cloud ומעתיקים את הערך בקטע האחרון של מזהה החיבור המלא שמוצג ב-Connection ID. לדוגמה,
projects/myproject/locations/connection_location/connections/myconnection. -
ENDPOINT_REGION: האזור שבו נפרס המודל הפתוח. -
ENDPOINT_PROJECT_ID: הפרויקט שבו נפרס המודל הפתוח. -
ENDPOINT_ID: המזהה של נקודת הקצה (endpoint) מסוג HTTPS שמשמשת את המודל הפתוח. כדי לקבל את מזהה נקודת הקצה, מאתרים את המודל הפתוח בדף Online prediction ומעתיקים את הערך בשדה ID.
יצירת טקסט דינמי מבוסס-AI מנתונים בטבלה רגילה
יוצרים טקסט דינמי מבוסס-AI באמצעות הפונקציה AI.GENERATE_TEXT עם נתוני פרומפט מטבלה רגילה:
Gemini
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] [, GROUND_WITH_GOOGLE_SEARCH AS ground_with_google_search] [, SAFETY_SETTINGS AS safety_settings] } | [, MODEL_PARAMS AS model_params] } [, REQUEST_TYPE AS request_type]) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שמכילה את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו חייבת להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה להפיק עמודה בשםprompt.-
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתשובה. הערך הזה חייב להיות בטווח[1,8192]. כדי לקבל תשובות קצרות יותר, מציינים ערך נמוך יותר, וכדי לקבל תשובות ארוכות יותר, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. ערך ברירת המחדל הוא0.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, וערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0בפרמטרtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הגבוהה ביותר. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של הטוקנים שנבחרו. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא0.95. -
STOP_SEQUENCES: ערךARRAY<STRING>שמסיר את המחרוזות שצוינו אם הן נכללות בתשובות מהמודל. המחרוזות מותאמות באופן מדויק, כולל אותיות רישיות. ברירת המחדל היא מערך ריק. GROUND_WITH_GOOGLE_SEARCH: ערךBOOLשקובע אם המודל של Gemini Enterprise Agent Platform משתמש ב[עיגון באמצעות חיפוש Google](/vertex-ai/generative-ai/docs/grounding/overview#ground-public) כשהוא יוצר תשובות. העיגון מאפשר למודל להשתמש במידע נוסף מהאינטרנט כשהוא יוצר תשובה, כדי שהתשובות של המודל יהיו יותר ספציפיות ומבוססות על עובדות. כשהשדה הזה מוגדר לערךTrue, עמודה נוספת שלgrounding_resultנכללת בתוצאות, ומספקת את המקורות שבהם המודל השתמש כדי לאסוף מידע נוסף. ערך ברירת המחדל הואFALSE.-
SAFETY_SETTINGS: ערךARRAY<STRUCT<STRING AS category, STRING AS threshold>>שמגדיר את ערכי הסף לבטיחות התוכן כדי לסנן את התשובות. הרכיב הראשון במבנה מציין קטגוריית פגיעה, והרכיב השני במבנה מציין את סף החסימה המתאים. המודל מסנן תוכן שמפר את ההגדרות האלה. אפשר לציין כל קטגוריה רק פעם אחת. לדוגמה, אי אפשר לציין גם אתSTRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)וגם אתSTRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_ONLY_HIGH' AS threshold). אם אין הגדרת בטיחות לקטגוריה מסוימת, המערכת משתמשת בהגדרת הבטיחות שלBLOCK_MEDIUM_AND_ABOVE. אלה הקטגוריות הנתמכות:HARM_CATEGORY_HATE_SPEECHHARM_CATEGORY_DANGEROUS_CONTENTHARM_CATEGORY_HARASSMENTHARM_CATEGORY_SEXUALLY_EXPLICIT
BLOCK_NONE(מוגבל)BLOCK_LOW_AND_ABOVE-
BLOCK_MEDIUM_AND_ABOVE(ברירת מחדל) BLOCK_ONLY_HIGHHARM_BLOCK_THRESHOLD_UNSPECIFIED
-
REQUEST_TYPE: ערךSTRINGשמציין את סוג בקשת ההסקה שתישלח למודל Gemini. סוג הבקשה קובע איזו מכסה תנוצל. הערכים התקינים הם:-
DEDICATED: הפונקציהAI.GENERATE_TEXTמשתמשת רק במכסה של הקצאת משאבים לפי התפוקה שנקבעה. הפונקציהAI.GENERATE_TEXTמחזירה את השגיאהProvisioned throughput is not purchased or is not activeאם אין מכסה זמינה להקצאת משאבים לפי התפוקה שנקבעה. -
SHARED: הפונקציהAI.GENERATE_TEXTמשתמשת רק במכסה דינמית משותפת (DSQ), גם אם רכשתם מכסה של הקצאת משאבים לפי התפוקה שנקבעה. -
UNSPECIFIED: הפונקציהAI.GENERATE_TEXTמשתמשת במכסה באופן הבא:- אם לא רכשתם מכסה של הקצאת משאבים לפי התפוקה שנקבעה, הפונקציה
AI.GENERATE_TEXTמשתמשת במכסת DSQ. - אם רכשתם מכסה של הקצאת משאבים לפי התפוקה שנקבעה, הפונקציה
AI.GENERATE_TEXTמשתמשת קודם במכסה הזו. אם מספר הבקשות חורג מהמכסה של "הקצאת משאבים לפי התפוקה שנקבעה", התנועה העודפת משתמשת במכסת ה-DSQ.
- אם לא רכשתם מכסה של הקצאת משאבים לפי התפוקה שנקבעה, הפונקציה
ערך ברירת המחדל הוא
UNSPECIFIED.מידע נוסף זמין במאמר שימוש בהקצאת משאבים לפי התפוקה שנקבעה ב-Agent Platform.
-
-
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשה שלgenerateContent. אפשר לציין ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט המבנה ברמה העליונה של הפונקציהAI.GENERATE_TEXT. צריך לציין את כל הפרמטרים של המודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיה ליצירת סיכום של הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשת בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות של הנחיות עם עמודות בטבלה.
- החזרת תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- ההנחיה משתמשת בעמודה
promptבטבלהprompts.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
דוגמה 4
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- ההנחיה משתמשת בעמודה
promptבטבלהprompts. - החזרת תשובה קצרה.
- מאחזר ומחזיר נתונים גלויים לכולם מהאינטרנט כדי לבסס את התשובות.
- מסנן תשובות לא בטוחות באמצעות שתי הגדרות בטיחות.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts, STRUCT( 100 AS max_output_tokens, 0.5 AS top_p, TRUE AS ground_with_google_search, [STRUCT('HARM_CATEGORY_HATE_SPEECH' AS category, 'BLOCK_LOW_AND_ABOVE' AS threshold), STRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)] AS safety_settings));
דוגמה 5
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- ההנחיה משתמשת בעמודה
promptבטבלהprompts. - תשובה ארוכה יותר.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.flash_2_model`, TABLE mydataset.prompts, STRUCT( 0.4 AS temperature, 8192 AS max_output_tokens));
דוגמה 6
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיה ליצירת סיכום של הטקסט בעמודה
bodyבטבלהarticles. - מאחזר ומחזיר נתונים גלויים לכולם מהאינטרנט כדי לבסס את התשובות.
- מסנן תשובות לא בטוחות באמצעות שתי הגדרות בטיחות.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ), STRUCT( .1 AS TEMPERATURE, TRUE AS ground_with_google_search, [STRUCT('HARM_CATEGORY_HATE_SPEECH' AS category, 'BLOCK_LOW_AND_ABOVE' AS threshold), STRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)] AS safety_settings));
Claude
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_K AS top_k] [, TOP_P AS top_p] } | [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שמכילה את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו חייבת להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה להפיק עמודה בשםprompt.-
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתשובה. הערך הזה חייב להיות בטווח[1,4096]. כדי לקבל תשובות קצרות יותר, מציינים ערך נמוך יותר, וכדי לקבל תשובות ארוכות יותר, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TOP_K: ערךINT64בטווח[1,40]שקובע את מאגר האסימונים הראשוני שהמודל שוקל לבחור. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. אם לא תציינו ערך, המודל יקבע ערך מתאים. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של הטוקנים שנבחרו. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. אם לא תציינו ערך, המודל יקבע ערך מתאים. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשה שלgenerateContent. אפשר לציין ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט המבנה ברמה העליונה של הפונקציהAI.GENERATE_TEXT. צריך לציין את כל הפרמטרים של המודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיה ליצירת סיכום של הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשת בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות של הנחיות עם עמודות בטבלה.
- החזרת תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- ההנחיה משתמשת בעמודה
promptבטבלהprompts.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
Llama
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] | } [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שמכילה את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו חייבת להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה להפיק עמודה בשםprompt.-
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתשובה. הערך הזה חייב להיות בטווח[1,4096]. כדי לקבל תשובות קצרות יותר, מציינים ערך נמוך יותר, וכדי לקבל תשובות ארוכות יותר, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. ערך ברירת המחדל הוא0.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, וערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0בפרמטרtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הגבוהה ביותר. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של הטוקנים שנבחרו. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא0.95. -
STOP_SEQUENCES: ערךARRAY<STRING>שמסיר את המחרוזות שצוינו אם הן נכללות בתשובות מהמודל. המחרוזות מותאמות באופן מדויק, כולל אותיות רישיות. ברירת המחדל היא מערך ריק. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשה שלgenerateContent. אפשר לציין ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט המבנה ברמה העליונה של הפונקציהAI.GENERATE_TEXT. צריך לציין את כל הפרמטרים של המודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיה ליצירת סיכום של הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשת בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- החזרת תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- ההנחיה משתמשת בעמודה
promptבטבלהprompts.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
Mistral AI
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] | } [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שמכילה את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו חייבת להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה להפיק עמודה בשםprompt.-
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתשובה. הערך הזה חייב להיות בטווח[1,4096]. כדי לקבל תשובות קצרות יותר, מציינים ערך נמוך יותר, וכדי לקבל תשובות ארוכות יותר, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. ערך ברירת המחדל הוא0.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, וערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0בפרמטרtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הגבוהה ביותר. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של הטוקנים שנבחרו. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא0.95. -
STOP_SEQUENCES: ערךARRAY<STRING>שמסיר את המחרוזות שצוינו אם הן נכללות בתשובות מהמודל. המחרוזות מותאמות באופן מדויק, כולל אותיות רישיות. ברירת המחדל היא מערך ריק. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשה שלgenerateContent. אפשר לציין ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט המבנה ברמה העליונה של הפונקציהAI.GENERATE_TEXT. צריך לציין את כל הפרמטרים של המודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיה ליצירת סיכום של הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשת בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- החזרת תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- ההנחיה משתמשת בעמודה
promptבטבלהprompts.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
מודלים פתוחים
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_K AS top_k] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] } | [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של קבוצת הנתונים שמכילה את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו חייבת להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה להפיק עמודה בשםprompt.-
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתשובה. הערך הזה חייב להיות בטווח[1,4096]. כדי לקבל תשובות קצרות יותר, מציינים ערך נמוך יותר, וכדי לקבל תשובות ארוכות יותר, מציינים ערך גבוה יותר. אם לא תציינו ערך, המודל יקבע ערך מתאים. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. אם לא מציינים ערך, המודל קובע ערך מתאים.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, וערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0בפרמטרtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הגבוהה ביותר. -
TOP_K: ערךINT64בטווח[1,40]שקובע את מאגר האסימונים הראשוני שהמודל שוקל לבחור. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. אם לא תציינו ערך, המודל יקבע ערך מתאים. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של הטוקנים שנבחרו. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. אם לא תציינו ערך, המודל יקבע ערך מתאים. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשה שלgenerateContent. אפשר לציין ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט המבנה ברמה העליונה של הפונקציהAI.GENERATE_TEXT. צריך לציין את כל הפרמטרים של המודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיה ליצירת סיכום של הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשת בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- החזרת תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- ההנחיה משתמשת בעמודה
promptבטבלהprompts.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
יצירת טקסט דינמי מבוסס-AI מנתונים בטבלת אובייקטים
ליצור טקסט דינמי מבוסס-AI באמצעות הפונקציה AI.GENERATE_TEXT עם מודל Gemini כדי לנתח נתונים לא מובְנים מטבלת אובייקטים. אתם מספקים את נתוני ההנחיה בפרמטר prompt.
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET.MODEL`, { TABLE `PROJECT_ID.DATASET.TABLE` | (QUERY_STATEMENT) }, STRUCT( PROMPT AS prompt { { [, MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] [, SAFETY_SETTINGS AS safety_settings] } | [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
-
PROJECT_ID: הפרויקט שמכיל את המשאב. -
DATASET: קבוצת הנתונים שמכילה את המשאב. -
MODEL: שם המודל המרוחק במודל של Gemini Enterprise Agent Platform. מידע נוסף על יצירת מודל מרוחק מהסוג הזה זמין במאמר ההצהרהCREATE MODELלמודלים מרוחקים מעל מודלים מסוג LLM .כדי לבדוק באיזה מודל משתמש המודל המרוחק, פותחים את מסוף Google Cloud ומסתכלים על השדה Remote endpoint בדף הפרטים של המודל.
הערה: שימוש במודל מרוחק שמבוסס על מודל Gemini 2.5 כרוך בחיובים על תהליך החשיבה.
-
TABLE: השם של טבלת האובייקטים שמכילה את התוכן לניתוח. למידע נוסף על סוגי התוכן שאפשר לנתח, ראו קלט.הקטגוריה של Cloud Storage שמשמשת את טבלת אובייקטי הקלט צריכה להיות באותו פרויקט שבו יצרתם את המודל ושבו אתם קוראים לפונקציה
AI.GENERATE_TEXT. -
QUERY_STATEMENT: שאילתת GoogleSQL שיוצרת את נתוני התמונה. אפשר לציין בשאילתה רק את הסעיפיםWHEREו-ORDER BY. -
PROMPT: ערךSTRINGשמכיל את ההנחיה לניתוח התוכן החזותי. הערך שלpromptחייב להכיל פחות מ-16,000 אסימונים. אסימון יכול להיות קטן יותר ממילה, והוא מכיל בערך ארבעה תווים. 100 טוקנים שווים בערך ל-60 עד 80 מילים. -
MAX_OUTPUT_TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתשובה. הערך הזה חייב להיות בטווח[1,8192]. כדי לקבל תשובות קצרות יותר, מציינים ערך נמוך יותר, וכדי לקבל תשובות ארוכות יותר, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא1024. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]שמשנה את האופן שבו המודל בוחר אסימונים לפלט. כדי לקבל תשובות פחות אקראיות, מציינים ערך נמוך יותר. כדי לקבל תשובות יותר אקראיות, מציינים ערך גבוה יותר. ערך ברירת המחדל הוא0.95.הטוקנים נבחרים מהסבירות הגבוהה ביותר לנמוכה ביותר עד שסכום ההסתברויות שלהם שווה לערך של
TOP_P. לדוגמה, אם לאסימונים A, B ו-C יש הסתברות של0.3,0.2ו-0.1, והערך שלTOP_Pהוא0.5, המודל בוחר את A או את B כאסימון הבא באמצעות הערך שלTEMPERATURE, ולא מתייחס ל-C. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. ערכים נמוכים שלTEMPERATUREמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, וערכים גבוהים שלTEMPERATUREיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערךTEMPERATUREשל0הוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הגבוהה ביותר. ערך ברירת המחדל הוא0. -
STOP_SEQUENCES: ערךARRAYשמסיר את המחרוזות שצוינו אם הן נכללות בתשובות מהמודל. המחרוזות מותאמות באופן מדויק, כולל שימוש באותיות רישיות. ערך ברירת המחדל הוא מערך ריק. -
SAFETY_SETTINGS: ערך שלARRAYשמגדיר את ערכי הסף של בטיחות התוכן כדי לסנן את התשובות. הרכיב הראשון במבנה מציין קטגוריית פגיעה, והרכיב השני במבנה מציין את סף החסימה המתאים. המודל מסנן תוכן שמפר את ההגדרות האלה. אפשר לציין כל קטגוריה רק פעם אחת. לדוגמה, אי אפשר לציין גם את> STRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)וגם אתSTRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_ONLY_HIGH' AS threshold). אם לא הוגדרה רמת בטיחות לקטגוריה מסוימת, המערכת תשתמש בהגדרת הבטיחותBLOCK_MEDIUM_AND_ABOVE.אלה הקטגוריות הנתמכות:
HARM_CATEGORY_HATE_SPEECHHARM_CATEGORY_DANGEROUS_CONTENTHARM_CATEGORY_HARASSMENTHARM_CATEGORY_SEXUALLY_EXPLICIT
אלה ערכי הסף הנתמכים:
BLOCK_NONE( מוגבל )BLOCK_LOW_AND_ABOVE-
BLOCK_MEDIUM_AND_ABOVE(ברירת מחדל) BLOCK_ONLY_HIGHHARM_BLOCK_THRESHOLD_UNSPECIFIED
מידע נוסף זמין בהגדרה של קטגוריית בטיחות ושל סף חסימה .
-
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים נוספים למודל. הערך צריך להיות בפורמט של גוף הבקשהgenerateContent. אפשר לציין ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודלים בארגומנט המבנה ברמה העליונה של הפונקציהAI.GENERATE_TEXT.
הצגת פרמטרים אופציונליים נוספים
דוגמאות
בדוגמה הזו מתורגם ומתומלל תוכן אודיו מטבלת אובייקטים בשם feedback:
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.audio_model`, TABLE `mydataset.feedback`, STRUCT('What is the content of this audio clip, translated into Spanish?' AS PROMPT));
בדוגמה הזו מסווגים תוכן PDF מטבלת אובייקטים בשם invoices:
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.classify_model`, TABLE `mydataset.invoices`, STRUCT('Classify this document based on the invoice total, using the following categories: 0 to 100, 101 to 200, greater than 200' AS PROMPT));