יצירת טקסט באמצעות הפונקציה AI.GENERATE_TEXT
במאמר הזה מוסבר איך ליצור מודל מרוחק ב-BigQuery ML שמייצג מודל של Gemini Enterprise Agent Platform, ואז להשתמש במודל המרוחק הזה עם הפונקציה AI.GENERATE_TEXT כדי ליצור טקסט.
המערכת תומכת בסוגים הבאים של מודלים מרוחקים:
- מודלים מרוחקים בכל אחד מהמודלים של Gemini שזמינים לכלל המשתמשים או בגרסת טרום-השקה.
- מודלים מרוחקים במקום מודלים של Anthropic Claude.
- מודלים מרחוק במקום מודלים של Llama
- מודלים מרחוק במקום מודלים של Mistral AI
- מודלים מרוחקים באמצעות מודלים נתמכים של קוד פתוח.
בהתאם למודל של Agent Platform שתבחרו, תוכלו ליצור טקסט על סמך קלט של נתונים לא מובנים מטבלאות אובייקטים או קלט של טקסט מטבלאות רגילות.
התפקידים הנדרשים
כדי ליצור מודל מרוחק וליצור טקסט, אתם צריכים את התפקידים הבאים בניהול הזהויות והרשאות הגישה (IAM):
- יצירה ושימוש במערכי נתונים, בטבלאות ובמודלים של BigQuery:
BigQuery Data Editor (
roles/bigquery.dataEditor) בפרויקט. יצירה, הקצאה ושימוש בחיבורים ל-BigQuery: BigQuery Connections Admin (
roles/bigquery.connectionsAdmin) בפרויקט.אם לא הגדרתם חיבור ברירת מחדל, תוכלו ליצור חיבור ולהגדיר אותו כחלק מהרצת ההצהרה
CREATE MODEL. כדי לעשות זאת, צריך להיות לכם תפקיד BigQuery Admin (roles/bigquery.admin) בפרויקט. מידע נוסף מופיע במאמר בנושא הגדרת חיבור ברירת המחדל.נותנים הרשאות לחשבון השירות של החיבור: אדמין של IAM בפרויקט (
roles/resourcemanager.projectIamAdmin) בפרויקט שמכיל את נקודת הקצה של Gemini Enterprise Agent Platform. זהו הפרויקט הנוכחי של מודלים מרוחקים שיוצרים על ידי ציון שם המודל כנקודת קצה. זהו הפרויקט שמזוהה בכתובת ה-URL של מודלים מרוחקים שיוצרים על ידי ציון כתובת URL כנקודת קצה.אם אתם משתמשים במודל מרוחק כדי לנתח נתונים לא מובנים מטבלת אובייקטים, וקטגוריית Cloud Storage שבה אתם משתמשים בטבלת האובייקטים נמצאת בפרויקט אחר מנקודת הקצה של Agent Platform, אתם צריכים גם הרשאת Storage Admin (
roles/storage.admin) בקטגוריית Cloud Storage שבה נעשה שימוש בטבלת האובייקטים.יצירת משימות BigQuery: BigQuery Job User (
roles/bigquery.jobUser) בפרויקט.
התפקידים המוגדרים מראש האלה מכילים את ההרשאות שנדרשות לביצוע המשימות שמתוארות במסמך הזה. כדי לראות את ההרשאות הנדרשות, מרחיבים את הקטע ההרשאות הנדרשות:
ההרשאות הנדרשות
- יצירת מערך נתונים:
bigquery.datasets.create - יצירה, הקצאה ושימוש בחיבור:
bigquery.connections.* - מגדירים את ההרשאות לחשבון השירות:
resourcemanager.projects.getIamPolicyו-resourcemanager.projects.setIamPolicy - יצירת מודל והרצת הסקה:
bigquery.jobs.createbigquery.models.createbigquery.models.getDatabigquery.models.updateDatabigquery.models.updateMetadata
יכול להיות שתוכלו לקבל את ההרשאות האלה גם באמצעות תפקידים בהתאמה אישית או תפקידים מוגדרים מראש אחרים.
לפני שמתחילים
-
בדף לבחירת הפרויקט במסוף Google Cloud , בוחרים פרויקט ב- Google Cloud או יוצרים אותו.
תפקידים שנדרשים כדי לבחור או ליצור פרויקט
- Select a project: כדי לבחור פרויקט לא צריך תפקיד IAM ספציפי – אפשר לבחור כל פרויקט שקיבלתם בו תפקיד.
-
יצירת פרויקט: כדי ליצור פרויקט, צריך את התפקיד Project Creator (יצירת פרויקטים) (
roles/resourcemanager.projectCreator), שכולל את ההרשאהresourcemanager.projects.create. איך מקצים תפקידים
-
מפעילים את ממשקי ה-API BigQuery, BigQuery Connection ו-Agent Platform.
תפקידים שנדרשים להפעלת ממשקי API
כדי להפעיל ממשקי API, צריך את תפקיד ה-IAM 'אדמין של Service Usage' (
roles/serviceusage.serviceUsageAdmin), שכולל את ההרשאהserviceusage.services.enable. איך מקצים תפקידים
יצירת מערך נתונים
יוצרים מערך נתונים ב-BigQuery שיכיל את המשאבים:
המסוף
במסוף Google Cloud , עוברים לדף BigQuery.
בחלונית הימנית, לוחצים על כלי הניתוחים:

אם החלונית הימנית לא מוצגת, לוחצים על הרחבת החלונית הימנית כדי לפתוח אותה.
בחלונית Explorer, לוחצים על שם הפרויקט.
לוחצים על הצגת פעולות > יצירת מערך נתונים.
בדף Create dataset, מבצעים את הפעולות הבאות:
בשדה Dataset ID (מזהה מערך נתונים), מקלידים שם למערך הנתונים.
בקטע Location type, בוחרים באפשרות Region או Multi-region.
- אם בחרתם באפשרות אזור, בוחרים מיקום מהרשימה אזור.
- אם בחרתם באפשרות Multi-region, בוחרים באפשרות US או Europe מהרשימה Multi-region.
לוחצים על יצירת מערך נתונים.
BQ
יצירת חיבור
יוצרים קישור למשאבים ב-Cloud כדי שהמודל המרוחק יוכל להשתמש בו, ומקבלים את חשבון השירות של הקישור. יוצרים את החיבור באותו מיקום של קבוצת הנתונים שיצרתם בשלב הקודם.
אם כבר הגדרתם חיבור ברירת מחדל או שיש לכם את תפקיד האדמין ב-BigQuery, אתם יכולים לדלג על השלב הזה.
בוחרים באחת מהאפשרויות הבאות:המסוף
עוברים לדף BigQuery.
בחלונית הימנית, לוחצים על כלי הניתוחים:

אם החלונית הימנית לא מוצגת, לוחצים על הרחבת החלונית הימנית כדי לפתוח אותה.
בחלונית Explorer מרחיבים את שם הפרויקט ואז לוחצים על Connections.
בדף Connections (חיבורים), לוחצים על Create connection (יצירת חיבור).
בשדה Connection type (סוג החיבור), בוחרים באפשרות Vertex AI remote models, remote functions, BigLake and Spanner (Cloud Resource) (מודלים מרוחקים של Vertex AI, פונקציות מרוחקות, BigLake ו-Spanner (משאב בענן)).
בשדה מזהה החיבור, מזינים שם לחיבור.
בקטע Location type, בוחרים מיקום לחיבור. החיבור צריך להיות ממוקם יחד עם משאבים אחרים, כמו מערכי נתונים.
לוחצים על יצירת קישור.
לוחצים על מעבר לחיבור.
בחלונית Connection info (פרטי התחברות), מעתיקים את מזהה חשבון השירות לשימוש בשלב מאוחר יותר.
SQL
משתמשים בהצהרה CREATE CONNECTION:
במסוף Google Cloud , עוברים לדף BigQuery.
מזינים את ההצהרה הבאה בעורך השאילתות:
CREATE CONNECTION [IF NOT EXISTS] `CONNECTION_NAME` OPTIONS ( connection_type = "CLOUD_RESOURCE", friendly_name = "FRIENDLY_NAME", description = "DESCRIPTION" );
מחליפים את מה שכתוב בשדות הבאים:
-
CONNECTION_NAME: השם של החיבור בפורמטPROJECT_ID.LOCATION.CONNECTION_ID,LOCATION.CONNECTION_IDאוCONNECTION_ID. אם לא מציינים את הפרויקט או המיקום, המערכת מסיקה אותם מהפרויקט והמיקום שבהם מופעלת ההצהרה. -
FRIENDLY_NAME(אופציונלי): שם תיאורי לחיבור. -
DESCRIPTION(אופציונלי): תיאור של הקישור.
-
לוחצים על הפעלה.
מידע נוסף על הרצת שאילתות זמין במאמר הרצת שאילתה אינטראקטיבית.
BQ
בסביבת שורת פקודה, יוצרים חיבור:
bq mk --connection --location=REGION --project_id=PROJECT_ID \ --connection_type=CLOUD_RESOURCE CONNECTION_ID
הפרמטר
--project_idמבטל את פרויקט ברירת המחדל.מחליפים את מה שכתוב בשדות הבאים:
REGION: אזור החיבור-
PROJECT_ID: מזהה הפרויקט ב- Google Cloud -
CONNECTION_ID: מזהה לחיבור
כשיוצרים משאב חיבור, מערכת BigQuery יוצרת חשבון שירות ייחודי ומקשרת אותו לחיבור.
פתרון בעיות: אם מופיעה שגיאת החיבור הבאה, צריך לעדכן את Google Cloud SDK:
Flags parsing error: flag --connection_type=CLOUD_RESOURCE: value should be one of...
מאחזרים ומעתיקים את מזהה חשבון השירות כדי להשתמש בו בשלב מאוחר יותר:
bq show --connection PROJECT_ID.REGION.CONNECTION_ID
הפלט אמור להיראות כך:
name properties 1234.REGION.CONNECTION_ID {"serviceAccountId": "connection-1234-9u56h9@gcp-sa-bigquery-condel.iam.gserviceaccount.com"}
Python
לפני שמנסים את הדוגמה הזו, צריך לפעול לפי Pythonהוראות ההגדרה שבמדריך למתחילים של BigQuery באמצעות ספריות לקוח. מידע נוסף מופיע במאמרי העזרה של BigQuery Python API.
כדי לבצע אימות ב-BigQuery, צריך להגדיר את Application Default Credentials. מידע נוסף זמין במאמר הגדרת אימות לספריות לקוח.
Node.js
לפני שמנסים את הדוגמה הזו, צריך לפעול לפי Node.jsהוראות ההגדרה שבמדריך למתחילים של BigQuery באמצעות ספריות לקוח. מידע נוסף מופיע במאמרי העזרה של BigQuery Node.js API.
כדי לבצע אימות ב-BigQuery, צריך להגדיר את Application Default Credentials. מידע נוסף זמין במאמר הגדרת אימות לספריות לקוח.
Terraform
משתמשים במשאב google_bigquery_connection.
כדי לבצע אימות ב-BigQuery, צריך להגדיר את Application Default Credentials. מידע נוסף זמין במאמר הגדרת אימות לספריות לקוח.
בדוגמה הבאה נוצר קישור למשאבים ב-Cloud בשם my_cloud_resource_connection באזור US:
כדי להחיל את הגדרות Terraform בפרויקט ב- Google Cloud , מבצעים את השלבים בקטעים הבאים.
הכנת Cloud Shell
- מפעילים את Cloud Shell.
-
מגדירים את פרויקט ברירת המחדל שבו רוצים להחיל את ההגדרות של Terraform. Google Cloud
תצטרכו להריץ את הפקודה הזו רק פעם אחת לכל פרויקט, ותוכלו לעשות זאת בכל ספרייה.
export GOOGLE_CLOUD_PROJECT=PROJECT_ID
אם תגדירו ערכים ספציפיים בקובץ התצורה של Terraform, הם יבטלו את ערכי ברירת המחדל של משתני הסביבה.
הכנת הספרייה
לכל קובץ תצורה של Terraform צריכה להיות ספרייה משלו (שנקראת גם מודול ברמה הבסיסית).
-
יוצרים ספרייה חדשה ב-Cloud Shell ובה יוצרים קובץ חדש. שם הקובץ חייב לכלול את הסיומת
.tf, למשלmain.tf. במדריך הזה, הקובץ נקראmain.tf.mkdir DIRECTORY && cd DIRECTORY && touch main.tf
-
אם אתם עוקבים אחרי המדריך, תוכלו להעתיק את הקוד לדוגמה בכל קטע או שלב.
מעתיקים את הקוד לדוגמה בקובץ
main.tfהחדש שיצרתם.לחלופין, אפשר גם להעתיק את הקוד מ-GitHub. כדאי לעשות את זה כשקטע הקוד של Terraform הוא חלק מפתרון מקצה לקצה.
- בודקים את הפרמטרים לדוגמה ומשנים אותם בהתאם לסביבה שלכם.
- שומרים את השינויים.
-
מפעילים את Terraform. צריך לעשות זאת רק פעם אחת לכל ספרייה.
terraform init
אופציונלי: תוכלו לכלול את האפשרות
-upgrade, כדי להשתמש בגרסה העדכנית ביותר של הספק של Google:terraform init -upgrade
החלה של השינויים
-
בודקים את ההגדרות ומוודאים שהמשאבים שמערכת Terraform תיצור או תעדכן תואמים לציפיות שלכם:
terraform plan
מתקנים את ההגדרות לפי הצורך.
-
מריצים את הפקודה הבאה ומזינים
yesבהודעה שמופיעה, כדי להחיל את הגדרות Terraform:terraform apply
ממתינים עד שב-Terraform תוצג ההודעה "Apply complete!".
- פותחים את Google Cloud הפרויקט כדי לראות את התוצאות. במסוף Google Cloud , נכנסים למשאבים בממשק המשתמש כדי לוודא שהם נוצרו או עודכנו ב-Terraform.
הקצאת תפקיד לחשבון השירות של חיבור המודל המרוחק
צריך להקצות את התפקיד Agent Platform User לחשבון השירות של החיבור שבו משתמש המודל המרוחק.
אם אתם מתכננים לציין את נקודת הקצה של המודל המרוחק ככתובת URL, לדוגמה endpoint = 'https://us-central1-aiplatform.googleapis.com/v1/projects/myproject/locations/us-central1/publishers/google/models/gemini-2.0-flash', צריך להקצות את התפקיד הזה באותו פרויקט שציינתם בכתובת ה-URL.
אם אתם מתכננים לציין את נקודת הקצה של המודל המרוחק באמצעות שם המודל, לדוגמה endpoint = 'gemini-2.0-flash', צריך להקצות את התפקיד הזה באותו פרויקט שבו אתם מתכננים ליצור את המודל המרוחק.
הקצאת התפקיד בפרויקט אחר מובילה לשגיאה bqcx-1234567890-wxyz@gcp-sa-bigquery-condel.iam.gserviceaccount.com does not have the permission to access resource.
כדי להעניק את התפקיד 'משתמש בפלטפורמת הסוכנים':
המסוף
עוברים לדף IAM & Admin.
לוחצים על הוספה.
תיבת הדו-שיח Add principals נפתחת.
בשדה New principals, מזינים את מזהה חשבון השירות שהעתקתם קודם.
בשדה Select a role, בוחרים באפשרות Vertex AI ואז באפשרות Agent Platform User.
לוחצים על Save.
gcloud
משתמשים בפקודה gcloud projects add-iam-policy-binding.
gcloud projects add-iam-policy-binding 'PROJECT_NUMBER' --member='serviceAccount:MEMBER' --role='roles/aiplatform.user' --condition=None
מחליפים את מה שכתוב בשדות הבאים:
-
PROJECT_NUMBER: מספר הפרויקט -
MEMBER: המזהה של חשבון השירות שהעתקתם קודם
הקצאת תפקיד לחשבון השירות של החיבור לטבלת האובייקטים
אם אתם משתמשים במודל מרוחק כדי ליצור טקסט מנתונים של טבלת אובייקטים, אתם צריכים להעניק לחשבון השירות של החיבור לטבלת האובייקטים את התפקיד Agent Platform User (משתמש בפלטפורמת סוכנים) באותו פרויקט שבו אתם מתכננים ליצור את המודל המרוחק. אם לא, אפשר לדלג על השלב הזה.
כדי למצוא את חשבון השירות של חיבור טבלת האובייקטים:
עוברים לדף BigQuery.
בחלונית הימנית, לוחצים על כלי הניתוחים:

אם החלונית הימנית לא מוצגת, לוחצים על הרחבת החלונית הימנית כדי לפתוח אותה.
בחלונית Explorer, לוחצים על Datasets (מערכי נתונים) ואז בוחרים מערך נתונים שמכיל את טבלת האובייקטים.
לוחצים על סקירה כללית > טבלאות ובוחרים את טבלת האובייקטים.
בחלונית העריכה, לוחצים על הכרטיסייה פרטים.
רושמים את שם החיבור בשדה מזהה החיבור.
בחלונית Explorer (סייר), לוחצים על Connections (חיבורים).
בוחרים את החיבור שתואם לחיבור שמופיע בשדה מזהה החיבור בטבלת האובייקטים.
מעתיקים את הערך בשדה מזהה חשבון שירות.
כדי להקצות את התפקיד:
המסוף
עוברים לדף IAM & Admin.
לוחצים על הוספה.
תיבת הדו-שיח Add principals נפתחת.
בשדה New principals, מזינים את מזהה חשבון השירות שהעתקתם קודם.
בשדה Select a role, בוחרים באפשרות Vertex AI ואז באפשרות Agent Platform User.
לוחצים על Save.
gcloud
משתמשים בפקודה gcloud projects add-iam-policy-binding.
gcloud projects add-iam-policy-binding 'PROJECT_NUMBER' --member='serviceAccount:MEMBER' --role='roles/aiplatform.user' --condition=None
מחליפים את מה שכתוב בשדות הבאים:
-
PROJECT_NUMBER: מספר הפרויקט -
MEMBER: המזהה של חשבון השירות שהעתקתם קודם
הפעלת מודל של שותף
השלב הזה נדרש רק אם רוצים להשתמש במודלים של Anthropic Claude, Llama או Mistral AI.
נכנסים לדף Model Garden של Agent Platform במסוף Google Cloud .
מחפשים את מודל השותף שרוצים להשתמש בו.
לוחצים על כרטיס המודל.
בדף המודל, לוחצים על הפעלה.
ממלאים את הפרטים שנדרשים להפעלה ולוחצים על הבא.
בקטע תנאים והגבלות, מסמנים את תיבת הסימון.
לוחצים על Agree (אישור) כדי לאשר את התנאים וההגבלות ולהפעיל את המודל.
בחירת שיטת פריסה של מודל פתוח
אם יוצרים מודל מרוחק על בסיס מודל פתוח נתמך, אפשר לפרוס את המודל הפתוח באופן אוטומטי בזמן שיוצרים את המודל המרוחק. לשם כך, צריך לציין את מזהה המודל של Agent Platform Model Garden או Hugging Face בהצהרת CREATE MODEL. לחלופין, אפשר לפרוס את המודל הפתוח באופן ידני קודם, ואז להשתמש במודל הפתוח הזה עם המודל המרוחק על ידי ציון נקודת הקצה של המודל בהצהרת CREATE MODEL. מידע נוסף זמין במאמר פריסת מודלים פתוחים.
יצירת מודל מרוחק של BigQuery ML
יצירת מודל מרחוק:
מודלים של Agent Platform
במסוף Google Cloud , עוברים לדף BigQuery.
באמצעות עורך ה-SQL, יוצרים מודל מרוחק:
CREATE OR REPLACE MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME` REMOTE WITH CONNECTION {DEFAULT | `PROJECT_ID.REGION.CONNECTION_ID`} OPTIONS (ENDPOINT = 'ENDPOINT');
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שאמור להכיל את המודל. מערך הנתונים הזה צריך להיות באותו מיקום כמו החיבור שבו אתם משתמשים. -
MODEL_NAME: שם המודל. -
REGION: האזור שבו נעשה שימוש בחיבור. -
CONNECTION_ID: המזהה של החיבור ל-BigQuery.אפשר לקבל את הערך הזה על ידי צפייה בפרטי החיבור במסוף Google Cloud והעתקת הערך בקטע האחרון של מזהה החיבור המלא שמוצג במזהה החיבור. לדוגמה,
projects/myproject/locations/connection_location/connections/myconnection. -
ENDPOINT: נקודת הקצה של מודל Agent Platform שרוצים להשתמש בו.עבור מודלים של Agent Platform שאומנו מראש, מודלים של Claude ומודלים של Mistral AI, מציינים את שם המודל. עבור חלק מהמודלים האלה, אפשר לציין גרסה מסוימת של המודל כחלק מהשם. עבור מודלים נתמכים של Gemini, אפשר לציין את נקודת הקצה הגלובלית כדי לשפר את הזמינות.
עבור מודלים של Llama, מציינים נקודת קצה (endpoint) של OpenAI API בפורמט
openapi/<publisher_name>/<model_name>. לדוגמה,openapi/meta/llama-3.1-405b-instruct-maas.מידע על שמות וגרסאות של מודלים נתמכים זמין במאמר
ENDPOINT.המודל של פלטפורמת הסוכנים שאתם מציינים צריך להיות זמין במיקום שבו אתם יוצרים את המודל המרוחק. מידע נוסף זמין במאמר בנושא מיקומים.
מודלים פתוחים חדשים
במסוף Google Cloud , עוברים לדף BigQuery.
באמצעות עורך ה-SQL, יוצרים מודל מרוחק:
CREATE OR REPLACE MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME` REMOTE WITH CONNECTION {DEFAULT | `PROJECT_ID.REGION.CONNECTION_ID`} OPTIONS ( {HUGGING_FACE_MODEL_ID = 'HUGGING_FACE_MODEL_ID' | MODEL_GARDEN_MODEL_NAME = 'MODEL_GARDEN_MODEL_NAME'} [, HUGGING_FACE_TOKEN = 'HUGGING_FACE_TOKEN' ] [, MACHINE_TYPE = 'MACHINE_TYPE' ] [, MIN_REPLICA_COUNT = MIN_REPLICA_COUNT ] [, MAX_REPLICA_COUNT = MAX_REPLICA_COUNT ] [, RESERVATION_AFFINITY_TYPE = {'NO_RESERVATION' | 'ANY_RESERVATION' | 'SPECIFIC_RESERVATION'} ] [, RESERVATION_AFFINITY_KEY = 'compute.googleapis.com/reservation-name' ] [, RESERVATION_AFFINITY_VALUES = RESERVATION_AFFINITY_VALUES ] [, ENDPOINT_IDLE_TTL = ENDPOINT_IDLE_TTL ] );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שאמור להכיל את המודל. מערך הנתונים הזה צריך להיות באותו מיקום כמו החיבור שבו אתם משתמשים. -
MODEL_NAME: שם המודל. -
REGION: האזור שבו נעשה שימוש בחיבור. -
CONNECTION_ID: המזהה של החיבור ל-BigQuery.אפשר לקבל את הערך הזה על ידי צפייה בפרטי החיבור במסוף Google Cloud והעתקת הערך בקטע האחרון של מזהה החיבור המלא שמוצג במזהה החיבור. לדוגמה,
projects/myproject/locations/connection_location/connections/myconnection. -
HUGGING_FACE_MODEL_ID: ערךSTRINGשמציין את מזהה המודל של מודל נתמך של Hugging Face, בפורמטprovider_name/model_name. לדוגמה,deepseek-ai/DeepSeek-R1. כדי לקבל את מזהה המודל, לוחצים על שם המודל ב-Hugging Face Model Hub ומעתיקים את מזהה המודל מחלקו העליון של כרטיס המודל. -
MODEL_GARDEN_MODEL_NAME: ערךSTRINGשמציין את מזהה המודל ואת גרסת המודל של מודל נתמך ב-Model Garden של Gemini Enterprise Agent Platform, בפורמטpublishers/publisher/models/model_name@model_version. לדוגמה,publishers/openai/models/gpt-oss@gpt-oss-120b. כדי לקבל את מזהה המודל, לוחצים על כרטיס המודל ב-Model Garden של Agent Platform ואז מעתיקים את מזהה המודל מהשדה מזהה המודל. אפשר להעתיק את גרסת ברירת המחדל של המודל מהשדה Version בכרטיס המודל. כדי לראות גרסאות אחרות של המודל שאפשר להשתמש בהן, לוחצים על Deploy model (פריסת המודל) ואז על השדה Resource ID (מזהה המשאב). -
HUGGING_FACE_TOKEN: ערךSTRINGשמציין את User Access Token של Hugging Face שבו רוצים להשתמש. אפשר לציין ערך לאפשרות הזו רק אם מציינים ערך גם לאפשרותHUGGING_FACE_MODEL_ID.ל-token צריך להיות לפחות התפקיד
read, אבל אפשר להשתמש גם ב-tokens עם היקף רחב יותר. האפשרות הזו נדרשת אם המודל שמזוהה לפי הערךHUGGING_FACE_MODEL_IDהוא מודל מוגבל או פרטי של Hugging Face.כדי לקבל גישה למודלים מסוימים שמוגבלת אליהם הגישה, צריך לאשר במפורש את התנאים וההגבלות שלהם. כדי לאשר את התנאים האלה, פועלים לפי השלבים הבאים:
- עוברים לדף של המודל באתר Hugging Face.
- מאתרים את התנאים וההגבלות של המודל וקוראים אותם. בדרך כלל אפשר למצוא קישור להסכם השירות בכרטיס המודל.
- מאשרים את התנאים בהתאם להנחיות בדף.
-
MACHINE_TYPE: ערךSTRINGשמציין את סוג המכונה שבה יש להשתמש כשפורסים את המודל ב-Agent Platform. מידע על סוגי מכונות נתמכים זמין במאמר סוגי מכונות. אם לא מציינים ערך לאפשרותMACHINE_TYPE, נעשה שימוש בסוג המכונה שמוגדר כברירת מחדל ב-Agent Platform Model Garden עבור המודל. -
MIN_REPLICA_COUNT: ערךINT64שמציין את מספר הרפליקות המינימלי של המכונה שמשמשים לפריסת המודל בנקודת קצה של Agent Platform. השירות מגדיל או מקטין את מספר העותקים בהתאם לעומס ההסקה בנקודת הקצה. מספר העותקים שנעשה בהם שימוש אף פעם לא נמוך מהערךMIN_REPLICA_COUNTואף פעם לא גבוה מהערךMAX_REPLICA_COUNT. הערך שלMIN_REPLICA_COUNTצריך להיות בטווח[1, 4096]. ערך ברירת המחדל הוא1. -
MAX_REPLICA_COUNT: ערךINT64שמציין את המספר המקסימלי של רפליקות של מכונות שמשמשים לפריסת המודל בנקודת קצה של Agent Platform. השירות מגדיל או מקטין את מספר העותקים בהתאם לעומס ההסקה בנקודת הקצה. מספר העותקים שנעשה בהם שימוש אף פעם לא נמוך מהערךMIN_REPLICA_COUNTואף פעם לא גבוה מהערךMAX_REPLICA_COUNT. הערך שלMAX_REPLICA_COUNTצריך להיות בטווח[1, 4096]. ערך ברירת המחדל הוא הערךMIN_REPLICA_COUNT. -
RESERVATION_AFFINITY_TYPE: קובע אם המודל שנפרס משתמש בשמירת מקום ב-Compute Engine כדי לספק זמינות מובטחת של מכונה וירטואלית (VM) כשמוצגות תחזיות, ומציין אם המודל משתמש במכונות וירטואליות מכל השמירות הזמינות או רק משמירה ספציפית אחת. מידע נוסף זמין במאמר בנושא שמירת מקום ב-Compute Engine.אפשר להשתמש רק בהזמנות של Compute Engine שמשותפות עם Agent Platform. מידע נוסף זמין במאמר בנושא אישור שימוש בהזמנה.
הערכים הנתמכים הם:
-
NO_RESERVATION: לא מתבצעת צריכה של הזמנה כשפורסים את המודל בנקודת קצה של Agent Platform. ציון הערךNO_RESERVATIONזהה למצב שבו לא מציינים שיוך להזמנה. -
ANY_RESERVATION: פריסת המודל של Agent Platform צורכת מכונות וירטואליות (VM) מהזמנות של Compute Engine שנמצאות בפרויקט הנוכחי או משותפות עם הפרויקט, ושמוגדרות לצריכה אוטומטית. המערכת משתמשת רק במכונות וירטואליות שעומדות בדרישות הבאות:- הם משתמשים בסוג המכונה שצוין בערך
MACHINE_TYPE. - אם מערך הנתונים ב-BigQuery שבו אתם יוצרים את המודל המרוחק נמצא באזור יחיד, ההזמנה צריכה להיות באותו אזור. אם מערך הנתונים נמצא באזור
US, ההזמנה חייבת להיות באזורus-central1. אם מערך הנתונים נמצא במספר אזוריםEU, ההזמנה חייבת להיות באזורeurope-west4.
אם אין מספיק קיבולת בהזמנות הזמינות, או אם לא נמצאו הזמנות מתאימות, המערכת תספק מכונות וירטואליות (VM) של Compute Engine על פי דרישה כדי לעמוד בדרישות המשאבים.
- הם משתמשים בסוג המכונה שצוין בערך
-
SPECIFIC_RESERVATION: פריסת המודל של Agent Platform צורכת מכונות וירטואליות רק מההזמנה שצוינה בערךRESERVATION_AFFINITY_VALUES. ההזמנה הזו צריכה להיות מוגדרת לצריכה שמכוונת באופן ספציפי. הפריסה תיכשל אם אין בהזמנה שצוינה מספיק קיבולת.
-
-
RESERVATION_AFFINITY_KEY: המחרוזתcompute.googleapis.com/reservation-name. צריך לציין את האפשרות הזו אם הערך שלRESERVATION_AFFINITY_TYPEהואSPECIFIC_RESERVATION. -
RESERVATION_AFFINITY_VALUES: ערךARRAY<STRING>שמציין את שם המשאב המלא של ההזמנה ב-Compute Engine, בפורמט הבא:
projects/myproject/zones/reservation_zone/reservations/reservation_nameלדוגמה,
RESERVATION_AFFINITY_values = ['projects/myProject/zones/us-central1-a/reservations/myReservationName'].אפשר לראות את שם ההזמנה והאזור בדף Reservations במסוף Google Cloud . מידע נוסף זמין במאמר בנושא הצגת הזמנות.
חובה לציין את האפשרות הזו אם הערך של
RESERVATION_AFFINITY_TYPEהואSPECIFIC_RESERVATION. -
ENDPOINT_IDLE_TTL: ערךINTERVALשמציין את משך הזמן של חוסר פעילות שאחריו המודל הפתוח יבוטל אוטומטית מנקודת הקצה של Agent Platform.כדי להפעיל ביטול פריסה אוטומטי, מציינים ערך של מרווח זמן מילולי בין 390 דקות (6.5 שעות) ל-7 ימים. לדוגמה, אם מציינים
INTERVAL 8 HOUR, המודל יבוטל אחרי 8 שעות של חוסר פעילות. ערך ברירת המחדל הוא 390 דקות (6.5 שעות).חוסר פעילות של מודל מוגדר כפרק הזמן שחלף מאז שאחת מהפעולות הבאות בוצעה במודל:
- הפעלת ההצהרה
CREATE MODEL. - הפעלת ההצהרה
ALTER MODELעם הארגומנטDEPLOY_MODELשהערך שלו הואTRUE. - שליחת בקשת הסקה לנקודת הקצה של המודל. לדוגמה, על ידי הרצת הפונקציה
AI.GENERATE_EMBEDDINGאוAI.GENERATE_TEXT.
כל אחת מהפעולות האלה מאפסת את טיימר חוסר הפעילות לאפס. האיפוס מופעל בתחילת משימת BigQuery שמבצעת את הפעולה.
אחרי שמבטלים את הפריסה של המודל, בקשות להסקת מסקנות שנשלחות למודל מחזירות שגיאה. אובייקט המודל ב-BigQuery נשאר ללא שינוי, כולל מטא-נתונים של המודל. כדי להשתמש שוב במודל להסקת מסקנות, צריך לפרוס אותו מחדש על ידי הפעלת ההצהרה
ALTER MODELבמודל והגדרת האפשרותDEPLOY_MODELלערךTRUE. - הפעלת ההצהרה
מודלים פתוחים שנפרסו
במסוף Google Cloud , עוברים לדף BigQuery.
באמצעות עורך ה-SQL, יוצרים מודל מרוחק:
CREATE OR REPLACE MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME` REMOTE WITH CONNECTION {DEFAULT | `PROJECT_ID.REGION.CONNECTION_ID`} OPTIONS ( ENDPOINT = 'https://ENDPOINT_REGION-aiplatform.googleapis.com/v1/projects/ENDPOINT_PROJECT_ID/locations/ENDPOINT_REGION/endpoints/ENDPOINT_ID' );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שאמור להכיל את המודל. מערך הנתונים הזה צריך להיות באותו מיקום כמו החיבור שבו אתם משתמשים. -
MODEL_NAME: שם המודל. -
REGION: האזור שבו נעשה שימוש בחיבור. -
CONNECTION_ID: המזהה של החיבור ל-BigQuery.אפשר לקבל את הערך הזה על ידי צפייה בפרטי החיבור במסוף Google Cloud והעתקת הערך בקטע האחרון של מזהה החיבור המלא שמוצג במזהה החיבור. לדוגמה,
projects/myproject/locations/connection_location/connections/myconnection. -
ENDPOINT_REGION: האזור שבו המודל הפתוח פרוס. -
ENDPOINT_PROJECT_ID: הפרויקט שבו נפרס המודל הפתוח. -
ENDPOINT_ID: המזהה של נקודת הקצה (endpoint) של HTTPS שבה נעשה שימוש במודל הפתוח. כדי לקבל את מזהה נקודת הקצה, מאתרים את המודל הפתוח בדף Online prediction ומעתיקים את הערך בשדה ID.
יצירת טקסט מנתונים בטבלה רגילה
יצירת טקסט באמצעות הפונקציה AI.GENERATE_TEXT עם נתוני הנחיה מטבלה רגילה:
Gemini
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] [, GROUND_WITH_GOOGLE_SEARCH AS ground_with_google_search] [, SAFETY_SETTINGS AS safety_settings] } | [, MODEL_PARAMS AS model_params] } [, REQUEST_TYPE AS request_type]) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שמכיל את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו צריכה להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. -
PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה ליצור עמודה בשםprompt. -
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתגובה. הערך הזה צריך להיות בטווח[1,8192]. כדי לקבל תגובות קצרות יותר, צריך לציין ערך נמוך יותר, וכדי לקבל תגובות ארוכות יותר, צריך לציין ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. ערך ברירת המחדל הוא0.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, ואילו ערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0עבורtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הכי גבוהה. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של האסימונים שנבחרו. מציינים ערך נמוך יותר לתשובות פחות אקראיות וערך גבוה יותר לתשובות יותר אקראיות. ערך ברירת המחדל הוא0.95. -
STOP_SEQUENCES: ערךARRAY<STRING>שמסיר את המחרוזות שצוינו אם הן נכללות בתשובות מהמודל. ההתאמה בין המחרוזות היא מדויקת, כולל אותיות רישיות. ברירת המחדל היא מערך ריק. -
GROUND_WITH_GOOGLE_SEARCH: ערךBOOLשקובע אם מודל Gemini Enterprise Agent Platform משתמש ב[עיגון באמצעות חיפוש Google](/vertex-ai/generative-ai/docs/grounding/overview#ground-public) כשנוצרים תגובות. עיגון מאפשר למודל להשתמש במידע נוסף מהאינטרנט כשנוצרת תגובה, כדי שהתגובות של המודל יהיו ספציפיות ועובדתיות יותר. אם השדה הזה מוגדר לערךTrue, נכללת בתוצאות עמודה נוספתgrounding_resultשמספקת את המקורות שבהם המודל השתמש כדי לאסוף מידע נוסף. ברירת המחדל היאFALSE. -
SAFETY_SETTINGS: ערךARRAY<STRUCT<STRING AS category, STRING AS threshold>>שמגדיר את ספי התוכן הבטוח לסינון תשובות. הרכיב הראשון במבנה מציין קטגוריה של נזק, והרכיב השני במבנה מציין סף חסימה תואם. המודל מסנן תוכן שמפר את ההגדרות האלה. אפשר לציין כל קטגוריה רק פעם אחת. לדוגמה, אי אפשר לציין גםSTRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)וגםSTRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_ONLY_HIGH' AS threshold). אם אין הגדרת בטיחות לקטגוריה מסוימת, נעשה שימוש בהגדרת הבטיחותBLOCK_MEDIUM_AND_ABOVE. הקטגוריות הנתמכות הן:HARM_CATEGORY_HATE_SPEECHHARM_CATEGORY_DANGEROUS_CONTENTHARM_CATEGORY_HARASSMENTHARM_CATEGORY_SEXUALLY_EXPLICIT
BLOCK_NONE(מוגבל)BLOCK_LOW_AND_ABOVEBLOCK_MEDIUM_AND_ABOVE(ברירת מחדל)BLOCK_ONLY_HIGHHARM_BLOCK_THRESHOLD_UNSPECIFIED
-
REQUEST_TYPE: ערךSTRINGשמציין את סוג בקשת ההסקה שתישלח למודל Gemini. סוג הבקשה קובע באיזו מכסת שימוש הבקשה תשתמש. הערכים האפשריים הם:-
DEDICATED: הפונקציהAI.GENERATE_TEXTמשתמשת רק במכסת הקצאת משאבים לפי התפוקה שנקבעה. הפונקציהAI.GENERATE_TEXTמחזירה את השגיאהProvisioned throughput is not purchased or is not activeאם המכסה של הקצאת משאבים לפי התפוקה שנקבעה לא זמינה. -
SHARED: הפונקציהAI.GENERATE_TEXTמשתמשת רק במכסה דינמית משותפת (DSQ), גם אם רכשתם מכסת הקצאת משאבים לפי התפוקה שנקבעה. -
UNSPECIFIED: הפונקציהAI.GENERATE_TEXTמשתמשת במכסה באופן הבא:- אם לא רכשתם מכסת הקצאת משאבים לפי התפוקה שנקבעה, הפונקציה
AI.GENERATE_TEXTמשתמשת במכסת DSQ. - אם רכשתם מכסת הקצאת משאבים לפי התפוקה שנקבעה, הפונקציה
AI.GENERATE_TEXTמשתמשת קודם במכסת הקצאת משאבים לפי התפוקה שנקבעה. אם הבקשות חורגות ממכסת הקצאת המשאבים לפי התפוקה שנקבעה, תעבורת הנתונים העודפת משתמשת במכסת DSQ.
- אם לא רכשתם מכסת הקצאת משאבים לפי התפוקה שנקבעה, הפונקציה
ערך ברירת המחדל הוא
UNSPECIFIED.מידע נוסף זמין במאמר בנושא שימוש ב-Agent Platform עם הקצאת משאבים לפי התפוקה שנקבעה.
-
-
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשהgenerateContent. אפשר לספק ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט של המבנה ברמה העליונה לפונקציהAI.GENERATE_TEXT. צריך לציין כל פרמטר של מודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיות לסיכום הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשים בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- מחזירה תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמש בעמודה
promptשל הטבלהpromptsלהנחיה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
דוגמה 4
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמש בעמודה
promptשל הטבלהpromptsלהנחיה. - מחזירה תשובה קצרה.
- מאחזר ומחזיר נתונים ציבוריים מהאינטרנט כדי להצדיק את התשובה.
- התכונה מסננת תשובות לא בטוחות באמצעות שתי הגדרות אבטחה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts, STRUCT( 100 AS max_output_tokens, 0.5 AS top_p, TRUE AS ground_with_google_search, [STRUCT('HARM_CATEGORY_HATE_SPEECH' AS category, 'BLOCK_LOW_AND_ABOVE' AS threshold), STRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)] AS safety_settings));
דוגמה 5
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמש בעמודה
promptשל הטבלהpromptsלהנחיה. - מחזירה תשובה ארוכה יותר.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.flash_2_model`, TABLE mydataset.prompts, STRUCT( 0.4 AS temperature, 8192 AS max_output_tokens));
דוגמה 6
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיות לסיכום הטקסט בעמודה
bodyבטבלהarticles. - מאחזר ומחזיר נתונים ציבוריים מהאינטרנט כדי לבסס את התשובה.
- התכונה מסננת תשובות לא בטוחות באמצעות שתי הגדרות אבטחה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ), STRUCT( .1 AS TEMPERATURE, TRUE AS ground_with_google_search, [STRUCT('HARM_CATEGORY_HATE_SPEECH' AS category, 'BLOCK_LOW_AND_ABOVE' AS threshold), STRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)] AS safety_settings));
Claude
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_K AS top_k] [, TOP_P AS top_p] } | [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שמכיל את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו צריכה להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. -
PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה ליצור עמודה בשםprompt. -
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתגובה. הערך הזה צריך להיות בטווח[1,4096]. כדי לקבל תגובות קצרות יותר, צריך לציין ערך נמוך יותר, וכדי לקבל תגובות ארוכות יותר, צריך לציין ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TOP_K: ערךINT64בטווח[1,40]שקובע את מאגר הטוקנים הראשוני שהמודל בודק כדי לבחור את התשובה. אם רוצים לקבל תשובות פחות אקראיות, צריך לציין ערך נמוך יותר, ואם רוצים לקבל תשובות יותר אקראיות, צריך לציין ערך גבוה יותר. אם לא מציינים ערך, המודל קובע ערך מתאים. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של הטוקנים שנבחרו. כדי לקבל תשובות פחות אקראיות, צריך לציין ערך נמוך יותר, וכדי לקבל תשובות יותר אקראיות, צריך לציין ערך גבוה יותר. אם לא מציינים ערך, המודל קובע ערך מתאים. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשהgenerateContent. אפשר לספק ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט של המבנה ברמה העליונה לפונקציהAI.GENERATE_TEXT. צריך לציין כל פרמטר של מודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיות לסיכום הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשים בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- מחזירה תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמש בעמודה
promptשל הטבלהpromptsלהנחיה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
Llama
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] | } [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שמכיל את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו צריכה להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. -
PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה ליצור עמודה בשםprompt. -
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתגובה. הערך הזה צריך להיות בטווח[1,4096]. כדי לקבל תגובות קצרות יותר, צריך לציין ערך נמוך יותר, וכדי לקבל תגובות ארוכות יותר, צריך לציין ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. ערך ברירת המחדל הוא0.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, ואילו ערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0עבורtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הכי גבוהה. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של האסימונים שנבחרו. מציינים ערך נמוך יותר לתשובות פחות אקראיות וערך גבוה יותר לתשובות יותר אקראיות. ערך ברירת המחדל הוא0.95. -
STOP_SEQUENCES: ערךARRAY<STRING>שמסיר את המחרוזות שצוינו אם הן נכללות בתשובות מהמודל. ההתאמה בין המחרוזות היא מדויקת, כולל אותיות רישיות. ברירת המחדל היא מערך ריק. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשהgenerateContent. אפשר לספק ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט של המבנה ברמה העליונה לפונקציהAI.GENERATE_TEXT. צריך לציין כל פרמטר של מודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיות לסיכום הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשים בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- מחזירה תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמש בעמודה
promptשל הטבלהpromptsלהנחיה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
Mistral AI
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] | } [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שמכיל את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו צריכה להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. -
PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה ליצור עמודה בשםprompt. -
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של טוקנים שאפשר ליצור בתגובה. הערך הזה צריך להיות בטווח[1,4096]. כדי לקבל תגובות קצרות יותר, צריך לציין ערך נמוך יותר, וכדי לקבל תגובות ארוכות יותר, צריך לציין ערך גבוה יותר. ערך ברירת המחדל הוא128. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. ערך ברירת המחדל הוא0.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, ואילו ערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0עבורtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הכי גבוהה. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של האסימונים שנבחרו. מציינים ערך נמוך יותר לתשובות פחות אקראיות וערך גבוה יותר לתשובות יותר אקראיות. ערך ברירת המחדל הוא0.95. -
STOP_SEQUENCES: ערךARRAY<STRING>שמסיר את המחרוזות שצוינו אם הן נכללות בתשובות מהמודל. ההתאמה בין המחרוזות היא מדויקת, כולל אותיות רישיות. ברירת המחדל היא מערך ריק. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשהgenerateContent. אפשר לספק ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט של המבנה ברמה העליונה לפונקציהAI.GENERATE_TEXT. צריך לציין כל פרמטר של מודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיות לסיכום הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשים בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- מחזירה תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמש בעמודה
promptשל הטבלהpromptsלהנחיה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
מודלים פתוחים
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET_ID.MODEL_NAME`, {TABLE PROJECT_ID.DATASET_ID.TABLE_NAME | (PROMPT_QUERY)}, STRUCT( { { [MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_K AS top_k] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] } | [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
PROJECT_ID: מזהה הפרויקט.-
DATASET_ID: המזהה של מערך הנתונים שמכיל את המודל. -
MODEL_NAME: שם המודל. -
TABLE_NAME: שם הטבלה שמכילה את ההנחיה. בטבלה הזו צריכה להיות עמודה בשםprompt, או שאפשר להשתמש בכינוי כדי להשתמש בעמודה עם שם אחר. -
PROMPT_QUERY: שאילתה שמספקת את נתוני ההנחיה. השאילתה הזו צריכה ליצור עמודה בשםprompt. -
TOKENS: ערךINT64שמגדיר את המספר המקסימלי של אסימונים שאפשר ליצור בתגובה. הערך חייב להיות בטווח[1,4096]. מציינים ערך נמוך יותר לתשובות קצרות וערך גבוה יותר לתשובות ארוכות. אם לא מציינים ערך, המודל קובע ערך מתאים. TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת האסימון. אם לא מציינים ערך, המודל קובע ערך מתאים.ערכים נמוכים של
temperatureמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, ואילו ערכים גבוהים שלtemperatureיכולים להוביל לתוצאות יותר מגוונות או יצירתיות. ערך של0עבורtemperatureהוא דטרמיניסטי, כלומר תמיד נבחרת התשובה עם ההסתברות הכי גבוהה.-
TOP_K: ערךINT64בטווח[1,40]שקובע את מאגר הטוקנים הראשוני שהמודל בודק כדי לבחור את התשובה. אם רוצים לקבל תשובות פחות אקראיות, צריך לציין ערך נמוך יותר, ואם רוצים לקבל תשובות יותר אקראיות, צריך לציין ערך גבוה יותר. אם לא מציינים ערך, המודל קובע ערך מתאים. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]עוזר לקבוע את ההסתברות של הטוקנים שנבחרו. כדי לקבל תשובות פחות אקראיות, צריך לציין ערך נמוך יותר, וכדי לקבל תשובות יותר אקראיות, צריך לציין ערך גבוה יותר. אם לא מציינים ערך, המודל קובע ערך מתאים. -
MODEL_PARAMS: מחרוזת מילולית בפורמט JSON שמספקת פרמטרים למודל. הערך חייב להיות בפורמט של גוף הבקשהgenerateContent. אפשר לספק ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל בארגומנט של המבנה ברמה העליונה לפונקציהAI.GENERATE_TEXT. צריך לציין כל פרמטר של מודל בשדהMODEL_PARAMS, או להשמיט את השדה הזה ולציין כל פרמטר בנפרד.
דוגמה 1
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- הנחיות לסיכום הטקסט בעמודה
bodyבטבלהarticles.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT('Summarize this text', body) AS prompt FROM mydataset.articles ));
דוגמה 2
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמשים בשאילתה כדי ליצור את נתוני ההנחיה על ידי שרשור מחרוזות שמספקות קידומות להנחיה עם עמודות בטבלה.
- מחזירה תשובה קצרה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, ( SELECT CONCAT(question, 'Text:', description, 'Category') AS prompt FROM mydataset.input_table ), STRUCT( 100 AS max_output_tokens));
דוגמה 3
בדוגמה הבאה מוצגת בקשה עם המאפיינים האלה:
- משתמש בעמודה
promptשל הטבלהpromptsלהנחיה.
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.text_model`, TABLE mydataset.prompts);
יצירת טקסט מנתונים של טבלת אובייקטים
כדי לנתח נתונים לא מובנים מטבלת אובייקטים, אפשר ליצור טקסט באמצעות הפונקציה AI.GENERATE_TEXT עם מודל Gemini. מספקים את נתוני ההנחיה בפרמטר prompt.
SELECT * FROM AI.GENERATE_TEXT( MODEL `PROJECT_ID.DATASET.MODEL`, { TABLE `PROJECT_ID.DATASET.TABLE` | (QUERY_STATEMENT) }, STRUCT( PROMPT AS prompt { { [, MAX_OUTPUT_TOKENS AS max_output_tokens] [, TOP_P AS top_p] [, TEMPERATURE AS temperature] [, STOP_SEQUENCES AS stop_sequences] [, SAFETY_SETTINGS AS safety_settings] } | [, MODEL_PARAMS AS model_params] }) );
מחליפים את מה שכתוב בשדות הבאים:
-
PROJECT_ID: הפרויקט שמכיל את המשאב. -
DATASET: קבוצת הנתונים שמכילה את המשאב. -
MODEL: השם של המודל המרוחק מעל מודל Gemini Enterprise Agent Platform. מידע נוסף על יצירת מודל מרוחק מהסוג הזה זמין במאמר הצהרתCREATE MODELלמודלים מרוחקים מעל מודלים של שפה גדולה (LLM) .כדי לוודא באיזה מודל נעשה שימוש במודל המרוחק, פותחים את Google Cloud המסוף ומסתכלים על השדה Remote endpoint בדף פרטי המודל.
הערה: שימוש במודל מרוחק שמבוסס על מודל Gemini 2.5 כרוך בתשלום על תהליך החשיבה.
-
TABLE: השם של טבלת האובייקטים שמכילה את התוכן לניתוח. מידע נוסף על סוגי התוכן שאפשר לנתח זמין במאמר בנושא קלט.הקטגוריה של Cloud Storage שמשמשת את טבלת אובייקט הקלט צריכה להיות באותו פרויקט שבו יצרתם את המודל ושבו אתם קוראים לפונקציה
AI.GENERATE_TEXT. -
QUERY_STATEMENT: שאילתת GoogleSQL שמייצרת את נתוני התמונה. אפשר לציין בשאילתה רק את הסעיפיםWHEREו-ORDER BY. -
PROMPT: ערךSTRINGשמכיל את ההנחיה לשימוש בניתוח התוכן החזותי. הערך שלpromptחייב לכלול פחות מ-16,000 טוקנים. טוקן יכול להיות קצר יותר ממילה, והוא בערך באורך של ארבעה תווים. 100 טוקנים שווים בערך ל-60 עד 80 מילים. -
MAX_OUTPUT_TOKENS: ערךINT64שמגדיר את המספר המקסימלי של אסימונים שאפשר ליצור בתגובה. הערך חייב להיות בטווח[1,8192]. מציינים ערך נמוך יותר לתשובות קצרות וערך גבוה יותר לתשובות ארוכות. ערך ברירת המחדל הוא1024. -
TOP_P: ערךFLOAT64בטווח[0.0,1.0]שמשנה את האופן שבו המודל בוחר אסימונים לפלט. מציינים ערך נמוך יותר לתשובות פחות אקראיות וערך גבוה יותר לתשובות יותר אקראיות. ערך ברירת המחדל הוא0.95.הטוקנים נבחרים מהסבירות הגבוהה ביותר לסבירות הנמוכה ביותר עד שסכום הסבירויות שלהם שווה לערך
TOP_P. לדוגמה, אם ההסתברות של הטוקנים A, B ו-C היא0.3,0.2ו-0.1, והערך שלTOP_Pהוא0.5, המודל בוחר ב-A או ב-B כטוקן הבא באמצעות הערךTEMPERATURE, ולא מתייחס ל-C. -
TEMPERATURE: ערךFLOAT64בטווח[0.0,1.0]ששולט במידת האקראיות בבחירת הטוקנים. ערכים נמוכים שלTEMPERATUREמתאימים להנחיות שדורשות תשובה יותר דטרמיניסטית ופחות פתוחה או יצירתית, בעוד שערכים גבוהים שלTEMPERATUREיכולים להוביל לתוצאות מגוונות או יצירתיות יותר. ערךTEMPERATUREשל0הוא דטרמיניסטי, כלומר התשובה עם ההסתברות הכי גבוהה תמיד נבחרת. ברירת המחדל היא0. -
STOP_SEQUENCES: ערךARRAYשמסיר את המחרוזות שצוינו אם הן כלולות בתשובות מהמודל. ההתאמה בין המחרוזות היא מדויקת, כולל אותיות רישיות. ערך ברירת המחדל הוא מערך ריק. -
SAFETY_SETTINGS: ערךARRAYשמגדיר ספי תוכן בטוחים לסינון תשובות. הרכיב הראשון במבנה מציין קטגוריה של נזק, והרכיב השני במבנה מציין סף חסימה תואם. המודל מסנן תוכן שמפר את ההגדרות האלה. אפשר לציין כל קטגוריה רק פעם אחת. לדוגמה, אי אפשר לציין גם> STRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_MEDIUM_AND_ABOVE' AS threshold)וגםSTRUCT('HARM_CATEGORY_DANGEROUS_CONTENT' AS category, 'BLOCK_ONLY_HIGH' AS threshold). אם אין הגדרת בטיחות לקטגוריה מסוימת, נעשה שימוש בהגדרת הבטיחותBLOCK_MEDIUM_AND_ABOVE.הקטגוריות הנתמכות הן:
HARM_CATEGORY_HATE_SPEECHHARM_CATEGORY_DANGEROUS_CONTENTHARM_CATEGORY_HARASSMENTHARM_CATEGORY_SEXUALLY_EXPLICIT
הערכים האפשריים:
BLOCK_NONE( מוגבל )BLOCK_LOW_AND_ABOVEBLOCK_MEDIUM_AND_ABOVE(ברירת מחדל)BLOCK_ONLY_HIGHHARM_BLOCK_THRESHOLD_UNSPECIFIED
מידע נוסף מופיע בהגדרות של קטגוריית בטיחות ושל סף החסימה .
-
MODEL_PARAMS: מחרוזת ליטרלית בפורמט JSON שמספקת פרמטרים נוספים למודל. הערך צריך להיות בפורמט של גוף הבקשהgenerateContent. אפשר לספק ערך לכל שדה בגוף הבקשה, חוץ מהשדהcontents[]. אם מגדירים את השדה הזה, אי אפשר לציין גם פרמטרים של מודל במבנה ברמה העליונה של הארגומנט לפונקציהAI.GENERATE_TEXT.
הצגת פרמטרים אופציונליים נוספים
דוגמאות
בדוגמה הזו, תוכן אודיו מתורגם ומתומלל מטבלת אובייקטים בשם feedback:
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.audio_model`, TABLE `mydataset.feedback`, STRUCT('What is the content of this audio clip, translated into Spanish?' AS PROMPT));
בדוגמה הזו, התוכן של קובץ PDF מסווג מטבלת אובייקטים בשם invoices:
SELECT * FROM AI.GENERATE_TEXT( MODEL `mydataset.classify_model`, TABLE `mydataset.invoices`, STRUCT('Classify this document based on the invoice total, using the following categories: 0 to 100, 101 to 200, greater than 200' AS PROMPT));