איפה Gemini ב-BigQuery מעבד את הנתונים

במאמר הזה מוסבר איפה Gemini ב-BigQuery מעבד את הנתונים שלכם. ההתנהגות הזו חלה על התכונות הבאות של Gemini ב-BigQuery:

העיבוד של Gemini לצורך התכונות האלה מתבצע בגבולות תחום השיפוט של מיקום השאילתה, או במקום שבו מאוחסן מערך הנתונים של BigQuery. לדוגמה, אם המיקום או מערך הנתונים של השאילתה ב-BigQuery נמצאים באזור europe-west1, העיבוד של Gemini מתבצע במיקום שנמצא בגבול השיפוט של EU. העיצוב הזה מצמצם את תנועת הנתונים ופועל לפי השיטות המומלצות לניהול נתונים. מידע נוסף על הגבלות בנוגע לתחומי שיפוט זמינים מופיע בקטע מגבלות.

ברוב התכונות של Gemini ב-BigQuery, האדמין יכול לשלוט במיקום העיבוד של Gemini באמצעות ההגדרה מיקום ברירת המחדל הגלובלי ברמת הפרויקט או הארגון. משתמשי BigQuery יכולים לשנות את מיקום ברירת המחדל הגלובלי הזה באמצעות ההגדרה Query Location ב-BigQuery Studio. במקרים שבהם הגדרת מיקום של שאילתה לא מצוינת בהגדרות התצורה על ידי אדמין או באופן מפורש על ידי המשתמש בשאילתה, Gemini ב-BigQuery משתמש במיקום שנגזר מהשאילתה שנערכת. מידע נוסף על האופן שבו BigQuery קובע את מיקום השאילתה זמין במאמר בנושא הרצת שאילתה.

‫Gemini ב-BigQuery קובע את סמכות השיפוט של US או EU על סמך אמצעי הבקרה האלה. אם לא ניתן לקבוע את תחום השיפוט, המיקום הגלובלי לעיבוד ישמש על סמך המיקומים שבהם Gemini זמין.

בקטעים הבאים מוסבר איך אפשר לקבוע איפה כל תכונה של Gemini ב-BigQuery מעבדת את הנתונים שלכם.

עורך SQL וקנבס נתונים

כשיוצרים קוד באמצעות כלי העריכה של SQL או כשמשתמשים במרחב הנתונים כדי ליצור תהליכי עבודה של ניתוח נתונים, Gemini ב-BigQuery משתמש בלוגיקה הבאה כדי לקבוע את מיקום העיבוד:

  • אדמין ב-BigQuery יכול לציין מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט. במאמר ציון מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט מוסבר איך מציינים מיקום ברירת מחדל.

  • משתמש ב-BigQuery יכול לציין מיקום שאילתה ב-BigQuery Studio שמבטל את הגדרת האדמין. הוראות להגדרת מיקום ברירת מחדל לשאילתות ב-BigQuery זמינות במאמר ציון מיקומים.

  • אם אי אפשר לקבוע את המיקום של מערך נתונים, או אם לא צוין מיקום ברירת המחדל של השאילתה של המשתמש,מערכת BigQuery מנסה לקבוע את המיקום של מערך הנתונים או השאילתה על סמך הרצת בדיקה. לדוגמה:

    • דוגמה לעורך SQL: אם הבקשה שלכם ל-Gemini לטרנספורמציה של SQL עם Gemini מתייחסת למערך נתונים ב-europe-west1,‏ Gemini מעבד את הנתונים בגבולות השיפוט של EU.
    • דוגמה לקנבס נתונים: אם קנבס הנתונים מציג נתונים ממערך נתונים שנמצא ב-us-east4, כל הניתוחים או ההצעות של Gemini ב-BigQuery מעובדים בגבולות סמכות השיפוט של US.

ציון מיקום ברירת המחדל ברמת הארגון או ברמת הפרויקט

אדמין ב-BigQuery יכול לציין מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט שבו בקשות ל-Gemini יעברו עיבוד. מיקום ברירת המחדל נשמר במטמון למשך הסשן של המשתמש בזמן שהוא עורך בכרטיסייה הנוכחית של עורך ה-SQL. המיקום שמוגדר כברירת מחדל משמש כשפעולות של Gemini ב-BigQuery לא מציינות מיקום באופן מפורש, ואי אפשר להסיק את המיקום מהבקשה.

מידע נוסף על הגדרת מיקום ברירת המחדל זמין במאמר הגדרת הגדרות גלובליות.

מידע נוסף על אימות הגדרת המיקום שמוגדרת כברירת מחדל זמין במאמר אחזור הגדרות.

BigQuery Data Engineering Agent

‫Data Engineering Agent תומך באזורים גיאוגרפיים ברמת סמכות שיפוט, ומספק נקודות קצה ייעודיות לשירותים באזורים us, ‏ eu,‏ asia-northeast1 (טוקיו) ובאזורים גלובליים. ההעדפה האזורית מוקצית אוטומטית על סמך המיקום של סביבת העבודה המשויכת ב-Dataform.

באינטראקציה עם הסוכן ב Google Cloud מסוף, כל העיבוד הפנימי – כולל מנוע חשיבה רציונלית והאחסון הזמני של הקשר בשיחה – מתבצע אך ורק בגבולות תחום השיפוט שמוגדרים באזור של סביבת העבודה ב-Dataform.

כשמקיימים אינטראקציה עם הסוכן באמצעות ה-API הציבורי, צריך לבחור באפשרות us, eu או asia-northeast1 (טוקיו) כדי לוודא שכל העיבוד, הניתוח והקריאות לשירותים במורד הזרם יישארו בתחום השיפוט הזה. אם אזור ה-API שצוין לא תואם לאזור של סביבת העבודה, המערכת מחזירה שגיאה.

כדי לשנות את אזור העיבוד, צריך ליצור מאגר חדש של Dataform ולהגדיר אותו לאזור המעודכן.

BigQuery Data Science Agent

סוכן BigQuery למדעי הנתונים זמין במספר מוגבל של אזורים ב-Colab Enterprise. האזור נקבע אוטומטית לפי המיקום של קובץ ה-notebook שלכם ב-Colab Enterprise. מידע נוסף זמין במאמר מיקומים של Colab Enterprise.

כשאתם יוצרים אינטראקציה עם Data Science Agent במסוף Google Cloud , נתוני הסשן – כולל היסטוריית השיחות ואחסון זמני של הקשר השיחה – מאוחסנים באותו אזור שבו נמצא המחברת. נתונים שמאוחסנים במצב מנוחה ב-notebook מאוחסנים גם במיקום של ה-notebook.

בקשות למודל Gemini מנותבות לנקודות קצה אזוריות או גלובליות, בהתאם לגרסת המודל ולאזור. הניתוב הזה הוא דינמי ועשוי להשתנות כשיוצאות גרסאות חדשות של המודל. לדוגמה, יכול להיות שגרסאות חדשות יותר של מודלים ישתמשו בהתחלה בנקודת קצה גלובלית, ועם הזמן יתרחבו לנקודות קצה אזוריות או לנקודות קצה בכמה אזורים.

מידע נוסף על מיקום אחסון הנתונים מופיע במאמר מיקום אחסון הנתונים.

תובנות מנתונים ב-BigQuery

כדי ליצור תובנות באמצעות תובנות מנתוני BigQuery, אתם יכולים להריץ פעולות של סריקת נתונים בטבלאות ובמשאבים של מערכי נתונים נבחרים. הסריקות האלה נוצרות באותו מיקום של משאב מערך הנתונים ב-BigQuery. בסמכויות השיפוט של US או EU, העיבוד של Gemini ב-BigQuery מוגבל לסמכות השיפוט שבה הסריקה פועלת. מחוץ לתחומי השיפוט של US וEU, העיבוד מתבצע באופן גלובלי. כדי לדעת איפה מתבצע עיבוד הנתונים הגלובלי של Gemini, אפשר לעיין במאמר מיקומים של שרתי Gemini.

הכנת נתונים ב-BigQuery

המיקום שבו הכנת הנתונים ב-BigQuery מעבדת את הנתונים תלוי בתכונה שבה אתם משתמשים להכנת הנתונים.

  • כשמכינים נתונים באופן עצמאי, מיקום העיבוד של Gemini ב-BigQuery הוא המיקום שבו נמצא מערך הנתונים ב-BigQuery.
  • אם אתם מפעילים הכנת נתונים כחלק מצינורות של Dataform או BigQuery, מיקום עיבוד הנתונים של Gemini ב-BigQuery נקבע לפי ההגדרה defaultLocation של Dataform, אם היא מוגדרת. ההגדרה defaultLocation קובעת גם את מיקום המשימה ב-BigQuery. כך אפשר לוודא שהעיבוד של Gemini ב-BigQuery מתבצע באותם גבולות שיפוטיים.
  • אם לא מוגדר defaultLocation ל-Dataform או לצינור עיבוד הנתונים ב-BigQuery שמכיל את הכנת הנתונים, האזור שבו Gemini ב-BigQuery יעבד את הנתונים ייקבע לפי הגדרת האזור של המאגר. צינור (pipeline) שלא צוינה בו הגדרה של defaultLocation יכול להריץ משימות שונות של BigQuery במיקומים שונים, בהתאם למיקום של הטבלאות שמשמשות בצמתים של צינור הנתונים. מומלץ להגדיר את defaultLocation כדי לוודא שמיקום העיבוד יהיה עקבי.

מגבלות

ההגבלות הבאות חלות כשמזהים את המיקום שבו Gemini ב-BigQuery מעבד נתונים:

  • ‫Gemini ב-BigQuery לא מספק נתונים על מיקום השרתים למיקומים ספציפיים. אפשר לציין עיבוד נתונים לסמכויות השיפוט הנתמכות של US ו-EU. נתונים מחוץ לתחומי השיפוט האלה מעובדים באופן גלובלי.
  • עיבוד נתונים בהתאם לדיני תחום השיפוט ב-Gemini ב-BigQuery זמין רק לתכונות של Gemini ב-BigQuery שזמינות לכולם (GA). רשימת התכונות של Gemini ב-BigQuery זמינה במאמר סקירה כללית של Gemini ב-BigQuery.
  • ‫Gemini בצ'אט של Cloud Assist (GCA) תומך רק בעיבוד גלובלי של Gemini. כדי למנוע גישה לחלונית הצ'אט של GCA, אפשר להסיר את ההרשאה geminicloudassist.agents.invoke לניהול זהויות והרשאות גישה (IAM) מהמשתמשים. במאמר יצירה וניהול של תפקידים בהתאמה אישית מוסבר איך יוצרים תפקידים בהתאמה אישית.

המאמרים הבאים