איפה Gemini ב-BigQuery מעבד את הנתונים

במאמר הזה מוסבר איפה Gemini ב-BigQuery מעבד את הנתונים שלכם. ההתנהגות הזו רלוונטית לתכונות הבאות של Gemini ב-BigQuery:

העיבוד של Gemini לצורך התכונות האלה מתבצע בגבולות השיפוט של מיקום השאילתה, או במקום שבו מאוחסן מערך הנתונים של BigQuery. לדוגמה, אם המיקום של השאילתה או מערך הנתונים ב-BigQuery הוא באזור europe-west1, העיבוד של Gemini מתבצע במיקום שנמצא בגבול השיפוט של EU. העיצוב הזה מצמצם את תנועת הנתונים ופועל לפי השיטות המומלצות לניהול נתונים. מידע נוסף על הגבלות בנוגע לתחומי שיפוט זמינים מופיע במאמר מגבלות.

ברוב התכונות של Gemini ב-BigQuery, מנהל מערכת יכול לשלוט במיקום העיבוד של Gemini באמצעות ההגדרה מיקום ברירת מחדל גלובלי ברמת הפרויקט או הארגון. משתמשי BigQuery יכולים לשנות את מיקום ברירת המחדל הגלובלי הזה באמצעות ההגדרה מיקום השאילתה ב-BigQuery Studio. במקרים שבהם האדמין לא מציין הגדרת מיקום לשאילתה בהגדרות התצורה, או שהמשתמש לא מציין אותה באופן מפורש בשאילתה, Gemini ב-BigQuery משתמש במיקום שנגזר מהשאילתה שנערכת. מידע נוסף על האופן שבו BigQuery קובע את מיקום השאילתה זמין במאמר הרצת שאילתה.

‫Gemini ב-BigQuery קובע את תחום השיפוט של US או EU על סמך אמצעי הבקרה האלה. אם לא ניתן לקבוע את סמכות השיפוט, המיקום הגלובלי לעיבוד ישמש על סמך המיקומים שבהם Gemini זמין.

בקטעים הבאים מוסבר איך אפשר לקבוע איפה כל תכונה של Gemini ב-BigQuery מעבדת את הנתונים שלכם.

עורך SQL וקנבס נתונים

כשיוצרים קוד באמצעות כלי העריכה של SQL או כשמשתמשים בקנבס נתונים כדי ליצור תהליכי עבודה לניתוח נתונים, Gemini ב-BigQuery משתמש בלוגיקה הבאה כדי לקבוע את מיקום העיבוד:

  • אדמין ב-BigQuery יכול לציין מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט. במאמר ציון מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט מוסבר איך מציינים מיקום ברירת מחדל.

  • משתמש ב-BigQuery יכול לציין מיקום של שאילתה ב-BigQuery Studio שיבטל את ההגדרה של האדמין. הוראות להגדרת מיקום ברירת מחדל לשאילתות ב-BigQuery זמינות במאמר ציון מיקומים.

  • אם אי אפשר לקבוע את המיקום של מערך נתונים, או אם לא צוין מיקום ברירת המחדל של השאילתה של המשתמש,מערכת BigQuery מנסה לקבוע את המיקום של מערך הנתונים או השאילתה על סמך הרצת בדיקה. לדוגמה:

    • דוגמה לעורך SQL: אם הבקשה שלכם ל-Gemini בנושא Transform SQL with Gemini מתייחסת למערך נתונים ב-europe-west1,‏ Gemini מעבד את הנתונים ב-EU.
    • דוגמה לקנבס נתונים: אם קנבס הנתונים שלכם כולל נתונים ממערך נתונים שנמצא ב-us-east4, כל הניתוחים או ההצעות של Gemini ב-BigQuery יעובדו בגבולות השיפוט של US.

ציון מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט

אדמינים ב-BigQuery יכולים לציין מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט שבו בקשות Gemini יעברו עיבוד. מיקום ברירת המחדל נשמר במטמון למשך הסשן של המשתמש בזמן שהוא עורך בכרטיסייה הנוכחית של עורך ה-SQL.

דרישות מוקדמות

כדי לציין את מיקום ברירת המחדל ברמת הארגון או ברמת הפרויקט שבו הנתונים מעובדים, אדמין ב-BigQuery צריך קודם להביע הסכמה לשימוש בתכונה של BigQuery על ידי מילוי הטופס הזה, ואז לקבל אימייל שמאשר שהתכונה הופעלה.

התפקידים הנדרשים

כדי לציין מיקום ברירת מחדל של ארגון או פרויקט, צריך לקבל את התפקיד אדמין של BigQuery (roles/bigquery.admin), שכולל את ההרשאה bigquery.config.update שנדרשת כדי לציין הגדרת תצורה. מידע נוסף על הקצאת תפקידים מופיע במאמר ניהול הגישה לפרויקטים, לתיקיות ולארגונים.

הגדרת מיקום ברירת המחדל

כדי להגדיר מיקום ברירת מחדל ברמת הארגון או ברמת הפרויקט, מבצעים את השלבים הבאים:

  1. במסוף Google Cloud , עוברים לדף BigQuery.

    כניסה לדף BigQuery

  2. בחלונית הניווט, לוחצים על Explorer.

  3. בוחרים את הארגון או הפרויקט שרוצים לציין עבורם מיקום ברירת מחדל.

  4. בעורך ה-SQL של BigQuery, מזינים את ההצהרה הבאה:

    • הגדרות ברמת הארגון: 
      ALTER ORGANIZATION SET OPTIONS(default_location='my-default-region');
    • הגדרות ברמת הפרויקט: 
      ALTER PROJECT SET OPTIONS(default_location='my-default-region');

הפקודה הזו מגדירה את הערך של default_location ל-my-default-region.

אימות מיקום ברירת המחדל לעיבוד נתונים

כדי לוודא מהו מיקום ברירת המחדל לעיבוד נתונים של Gemini בשאילתת SQL בעזרת BigQuery, פועלים לפי השלבים הבאים:

  1. במסוף Google Cloud , עוברים לדף BigQuery.

    כניסה לדף BigQuery

  2. בעורך ה-SQL של BigQuery Studio, מריצים את השאילתה הבאה:

    SELECT
    COALESCE(
        (
            SELECT
                option_value
            FROM INFORMATION_SCHEMA.PROJECT_OPTIONS
            WHERE option_name = 'default_location'
        ),
        (
            SELECT
                option_value
            FROM INFORMATION_SCHEMA.ORGANIZATION_OPTIONS
            WHERE option_name = 'default_location'
        ));

בתוצאה מוצג הערך של default_location שהוגדר לערך שהגדרתם כ-my-default-region. השאילתה הזו מחזירה את מיקום ברירת המחדל של הפרויקט, אם הוא מוגדר. אחרת, השאילתה מחזירה את מיקום ברירת המחדל של הארגון. המשתמש לא מציין באופן מפורש את המיקום שבו מתבצעות פעולות של Gemini ב-BigQuery.

תובנות מנתונים ב-BigQuery

כדי ליצור תובנות באמצעות BigQuery data insights, אפשר להריץ פעולות של סריקת נתונים בטבלאות נבחרות ובמשאבים של מערכי נתונים. הסריקות האלה נוצרות באותו מיקום של משאב מערך הנתונים ב-BigQuery. במסגרת תחומי השיפוט של US או EU, העיבוד של Gemini ב-BigQuery מוגבל לתחום השיפוט שבו הסריקה מתבצעת. מחוץ לתחומי השיפוט של US ו-EU, העיבוד מתבצע באופן גלובלי. כדי לדעת איפה מתבצע עיבוד הנתונים הגלובלי של Gemini, אפשר לעיין במאמר מיקומי השרתים של Gemini.

הכנת נתונים ב-BigQuery

המיקום שבו מתבצעים תהליכי הכנת הנתונים ב-BigQuery תלוי בתכונה של הכנת הנתונים שבה אתם משתמשים.

  • כשמכינים נתונים באופן עצמאי, מיקום העיבוד של Gemini ב-BigQuery הוא המיקום שבו נמצא מערך הנתונים של BigQuery.
  • אם אתם מפעילים הכנת נתונים כחלק מצינורות של Dataform או BigQuery, מיקום עיבוד הנתונים של Gemini ב-BigQuery נקבע לפי ההגדרה של Dataform defaultLocation, אם היא מוגדרת. ההגדרה defaultLocation קובעת גם את מיקום העבודה ב-BigQuery. כך מובטח שהעיבוד של Gemini ב-BigQuery יתבצע באותם גבולות שיפוטיים.
  • אם לא מוגדר defaultLocation ל-Dataform או לצינור BigQuery שמכיל את ההכנה של הנתונים, אז האזור של עיבוד Gemini ב-BigQuery נקבע לפי הגדרת האזור של המאגר. צינור ללא הגדרה של defaultLocation יכול להריץ משימות שונות של BigQuery במיקומים שונים על סמך המיקום של הטבלאות שמשמשות בצמתים של הצינור. השיטה המומלצת היא להגדיר את defaultLocation כדי להבטיח מיקום עיבוד עקבי.

מגבלות

ההגבלות הבאות חלות כשמזהים את המיקום שבו Gemini ב-BigQuery מעבד את הנתונים:

  • ‫Gemini ב-BigQuery לא מספק נתונים על מיקום השרתים למיקומים ספציפיים. אפשר לציין עיבוד נתונים עבור US וEU בתחומי שיפוט נתמכים. נתונים מחוץ לתחומי השיפוט האלה מעובדים באופן גלובלי.
  • העיבוד של Gemini ב-BigQuery בהתאם לסמכות שיפוט זמין רק לתכונות של Gemini ב-BigQuery שזמינות לכלל המשתמשים (GA). רשימת התכונות של Gemini ב-BigQuery זמינה במאמר סקירה כללית של Gemini ב-BigQuery.

  • התמיכה ב-BigQuery Python notebook code assist וב-Data Science Agent for Colab Enterprise ב-BigQuery מוגבלת לעיבוד גלובלי של Gemini.

  • ‫Gemini בצ'אט של Cloud Assist (GCA) תומך רק בעיבוד גלובלי של Gemini. כדי למנוע גישה לחלונית הצ'אט של GCA, צריך להסיר את ההרשאה לניהול זהויות והרשאות גישה (IAM) cloudaicompanion.instances.completeTask של המשתמשים. במאמר יצירה וניהול של תפקידים בהתאמה אישית מוסבר איך יוצרים תפקידים כאלה.

המאמרים הבאים