מבוא ל-BigQuery Migration Service

במסמך הזה מפורטת סקירה כללית על שירות ההעברה ל-BigQuery.

שירות ההעברה ל-BigQuery הוא פתרון מקיף להעברת מחסן הנתונים שלכם ל-BigQuery. הוא כולל תכונות שיעזרו לכם בכל שלב של המיגרציה, כולל הערכה ותכנון, תרגום SQL למגוון של דיאלקטים של SQL, העברת נתונים ואימות נתונים. השירותים האלה עוזרים לכם להאיץ את ההעברות ולצמצם את הסיכון, וכך לקצר את הזמן עד להשגת ערך.

שירות ההעברה ל-BigQuery כולל את התכונות הבאות:

אפשר גם להשתמש בכלים הבאים בקוד פתוח כדי לעזור בתהליך ההעברה:

  • כלי להעברת נתונים: אפשר להשתמש בכלי להעברת נתונים כדי לבצע אוטומציה של העברת מחסן הנתונים ל-BigQuery. הכלי משתמש בשירות העברת הנתונים ל-BigQuery, בשירותי התרגום של BigQuery ובכלי לאימות נתונים כדי להעביר נתונים, לתרגם ולאמת שאילתות DDL,‏ DML ו-SQL.
  • הכלי לאימות נתונים: אחרי העברת הנתונים ל-BigQuery, מפעילים את הכלי לאימות נתונים כדי לוודא שהטבלאות של מקור הנתונים והיעד זהות.
  • מיפוי הרשאות ב-BigQuery: אפשר להשתמש במיפוי ההרשאות כדי ליצור ולתחזק באופן אוטומטי מפות הרשאות שמשתמשים יכולים לשנות. אפשר להשתמש בכלי למיפוי הרשאות כדי לנתח ולתקן הרשאות כפולות וקבוצות משתמשים כפולות, וגם כדי ליצור דוחות שגיאות. הכלי יוצר סקריפטים של JSON ו-Terraform ליצירת קבוצות, משתמשים וקישורים ב-BigQuery.
  • תבניות של Cloud Composer: אפשר להשתמש בתבניות של Cloud Composer כדי לפשט את היצירה של DAG חדשים ב-Airflow או את ההעברה של משימות תזמור קיימות משרת מקומי לענן.
  • ‫Cloud Foundation Fabric: דוגמאות ומודולים של Terraform ל-Google Cloud, כולל תוכנית לניהול אזור נחיתה בכל הארגון, תוכניות לדוגמה לדפוסי רשת ולתכונות מוצר, וספרייה של מודולים שניתנים להתאמה.

מכסות

המכסות והמגבלות חלות על מספר המשימות וגם על גודל הקבצים. מידע נוסף על מכסות ומגבלות של שירות ההעברה זמין במאמר מכסות ומגבלות.

תמחור

אין תשלום על השימוש ב-BigQuery Migration API. עם זאת, נפח האחסון שמשמש לקובצי קלט ופלט כרוך בעמלות הרגילות. מידע נוסף זמין במאמר בנושא תמחור אחסון.

בנוסף, אתם יכולים להשתמש בפונקציית אומדן העלויות ב-Google Cloud Migration Center כדי ליצור אומדן עלויות להפעלת ההגדרה של מחסן הנתונים שאתם מעבירים ל-BigQuery. מידע נוסף זמין במאמרים איך מתחילים להעריך את העלויות ואיך מציינים את הדרישות של מחסן הנתונים.

המאמרים הבאים