Dataflow SQL

התמיכה ב-Dataflow SQL הסתיימה. זהו שינוי תוכנה שעלול לגרום לכשל.

  • החל מ-31 ביולי 2024, לא תהיה יותר גישה ל-Dataflow SQL במסוףGoogle Cloud .
  • החל מ-31 בינואר 2025, לא ניתן להשתמש ב-Dataflow SQL ב-Google Cloud CLI.

החלפה: Beam SQL

Beam SQL מאפשר לכם לשלוח שאילתות לנתונים PCollections מוגבלים ולא מוגבלים באמצעות הצהרות SQL. אם אתם עובדים במחברת Apache Beam, אתם יכולים להשתמש בפונקציית ה-magic המותאמת אישית של IPython‏ beam_sql כדי לזרז את פיתוח צינור עיבוד הנתונים.

‫Beam SQL מספק פונקציונליות דומה ל-Dataflow SQL, באמצעות הצהרות SQL לשאילתות PCollections.

העברה

מומלץ להתחיל להעביר את שאילתת ה-SQL של Dataflow ל-Beam SQL בהקדם האפשרי.

המעבר ל-Beam SQL הוא שינוי שובר תאימות שמשפיע על כל משימה או שאילתה של Dataflow SQL. תצטרכו לבנות מחדש את המשימות והשאילתות האלה.

בעקבות השינוי הזה, לא תוכלו ליצור משימות חדשות של Dataflow SQL. עם זאת, השינוי הזה לא משפיע על משימות Dataflow SQL שכבר פועלות.

מידע על יצירת שאילתות ב-Beam SQL זמין במאמרים Beam SQL and beam_sql magic וBeam SQL overview.