סטטוס התמיכה בגרסת SDK

בדף הזה מפורט סטטוס התמיכה ב-Dataflow עבור מהדורות של Apache Beam SDK ו-Dataflow SDK:

הגדרות של רמת התמיכה ב-Apache Beam SDK

אלה רמות התמיכה ב-Dataflow עבור Apache Beam SDK:

  • נתמכות: גרסאות Apache Beam SDK נתמכות על ידי Dataflow מתאריך הפרסום שלהן ועד לתאריך ההוצאה משימוש.
  • הוצאה משימוש: כשגרסת SDK מוצאת משימוש, היא ממשיכה לפעול עם Dataflow אבל יכול להיות שהיא תושבת בעתיד. לפני שמוציאים משימוש גרסת SDK, הלקוחות מקבלים הודעה וזמן לשדרג את הסביבות שלהם. בקשות למשרות שנשלחות מגרסאות SDK שהוצאו משימוש מובילות להצגת הודעת אזהרה. מומלץ לעדכן סביבות שמשתמשות בגרסה מיושנת של SDK לגרסה נתמכת, אבל גרסאות מיושנות של SDK ממשיכות לפעול עם Dataflow.
  • הוצאה משימוש: גרסאות SDK שהוצאו משימוש כבר לא פועלות עם Dataflow. בקשות למשרות שנשלחות מגרסאות SDK שיצאו משימוש גורמות לשגיאה. כדי להשתמש ב-SDK עם Dataflow, צריך לעדכן את הסביבה לגרסת SDK שלא הוצאה משימוש. מומלץ לעדכן את ה-SDK לגרסה נתמכת. גרסאות SDK מוצאות משימוש לעיתים רחוקות. לפני שמוציאים משימוש גרסה של SDK, מודיעים ללקוחות ונותנים להם זמן לשדרג את הסביבות שלהם.

ההגדרות הקודמות לא חלות על ערכות SDK או על תכונות שמעולם לא נתמכו.

‫Apache Beam 2.x SDKs

Apache Beam הוא פרויקט קוד פתוח בהובלת הקהילה. ‫Google ו- Google Cloud הן חלק מקהילת Apache Beam, אבל אנחנו לא הבעלים של הפרויקט ולא שולטים בתהליך ההפצה. יכול להיות שנפתח באגים או נשלח תיקונים לבסיס הקוד של Apache Beam בשם לקוחות Dataflow. אנחנו לא יכולים ליצור תיקוני באגים או גרסאות רשמיות של Apache Beam לפי דרישה. פרטים נוספים על מדיניות ההפצה זמינים בדף מדיניות Apache Beam.

‫Dataflow תומך ברכיבי SDK ספציפיים של Apache Beam לגרסאות ה-SDK שמפורטות בדף הזה. הרכיבים האלה נבדקו באופן יסודי ב-Dataflow. אין תמיכה בתכונות ניסיוניות.

מידע על השינויים מופיע בהערות המוצר של Apache Beam.

בטבלאות הבאות מפורט סטטוס התמיכה בערכות Apache Beam 2.x SDK, כולל Apache Beam Python SDK,‏ Apache Beam Java SDK ו-Apache Beam Go SDK:

Java

גרסת SDK סטטוס רכיבים נתמכים פרטים
2.74.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-2 ביוני 2027.

2.73.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-29 באפריל 2027.

2.72.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-30 במרץ 2027.

2.71.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תוצא משימוש ב-22 בינואר 2027.

2.70.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-16 בדצמבר 2026.

2.69.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-28 באוקטובר 2026.

2.68.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-22 בספטמבר 2026.

2.67.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-12 באוגוסט 2026.

2.66.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-1 ביולי 2026.

2.65.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הוצא משימוש ב-12 במאי 2026.

2.64.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הוצא משימוש ב-31 במרץ 2026.

2.63.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הוצא משימוש ב-18 בפברואר 2026.

2.62.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הוצא משימוש ב-21 בינואר 2026.

בעיה ידועה: במשימות של Dataflow Streaming Appliance, יכול להיות שפעולות Commit ייכשלו עם KeyCommitTooLargeException אם מפתח מוציא יותר מ-180MB של תוצאות. הבאג משפיע על גרסאות 2.60.x עד 2.62.x. התיקון יפורס בגרסה 2.63.0. כדי לפתור את הבעיה, צריך לשדרג ל-Apache Beam 2.63.0 או להפעיל את Streaming Engine. ראו בעיה מספר 33588 ב-GitHub של Apache Beam.

2.61.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הוצא משימוש ב-25 בנובמבר 2025.

בעיה ידועה: במשימות של Dataflow Streaming Appliance, יכול להיות שפעולות Commit ייכשלו עם KeyCommitTooLargeException אם מפתח מוציא יותר מ-180MB של תוצאות. הבאג משפיע על גרסאות 2.60.x עד 2.62.x. התיקון יפורסם בגרסה 2.63.0. כדי לפתור את הבעיה, צריך לשדרג ל-Apache Beam 2.63.0 או להפעיל את Streaming Engine. ראו בעיה מספר 33588 ב-GitHub של Apache Beam.

2.60.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הוצא משימוש ב-17 באוקטובר 2025.

בעיה ידועה: במשימות של Dataflow Streaming Appliance, יכול להיות שפעולות Commit ייכשלו עם KeyCommitTooLargeException אם מפתח מוציא תוצאות של יותר מ-180MB. הבאג משפיע על גרסאות 2.60.x עד 2.62.x. התיקון יפורסם בגרסה 2.63.0. כדי לפתור את הבעיה, צריך לשדרג ל-Apache Beam 2.63.0 או להפעיל את Streaming Engine. ראו בעיה מספר 33588 ב-GitHub של Apache Beam.

2.59.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
הוצא משימוש ב-11 בספטמבר 2025.
2.58.1 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
הוצא משימוש ב-16 באוגוסט 2025.
2.58.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
הוצא משימוש ב-6 באוגוסט 2025.
2.57.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
הוצא משימוש ב-26 ביוני 2025.
2.56.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
הוצא משימוש ב-1 במאי 2025.
2.55.1 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-8 באפריל 2025.
2.55.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql

הוצא משימוש ב-25 במרץ 2025.

בעיה מוכרת: הטרנספורמציה WriteToJson בצינורות (pipelines) חוצי-שפות נכשלת עם שגיאה. כדי לפתור את הבעיה, צריך לשדרג לגרסה Apache Beam 2.55.1. מידע נוסף זמין במאמר בעיה מספר 30776: קובץ Beam YAML‏ WriteToJson נכשל.

2.54.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-14 בפברואר 2025.
2.53.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-4 בינואר 2025.
2.52.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
יצא משימוש ב-17 בנובמבר 2024.
2.51.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-12 באוקטובר 2024.
2.50.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
יצא משימוש ב-30 באוגוסט 2024.
2.49.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-17 ביולי 2024.
2.48.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-31 במאי 2024.
2.47.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-10 במאי 2024.
2.46.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-10 במרץ 2024.
2.45.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-15 בפברואר 2024.
2.44.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
יצא משימוש ב-13 בינואר 2024.
2.43.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-17 בנובמבר 2023.
2.42.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-17 באוקטובר 2023.
2.41.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-23 באוגוסט 2023.
2.40.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-27 ביוני 2023.
2.39.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-25 במאי 2023.
2.38.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-20 באפריל 2023.
2.37.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-4 במרץ 2023.
2.36.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-7 בפברואר 2023.
2.35.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-29 בדצמבר 2022.
2.34.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
יצא משימוש ב-11 בנובמבר 2022.
2.33.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
הוצא משימוש ב-7 באוקטובר 2022.
2.32.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
הוצא משימוש ב-25 באוגוסט 2022.
2.31.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
הוצא משימוש ב-8 ביולי 2022.
2.30.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
יצא משימוש ב-10 ביוני 2022.
2.29.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-29 באפריל 2022.

בעיה מוכרת: אם משתמשים ב-Runner V2, כברירת מחדל Dataflow ישתמש במאגר של Java 8 SDK, ללא קשר לגרסת Java של המשתמש. כדי לעקוף את הבעיה ב-Java 11, אפשר להחליף את תמונת ה-SDK שמוגדרת כברירת מחדל על ידי ציון אפשרות הצינור ‎ `--worker_harness_container_image=gcr.io/cloud-dataflow/v1beta3/beam_java11_sdk:2.29.0`‎. מידע נוסף זמין בכלי למעקב אחרי בעיות ב-Apache Beam.

2.28.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-22 בפברואר 2022.

2.27.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

יצא משימוש ב-7 בינואר 2022.

בגרסה הזו נוספה תמיכה ב-JDK 11.

2.26.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-11 בדצמבר 2021.

2.25.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud I/O connectors under module org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-23 באוקטובר 2021.

2.24.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-18 בספטמבר 2021.

בעיה ידועה: אם אתם משתמשים בטיימרים שמתאפסים, ולא בטיימרים שמוגדרים ומופעלים רק פעם אחת, אל תשדרגו לגרסה 2.24.0. אם טיימר מופעל אבל מאופס לפני ההרצה שלו, יכול להיות שסימן מים יזלוג, ויגרום לעבודת הצינור להיתקע. מידע נוסף זמין בכלי למעקב אחרי בעיות ב-Apache Beam.
2.23.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-29 ביולי 2021.

2.22.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: ‏ bigquery, ‏ bigtable, ‏ datastore, ‏ healthcare, ‏ pubsub, ‏ spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-8 ביוני 2021.

2.21.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-27 במאי 2021.

2.20.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-15 באפריל 2021.

2.19.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-4 בפברואר 2021.

2.18.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-23 בינואר 2021.

2.17.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-6 בינואר 2021.

2.16.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-7 באוקטובר 2020.

2.15.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

יצא משימוש ב-23 באוגוסט 2020.

בעיות מוכרות:
  • משתמשי Dataflow שמשתמשים בתכונות של סכימה (כולל טרנספורמציות של SQL) לא צריכים לשדרג לגרסה 2.15.0 בגלל בעיה מוכרת. מידע נוסף זמין בכלי למעקב אחרי בעיות ב-Apache Beam.
2.14.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

יצא משימוש ב-1 באוגוסט 2020.

2.13.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

יצא משימוש ב-6 ביוני 2020.

בגרסה הזו הוספנו תמיכה ניסיונית ב-JDK 9 ובגרסאות מתקדמות יותר. מידע נוסף זמין בכלי למעקב אחרי בעיות ב-Apache Beam.

2.12.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-25 באפריל 2020.

בעיות מוכרות:
  • ל-Dataflow runner יש הגדרת רישום שגויה, שיכולה לגרום לכך שכל היומנים יהיו חסרים. כדי לפתור את הבעיה, מוסיפים את slf4j-jdk14 לתלות בזמן הריצה.
2.11.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-1 במרץ 2020.

בעיות מוכרות:
  • ל-Dataflow runner יש הגדרת רישום שגויה, שיכולה לגרום לכך שכל היומנים יהיו חסרים. כדי לפתור את הבעיה, מוסיפים את slf4j-jdk14 לתלות בזמן הריצה.
2.10.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-11 בפברואר 2020.

בעיות מוכרות:
  • ‫SDK 2.10.0 תלוי בספריית הלקוח gcsio בגרסה 1.9.13, שיש בה בעיות ידועות:

    כדי לעקוף את הבעיות האלה, אפשר לשדרג ל-SDK 2.11.0 או לשנות את גרסת ספריית הלקוח של gcsio ל-1.9.16 ומעלה.

  • ל-Dataflow runner יש הגדרת רישום שגויה, שיכולה לגרום לכך שכל היומנים יהיו חסרים. כדי לפתור את הבעיה, מוסיפים את slf4j-jdk14 לתלות בזמן הריצה.
2.9.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

יצא משימוש ב-13 בדצמבר 2019.

בעיות מוכרות:
  • אם הפעלתם את ניסוי Streaming Engine (בטא), אל תשדרגו ל-SDK 2.9.0 בגלל בעיה מוכרת. אם בוחרים להשתמש ב-SDK 2.9.0, צריך גם להגדיר את דגל הניסוי enable_conscrypt_security_provider כדי להפעיל את Conscrypt, שיש לו בעיות יציבות ידועות.
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.8.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-25 באוקטובר 2019.

בעיות מוכרות:
  • יכול להיות שצינורות (pipelines) נתקעים בגלל בעיה בספריית Conscrypt. אם אתם רואים שגיאות ב-Stackdriver Logging עם עקבות מחסנית (stack traces) שכוללות קריאות שקשורות ל-Conscrypt, יכול להיות שאתם מושפעים מהבעיה הזו. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ואילך של SDK.
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.7.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-3 באוקטובר 2019.

בעיות מוכרות:
  • יכול להיות שצינורות (pipelines) נתקעים בגלל בעיה בספריית Conscrypt. אם אתם רואים שגיאות ב-Stackdriver Logging עם עקבות מחסנית (stack traces) שכוללות קריאות שקשורות ל-Conscrypt, יכול להיות שאתם מושפעים מהבעיה הזו. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ואילך של SDK.
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.6.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-8 באוגוסט 2019.

בעיות מוכרות:
  • יכול להיות שצינורות (pipelines) נתקעים בגלל בעיה בספריית Conscrypt. אם אתם רואים שגיאות ב-Stackdriver Logging עם עקבות מחסנית (stack traces) שכוללות קריאות שקשורות ל-Conscrypt, יכול להיות שאתם מושפעים מהבעיה הזו. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ואילך של SDK.
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.5.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-6 ביוני 2019.

בעיות מוכרות:
  • יכול להיות שצינורות (pipelines) נתקעים בגלל בעיה בספריית Conscrypt. אם אתם רואים שגיאות ב-Stackdriver Logging עם עקבות מחסנית (stack traces) שכוללות קריאות שקשורות ל-Conscrypt, יכול להיות שאתם מושפעים מהבעיה הזו. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ואילך של SDK.
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.4.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.3.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.2.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.1.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.0.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים בגרסאות 2.9.0 ומטה של Apache Beam Java SDKs עשויים לחוות כפילות נתונים כשקוראים קבצים מ-Cloud Storage. יכול להיות שיהיו כפילויות אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.

Python

גרסת SDK סטטוס רכיבים נתמכים פרטים
2.74.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-2 ביוני 2027.

2.73.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-29 באפריל 2027.

2.72.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-30 במרץ 2027.

2.71.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תוצא משימוש ב-22 בינואר 2027.

2.70.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-16 בדצמבר 2026.

2.69.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-28 באוקטובר 2026.

2.68.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-22 בספטמבר 2026.

2.67.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-12 באוגוסט 2026.

2.66.0 נתמך ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הגרסה הזו תצא משימוש ב-1 ביולי 2026.

2.65.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-12 במאי 2026.

2.64.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-31 במרץ 2026.

2.63.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-18 בפברואר 2026.

2.62.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-21 בינואר 2026.

2.61.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-25 בנובמבר 2025.

2.60.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-17 באוקטובר 2025.

2.59.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-11 בספטמבר 2025.

2.58.1 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-16 באוגוסט 2025.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.58.0 הוצא משימוש ספריית Python SDK Core במודול apache_beam: ‏ submodules coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-6 באוגוסט 2025.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.57.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-26 ביוני 2025.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.56.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-1 במאי 2025.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.55.1 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-8 באפריל 2025.

בעיה מוכרת: יכול להיות שצינורות Python שמשתמשים ב-SDK הזה ייתקעו מדי פעם. מידע נוסף זמין בבעיה מספר 30867 ב-GitHub של Apache Beam.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.55.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-25 במרץ 2025.

בעיה מוכרת: הטרנספורמציה WriteToJson בצינורות (pipelines) חוצי-שפות נכשלת עם שגיאה. כדי לפתור את הבעיה, צריך לשדרג לגרסה Apache Beam 2.55.1. מידע נוסף זמין במאמר בעיה מספר 30776: קובץ Beam YAML‏ WriteToJson נכשל.

בעיה מוכרת: יכול להיות שצינורות Python שמשתמשים ב-SDK הזה ייתקעו מדי פעם. מידע נוסף זמין בבעיה מספר 30867 ב-GitHub של Apache Beam.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.54.0 הוצא משימוש ספריית Python SDK Core במודול apache_beam: ‏ submodules coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-14 בפברואר 2025.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.53.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-4 בינואר 2025.

בעיה ידועה: יכול להיות שצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף (למשל באמצעות BigQueryIO), יחוו שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-GitHub של Apache Beam.

2.52.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

יצא משימוש ב-17 בנובמבר 2024.

2.51.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-12 באוקטובר 2024.

2.50.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

יצא משימוש ב-30 באוגוסט 2024.

2.49.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-17 ביולי 2024.

2.48.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-31 במאי 2024.

2.47.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-10 במאי 2024.

2.46.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (excluding PytorchModelHandlerKeyedTensor and SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-10 במרץ 2025.

2.45.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (excluding PytorchModelHandlerKeyedTensor and SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-15 בפברואר 2024.

2.44.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (excluding PytorchModelHandlerKeyedTensor and SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

יצא משימוש ב-13 בינואר 2024.

2.43.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (excluding PytorchModelHandlerKeyedTensor and SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-17 בנובמבר 2023.

2.42.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (excluding PytorchModelHandlerKeyedTensor and SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-17 באוקטובר 2023.

2.41.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (excluding PytorchModelHandlerKeyedTensor and SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-23 באוגוסט 2023.

2.40.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe, metrics, ml.inference (excluding PytorchModelHandlerKeyedTensor and SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

הוצא משימוש ב-27 ביוני 2023.

2.39.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-25 במאי 2023.

2.38.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ‏ ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-20 באפריל 2023.

2.37.0 הוצא משימוש ספריית ה-SDK המרכזית של Python במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-4 במרץ 2023.

בעיות מוכרות:
  • כשמשתמשים בפרמטר WriteToBigQuery עם הפרמטר ignore_unknown_columns שמוגדר לערך true, המערכת מתעלמת מערך הפרמטר. הבעיה הזו נפתרה בגרסה 2.38.0. פרטים נוספים זמינים במאמר בנושא BEAM-14039.
2.36.0 הוצא משימוש ספריית ה-SDK המרכזית של Python במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-7 בפברואר 2023.

בעיות מוכרות:
  • כשמשתמשים בפרמטר WriteToBigQuery עם הפרמטר ignore_unknown_columns שמוגדר לערך true, המערכת מתעלמת מערך הפרמטר. הבעיה הזו נפתרה בגרסה 2.38.0. פרטים נוספים זמינים במאמר בנושא BEAM-14039.
2.35.0 הוצא משימוש ספריית ה-SDK המרכזית של Python במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub
המחברים במודול apache_beam.io.jdbc: ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-29 בדצמבר 2022.

2.34.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

יצא משימוש ב-11 בנובמבר 2022.

2.33.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-7 באוקטובר 2022.

2.32.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-25 באוגוסט 2022.

2.31.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ dataframe (תצוגה מקדימה), ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏ bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-8 ביולי 2022.

2.30.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub

יצא משימוש ב-10 ביוני 2022.

2.29.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub

הוצא משימוש ב-29 באפריל 2022.

2.28.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub

הוצא משימוש ב-22 בפברואר 2022.

2.27.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub

יצא משימוש ב-7 בינואר 2022.

2.26.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders, dataframe (preview), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
מקורות ויעדים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, datastore, pubsub

הוצא משימוש ב-11 בדצמבר 2021.

2.25.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-23 באוקטובר 2021.

2.24.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-18 בספטמבר 2021. בנוסף, גרסה 2.24.0 של Apache Beam SDK היא האחרונה שתומכת ב-Python 2 וב-Python 3.5.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.23.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-29 ביולי 2021.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.22.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-8 ביוני 2021.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.21.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-27 במאי 2021.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.20.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-15 באפריל 2021.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.19.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-4 בפברואר 2021.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.18.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-23 בינואר 2021.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.17.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-6 בינואר 2021.

‫Dataflow כבר לא תומך בצינורות עיבוד נתונים באמצעות Python 2. מידע נוסף זמין בדף בנושא תמיכה ב-Python 2 ב- Google Cloud.

2.16.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש ב-7 באוקטובר 2020.
2.15.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
יצא משימוש ב-23 באוגוסט 2020.
2.14.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

יצא משימוש ב-1 באוגוסט 2020.

בעיות מוכרות:
  • במקור MongoDB שנוסף בגרסה הזו יש בעיה מוכרת שעלולה לגרום לאובדן נתונים. פרטים נוספים זמינים במאמר בנושא BEAM-7866.
2.13.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש החל מ-6 ביוני 2020.
2.12.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש החל מ-25 באפריל 2020.
2.11.0 הוצא משימוש ספריית Python SDK מרכזית במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות ויעדים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏ textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש החל מ-1 במרץ 2020.
2.10.0 הוצא משימוש הוצא משימוש החל מ-11 בפברואר 2020.
2.9.0 הוצא משימוש יצא משימוש ב-13 בדצמבר 2019.
2.8.0 הוצא משימוש הוצא משימוש החל מ-25 באוקטובר 2019.
2.7.0 הוצא משימוש

הוצא משימוש החל מ-3 באוקטובר 2019.

2.6.0 הוצא משימוש הוצא משימוש החל מ-8 באוגוסט 2019.
2.5.0 הוצא משימוש הוצא משימוש החל מ-6 ביוני 2019.
2.4.0 הוצא משימוש הוצא משימוש החל מ-20 במרץ 2019.
2.3.0 הוצא משימוש הוצא משימוש החל מ-30 בינואר 2019.
2.2.0 הוצא משימוש הוצא משימוש החל מ-2 בדצמבר 2018.
2.1.1
2.1.0
הוצא משימוש הוצא משימוש החל מ-23 באוגוסט 2018.
2.0.0 הוצא משימוש הוצא משימוש החל מ-17 במאי 2018.

המשך

גרסת SDK סטטוס רכיבים נתמכים פרטים
2.74.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-2 ביוני 2027.
2.73.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-29 באפריל 2027.
2.72.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-30 במרץ 2027.
2.71.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תוצא משימוש ב-22 בינואר 2027.
2.70.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-16 בדצמבר 2026.
2.69.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-28 באוקטובר 2026.
2.68.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-22 בספטמבר 2026.
2.67.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-12 באוגוסט 2026.
2.66.0 נתמך חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הגרסה הזו תצא משימוש ב-1 ביולי 2026.
2.65.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-12 במאי 2026.
2.64.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-31 במרץ 2026.
2.63.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-18 בפברואר 2026.
2.62.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-21 בינואר 2026.
2.61.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-25 בנובמבר 2025.
2.60.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-17 באוקטובר 2025.
2.59.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-11 בספטמבר 2025.
2.58.1 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-16 באוגוסט 2025.
2.58.0 הוצא משימוש חבילות בספריות הבאות:
‫- Core Beam Go SDK package
‫- beam/transforms
‫- beam/io/textio
‫- beam/io/pubsubio
‫- beam/io/xlang
הוצא משימוש ב-6 באוגוסט 2025.
2.57.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-26 ביוני 2025.
2.56.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-1 במאי 2025.
2.55.1 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-8 באפריל 2025.
2.55.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-25 במרץ 2025.
2.54.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-14 בפברואר 2025.
2.53.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-4 בינואר 2025.
2.52.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
יצא משימוש ב-17 בנובמבר 2024.
2.51.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-12 באוקטובר 2024.
2.50.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
יצא משימוש ב-30 באוגוסט 2024.
2.49.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-17 ביולי 2024.
2.48.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-31 במאי 2024.
2.47.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-10 במאי 2024.
2.46.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-10 במרץ 2024.
2.45.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-15 בפברואר 2024.
2.44.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
יצא משימוש ב-13 בינואר 2024.
2.43.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-17 בנובמבר 2023.
2.42.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-17 באוקטובר 2023.
2.41.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-23 באוגוסט 2023.
2.40.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-27 ביוני 2023.
2.39.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/xlang
הוצא משימוש ב-25 במאי 2023.
2.38.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/pubsubio
beam/io/xlang
הוצא משימוש ב-20 באפריל 2023.
2.37.0 הוצא משימוש חבילות בספריות הבאות:
חבילת ה-SDK של Core Beam Go
beam/transforms
beam/io/textio
beam/io/xlang
הוצא משימוש ב-4 במרץ 2023.

‫Dataflow 2.x SDKs

בטבלאות הבאות מפורט סטטוס התמיכה בערכות Dataflow 2.x SDK, כולל Dataflow Java SDK ו-Dataflow Python SDK:

Java

פרטים על השינויים מופיעים בנתוני הגרסה של Dataflow SDK 2.x for Java.

גרסת SDK סטטוס פרטים
2.5.0 הוצא משימוש

הוצא משימוש החל מ-6 ביוני 2019.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Dataflow Java SDKs גרסה 2.5.0 ואילך עלולים להיתקל בשכפול נתונים כשקוראים קבצים מ-Cloud Storage. שכפול יכול להתרחש אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.4.0 הוצא משימוש

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה בנקודות קצה של JSON-RPC ו-Global HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Dataflow Java SDKs גרסה 2.5.0 ואילך עלולים להיתקל בשכפול נתונים כשקוראים קבצים מ-Cloud Storage. שכפול יכול להתרחש אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.3.0 הוצא משימוש

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Dataflow Java SDKs גרסה 2.5.0 ואילך עלולים להיתקל בשכפול נתונים כשקוראים קבצים מ-Cloud Storage. שכפול יכול להתרחש אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.2.0 הוצא משימוש

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Dataflow Java SDKs גרסה 2.5.0 ואילך עלולים להיתקל בשכפול נתונים כשקוראים קבצים מ-Cloud Storage. שכפול יכול להתרחש אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.1.0 הוצא משימוש

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Dataflow Java SDKs גרסה 2.5.0 ואילך עלולים להיתקל בשכפול נתונים כשקוראים קבצים מ-Cloud Storage. שכפול יכול להתרחש אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.0.0 הוצא משימוש

יצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל הפסקת התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Dataflow Java SDKs גרסה 2.5.0 ואילך עלולים להיתקל בשכפול נתונים כשקוראים קבצים מ-Cloud Storage. שכפול יכול להתרחש אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.
2.0.0-beta3
2.0.0-beta2
2.0.0-beta1
הוצא משימוש

הוצא משימוש ב-28 בפברואר 2018.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Dataflow Java SDKs גרסה 2.5.0 ואילך עלולים להיתקל בשכפול נתונים כשקוראים קבצים מ-Cloud Storage. שכפול יכול להתרחש אם מתקיימים כל התנאים הבאים: כפתרון עקיף, אל תגדירו את כותרת קידוד התוכן, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). בקבצים קיימים, אפשר לעדכן את כותרת קידוד התוכן ואת שם הקובץ באמצעות פקודות gcloud storage.

Python

מידע על השינויים מופיע בנתוני הגרסה של Dataflow SDK 2.x for Python.

גרסת SDK סטטוס פרטים
2.5.0 הוצא משימוש הוצא משימוש החל מ-6 ביוני 2019.
2.4.0 הוצא משימוש הוצא משימוש החל מ-20 במרץ 2019.
2.3.0 הוצא משימוש הוצא משימוש החל מ-30 בינואר 2019.
2.2.0 הוצא משימוש הוצא משימוש החל מ-2 בדצמבר 2018.
2.1.1 הוצא משימוש הוצא משימוש החל מ-23 באוגוסט 2018.
נפתרה בעיית תאימות לחבילת Python‏ six.
מידע נוסף זמין בהערות המוצר.
2.1.0 הוצא משימוש הוצא משימוש החל מ-23 באוגוסט 2018.
בגרסה הזו יש בעיית תאימות לחבילת Python six 1.11.0.
מידע נוסף זמין בהערות המוצר.
2.0.0 הוצא משימוש הוצא משימוש החל מ-17 במאי 2018.
בגרסה הזו יש בעיית תאימות לחבילת Python six 1.11.0.
מידע נוסף זמין בהערות המוצר.
0.6.0
0.5.5
0.5.1
0.4.4
0.4.3
0.4.2
0.4.1
0.4.0
הוצא משימוש הוצא משימוש ב-29 בינואר 2018.
גרסה 0.2.7 וגרסאות קודמות הוצא משימוש הוצא משימוש החל מ-23 במרץ 2017.