Status dukungan versi SDK

Halaman ini mencantumkan status dukungan Dataflow untuk rilis Apache Beam SDK dan Dataflow SDK:

Definisi tingkat dukungan Apache Beam SDK

Berikut adalah tingkat dukungan Dataflow untuk Apache Beam SDK:

  • Didukung: Versi Apache Beam SDK didukung oleh Dataflow sejak tanggal rilis hingga tanggal penghentiannya.
  • Tidak digunakan lagi: Jika versi SDK tidak digunakan lagi, versi tersebut akan terus berfungsi dengan Dataflow, tetapi mungkin dinonaktifkan pada masa mendatang. Sebelum versi SDK dihentikan, pelanggan akan diberi tahu dan diberi waktu untuk mengupgrade lingkungan mereka. Permintaan tugas yang dikirim dari versi SDK yang tidak digunakan lagi akan menghasilkan pesan peringatan. Sebaiknya perbarui lingkungan yang menggunakan SDK versi yang tidak digunakan lagi ke versi yang didukung, tetapi SDK versi yang tidak digunakan lagi akan terus berfungsi dengan Dataflow.
  • Dihentikan: Versi SDK yang dihentikan tidak lagi berfungsi dengan Dataflow. Permintaan untuk tugas yang dikirim dari versi SDK yang dihentikan akan menghasilkan error. Untuk menggunakan SDK dengan Dataflow, Anda harus mengupdate lingkungan ke versi SDK yang tidak dihentikan. Sebaiknya Anda mengupdate SDK ke versi yang didukung. Versi SDK jarang dihentikan. Sebelum versi SDK dinonaktifkan, pelanggan akan diberi tahu dan diberi waktu untuk mengupgrade lingkungan mereka.

Definisi sebelumnya tidak berlaku untuk SDK atau fitur yang tidak pernah didukung.

SDK Apache Beam 2.x

Apache Beam adalah project open source yang dipimpin komunitas. Google dan Google Cloud Platform adalah bagian dari komunitas Apache Beam, tetapi kami tidak memiliki project atau mengontrol proses rilis. Kami dapat membuka bug atau mengirimkan patch ke codebase Apache Beam atas nama pelanggan Dataflow. Kami tidak dapat membuat perbaikan cepat atau rilis resmi Apache Beam sesuai permintaan. Lihat halaman Kebijakan Apache Beam untuk mengetahui detail selengkapnya tentang kebijakan rilis.

Dataflow mendukung komponen Apache Beam SDK tertentu untuk rilis SDK yang tercantum di halaman ini. Komponen ini telah diuji secara menyeluruh dengan Dataflow. Fitur eksperimental tidak didukung.

Lihat catatan rilis Apache Beam untuk mengetahui informasi perubahan.

Tabel berikut berisi status dukungan untuk Apache Beam SDK 2.x, termasuk Apache Beam Python SDK, Apache Beam Java SDK, dan Apache Beam Go SDK:

Java

Versi SDK Status Komponen yang didukung Detail
2.71.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini akan dihentikan pada 22 Januari 2027.

2.70.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi pada 16 Desember 2026.

2.69.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi mulai 28 Oktober 2026.

2.68.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi pada 22 September 2026.

2.67.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi pada 12 Agustus 2026.

2.66.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi mulai 1 Juli 2026.

2.65.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi pada 12 Mei 2026.

2.64.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi pada 31 Maret 2026.

2.63.0 Didukung org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Versi ini tidak akan digunakan lagi mulai 18 Februari 2026.

2.62.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Tidak digunakan lagi pada 21 Januari 2026.

Masalah umum: Pada tugas Dataflow Streaming Appliance, commit dapat gagal dengan KeyCommitTooLargeException saat kunci menghasilkan >180 MB hasil. Bug memengaruhi versi 2.60.x hingga 2.62.x, perbaikan akan dirilis dengan 2.63.0. Untuk mengatasi masalah ini, lakukan downgrade ke Apache Beam 2.59.0 atau upgrade ke Apache Beam 2.63.0 atau aktifkan Streaming Engine. Lihat masalah GitHub Apache Beam #33588.

2.61.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Dihentikan pada 25 November 2025.

Masalah umum: Pada tugas Dataflow Streaming Appliance, commit dapat gagal dengan KeyCommitTooLargeException saat kunci menghasilkan >180 MB hasil. Bug memengaruhi versi 2.60.x hingga 2.62.x, perbaikan akan dirilis dengan 2.63.0. Untuk mengatasi masalah ini, lakukan downgrade ke Apache Beam 2.59.0 atau upgrade ke Apache Beam 2.63.0 atau aktifkan Streaming Engine. Lihat masalah GitHub Apache Beam #33588.

2.60.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

Tidak digunakan lagi pada 17 Oktober 2025.

Masalah umum: Pada tugas Dataflow Streaming Appliance, commit dapat gagal dengan KeyCommitTooLargeException saat kunci menghasilkan >180 MB hasil. Bug memengaruhi versi 2.60.x hingga 2.62.x, perbaikan akan dirilis dengan 2.63.0. Untuk mengatasi masalah ini, lakukan downgrade ke Apache Beam 2.59.0 atau upgrade ke Apache Beam 2.63.0 atau aktifkan Streaming Engine. Lihat masalah GitHub Apache Beam #33588.

2.59.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
Tidak digunakan lagi pada 11 September 2025.
2.58.1 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
Tidak digunakan lagi pada 16 Agustus 2025.
2.58.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
Tidak digunakan lagi pada 6 Agustus 2025.
2.57.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
Tidak digunakan lagi pada 26 Juni 2025.
2.56.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
Tidak digunakan lagi pada 1 Mei 2025.
2.55.1 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 8 April 2025.
2.55.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql

Tidak digunakan lagi pada 25 Maret 2025.

Masalah umum: Transformasi WriteToJson di pipeline lintas bahasa gagal dengan error. Untuk mengatasi masalah ini, upgrade ke Apache Beam 2.55.1. Untuk mengetahui informasi selengkapnya, lihat Masalah #30776: Kegagalan WriteToJson YAML Beam.

2.54.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 14 Februari 2025.
2.53.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 4 Januari 2025.
2.52.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Dihentikan pada 17 November 2024.
2.51.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 12 Oktober 2024.
2.50.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Dihentikan pada 30 Agustus 2024.
2.49.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 17 Juli 2024.
2.48.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 31 Mei 2024.
2.47.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 10 Mei 2024.
2.46.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Dihentikan pada 10 Maret 2024.
2.45.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 15 Februari 2024.
2.44.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 13 Januari 2024.
2.43.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 17 November 2023.
2.42.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 17 Oktober 2023.
2.41.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 23 Agustus 2023.
2.40.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 27 Juni 2023.
2.39.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 25 Mei 2023.
2.38.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 20 April 2023.
2.37.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 4 Maret 2023.
2.36.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 7 Februari 2023.
2.35.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 29 Desember 2022.
2.34.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O di bawah modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
Tidak digunakan lagi pada 11 November 2022.
2.33.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
Tidak digunakan lagi pada 7 Oktober 2022.
2.32.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
Tidak digunakan lagi pada 25 Agustus 2022.
2.31.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
Dihentikan pada 8 Juli 2022.
2.30.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
Tidak digunakan lagi pada 10 Juni 2022.
2.29.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 29 April 2022.

Masalah umum: Jika Anda menggunakan Runner V2, secara default Dataflow akan menggunakan penampung SDK Java 8 terlepas dari versi Java pengguna. Untuk mengatasi masalah Java 11, Anda dapat mengganti image SDK default dengan memberikan opsi pipeline `--worker_harness_container_image=gcr.io/cloud-dataflow/v1beta3/beam_java11_sdk:2.29.0`. Lihat pelacak masalah Apache Beam untuk mengetahui informasi selengkapnya.

2.28.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 22 Februari 2022.

2.27.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 7 Januari 2022.

Rilis ini menambahkan dukungan untuk JDK 11.

2.26.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 11 Desember 2021.

2.25.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 23 Oktober 2021.

2.24.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 18 September 2021.

Masalah umum: Jika Anda menggunakan timer yang direset, bukan timer yang disetel dan hanya diaktifkan satu kali, Anda tidak boleh mengupgrade ke 2.24.0. Saat timer diaktifkan, tetapi direset sebelum dieksekusi, penahanan tanda air dapat bocor, sehingga menyebabkan tugas pipeline Anda macet. Lihat Issue Tracker Apache Beam untuk mengetahui informasi selengkapnya.
2.23.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 29 Juli 2021.

2.22.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud Konektor I/O dalam modul org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 8 Juni 2021.

2.21.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 27 Mei 2021.

2.20.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 15 April 2021.

2.19.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 4 Februari 2021.

2.18.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 23 Januari 2021.

2.17.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 6 Januari 2021.

2.16.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 7 Oktober 2020.

2.15.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 23 Agustus 2020.

Masalah umum:
  • Pengguna Dataflow yang menggunakan fitur skema (termasuk transformasi SQL) tidak boleh mengupgrade ke 2.15.0 karena masalah yang diketahui. Lihat Issue Tracker Apache Beam untuk mengetahui informasi selengkapnya.
2.14.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 1 Agustus 2020.

2.13.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi pada 6 Juni 2020.

Rilis ini menambahkan dukungan eksperimental untuk JDK 9 dan versi yang lebih baru. Lihat Issue Tracker Apache Beam untuk mengetahui informasi selengkapnya.

2.12.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Dihentikan pada 25 April 2020.

Masalah umum:
  • Runner Dataflow memiliki konfigurasi logging yang salah yang dapat menyebabkan semua log tidak ada. Untuk mengatasi masalah ini, tambahkan slf4j-jdk14 ke dependensi runtime Anda.
2.11.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi mulai 1 Maret 2020.

Masalah umum:
  • Runner Dataflow memiliki konfigurasi logging yang salah yang dapat menyebabkan semua log tidak ada. Untuk mengatasi masalah ini, tambahkan slf4j-jdk14 ke dependensi runtime Anda.
2.10.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi mulai 11 Februari 2020.

Masalah umum:
  • SDK 2.10.0 bergantung pada library klien gcsio versi 1.9.13, yang memiliki masalah yang diketahui:

    Untuk mengatasi masalah ini, upgrade ke SDK 2.11.0, atau ganti versi library klien gcsio ke 1.9.16 atau yang lebih baru.

  • Runner Dataflow memiliki konfigurasi logging yang salah yang dapat menyebabkan semua log tidak ada. Untuk mengatasi masalah ini, tambahkan slf4j-jdk14 ke dependensi runtime Anda.
2.9.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi mulai 13 Desember 2019.

Masalah umum:
  • Jika Anda mengaktifkan eksperimen Streaming Engine (Beta), jangan mengupgrade ke SDK 2.9.0 karena masalah yang diketahui. Jika memilih untuk menggunakan SDK 2.9.0, Anda juga harus menetapkan tanda eksperimental enable_conscrypt_security_provider untuk mengaktifkan Conscrypt, yang memiliki masalah stabilitas yang diketahui.
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.8.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi mulai 25 Oktober 2019.

Masalah umum:
  • Pipeline mungkin macet karena masalah pada library Conscrypt. Jika Anda melihat error di Stackdriver Logging dengan stack trace yang mencakup panggilan terkait Conscrypt, Anda mungkin terpengaruh oleh masalah ini. Untuk mengatasi masalah ini, upgrade ke SDK 2.9.0 atau yang lebih tinggi.
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.7.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi mulai 3 Oktober 2019.

Masalah umum:
  • Pipeline mungkin macet karena masalah pada library Conscrypt. Jika Anda melihat error di Stackdriver Logging dengan stack trace yang mencakup panggilan terkait Conscrypt, Anda mungkin terpengaruh oleh masalah ini. Untuk mengatasi masalah ini, upgrade ke SDK 2.9.0 atau yang lebih tinggi.
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.6.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi mulai 8 Agustus 2019.

Masalah umum:
  • Pipeline mungkin macet karena masalah pada library Conscrypt. Jika Anda melihat error di Stackdriver Logging dengan stack trace yang mencakup panggilan terkait Conscrypt, Anda mungkin terpengaruh oleh masalah ini. Untuk mengatasi masalah ini, upgrade ke SDK 2.9.0 atau yang lebih tinggi.
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.5.0 Tidak digunakan lagi org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

Tidak digunakan lagi mulai 6 Juni 2019.

Masalah umum:
  • Pipeline mungkin macet karena masalah pada library Conscrypt. Jika Anda melihat error di Stackdriver Logging dengan stack trace yang mencakup panggilan terkait Conscrypt, Anda mungkin terpengaruh oleh masalah ini. Untuk mengatasi masalah ini, upgrade ke SDK 2.9.0 atau yang lebih tinggi.
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.4.0 Dihapus org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.3.0 Dihapus org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.2.0 Dihapus org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.1.0 Dihapus org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.0.0 Dihapus org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Apache Beam Java SDK 2.9.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.

Python

Versi SDK Status Komponen yang didukung Detail
2.71.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini akan dihentikan pada 22 Januari 2027.

2.70.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi pada 16 Desember 2026.

2.69.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi mulai 28 Oktober 2026.

2.68.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi pada 22 September 2026.

2.67.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi pada 12 Agustus 2026.

2.66.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi mulai 1 Juli 2026.

2.65.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi pada 12 Mei 2026.

2.64.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi pada 31 Maret 2026.

2.63.0 Didukung Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Versi ini tidak akan digunakan lagi mulai 18 Februari 2026.

2.62.0 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 21 Januari 2026.

2.61.0 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Dihentikan pada 25 November 2025.

2.60.0 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 17 Oktober 2025.

2.59.0 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 11 September 2025.

2.58.1 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 16 Agustus 2025.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.58.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 6 Agustus 2025.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.57.0 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 26 Juni 2025.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.56.0 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 1 Mei 2025.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.55.1 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 8 April 2025.

Masalah umum: Pipeline Python yang menggunakan SDK ini mungkin mengalami masalah macet sesekali. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #30867.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.55.0 Tidak digunakan lagi Library Python SDK inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 25 Maret 2025.

Masalah umum: Transformasi WriteToJson di pipeline lintas bahasa gagal dengan error. Untuk mengatasi masalah ini, upgrade ke Apache Beam 2.55.1. Untuk mengetahui informasi selengkapnya, lihat Masalah #30776: Kegagalan WriteToJson YAML Beam.

Masalah umum: Pipeline Python yang menggunakan SDK ini mungkin mengalami masalah macet sesekali. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #30867.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.54.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql, yaml
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor dalam apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 14 Februari 2025.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.53.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 4 Januari 2025.

Masalah umum: Pipeline yang membaca data dari Cloud Storage menggunakan GcsIO, baik secara langsung maupun tidak langsung, seperti dengan BigQueryIO, mungkin mengalami kerusakan data pada Apache Beam Python SDK versi 2.53.0 hingga 2.58.1. Untuk mengetahui informasi selengkapnya, lihat masalah GitHub Apache Beam #32169.

2.52.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Dihentikan pada 17 November 2024.

2.51.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 12 Oktober 2024.

2.50.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Dihentikan pada 30 Agustus 2024.

2.49.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 17 Juli 2024.

2.48.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 31 Mei 2024.

2.47.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 10 Mei 2024.

2.46.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 10 Maret 2025.

2.45.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 15 Februari 2024.

2.44.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 13 Januari 2024.

2.43.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 17 November 2023.

2.42.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 17 Oktober 2023.

2.41.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 23 Agustus 2023.

2.40.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, ml.inference (kecuali PytorchModelHandlerKeyedTensor dan SklearnModelHandlerPandas), options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 27 Juni 2023.

2.39.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 25 Mei 2023.

2.38.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 20 April 2023.

2.37.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 4 Maret 2023.

Masalah umum:
  • Jika Anda menggunakan WriteToBigQuery dengan parameter ignore_unknown_columns yang ditetapkan ke true, nilai parameter akan diabaikan. Masalah ini telah diperbaiki di versi 2.38.0. Lihat BEAM-14039 untuk mengetahui detailnya.
2.36.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 7 Februari 2023.

Masalah umum:
  • Jika Anda menggunakan WriteToBigQuery dengan parameter ignore_unknown_columns yang ditetapkan ke true, nilai parameter akan diabaikan. Masalah ini telah diperbaiki di versi 2.38.0. Lihat BEAM-14039 untuk mengetahui detailnya.
2.35.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan tujuan berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub
Konektor di bawah apache_beam.io.jdbc: ReadFromJdbc, WriteToJdbc.

Tidak digunakan lagi pada 29 Desember 2022.

2.34.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints, sql
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 11 November 2022.

2.33.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 7 Oktober 2022.

2.32.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 25 Agustus 2022.

2.31.0 Tidak digunakan lagi Library SDK Python inti di bawah modul apache_beam: submodul coders, dataframe (pratinjau), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem, filesystems, fileio
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Dihentikan pada 8 Juli 2022.

2.30.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe (pratinjau), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 10 Juni 2022.

2.29.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe (pratinjau), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 29 April 2022.

2.28.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe (pratinjau), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 22 Februari 2022.

2.27.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe (pratinjau), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 7 Januari 2022.

2.26.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, dataframe (pratinjau), metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 11 Desember 2021.

2.25.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 23 Oktober 2021.

2.24.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 18 September 2021. Selain itu, Apache Beam SDK versi 2.24.0 adalah versi terakhir yang mendukung Python 2 dan Python 3.5.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.23.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 29 Juli 2021.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.22.0 Tidak digunakan lagi Library Core Python SDK di bawah modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait di bawah modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O di bawah modul apache_beam.io.gcp: bigquery, datastore, pubsub

Tidak digunakan lagi pada 8 Juni 2021.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.21.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp

Tidak digunakan lagi pada 27 Mei 2021.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.20.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp

Tidak digunakan lagi pada 15 April 2021.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.19.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp

Tidak digunakan lagi pada 4 Februari 2021.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.18.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp

Tidak digunakan lagi pada 23 Januari 2021.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.17.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp

Tidak digunakan lagi pada 6 Januari 2021.

Dataflow tidak lagi mendukung pipeline yang menggunakan Python 2. Baca informasi selengkapnya di halaman Dukungan Python 2 di Google Cloud Platform.

2.16.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp
Tidak digunakan lagi pada 7 Oktober 2020.
2.15.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp
Tidak digunakan lagi pada 23 Agustus 2020.
2.14.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp

Tidak digunakan lagi pada 1 Agustus 2020.

Masalah umum:
  • Sumber MongoDB yang ditambahkan dalam rilis ini memiliki masalah umum yang dapat mengakibatkan hilangnya data. Lihat BEAM-7866 untuk mengetahui detailnya.
2.13.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp
Tidak digunakan lagi mulai 6 Juni 2020.
2.12.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp
Tidak digunakan lagi mulai 25 April 2020.
2.11.0 Tidak digunakan lagi Library SDK Python inti dalam modul apache_beam: submodul coders, metrics, options, portability, runners.dataflow, runners.direct, transforms, typehints
Sumber dan sink berbasis file serta modul terkait dalam modul apache_beam.io: textio, avroio, parquetio, tfrecordio, gcsfilesystem, localfilesystem
Google Cloud Konektor I/O dalam modul apache_beam.io.gcp
Tidak digunakan lagi mulai 1 Maret 2020.
2.10.0 Tidak digunakan lagi Tidak digunakan lagi mulai 11 Februari 2020.
2.9.0 Tidak digunakan lagi Tidak digunakan lagi mulai 13 Desember 2019.
2.8.0 Tidak digunakan lagi Tidak digunakan lagi mulai 25 Oktober 2019.
2.7.0 Tidak digunakan lagi

Tidak digunakan lagi mulai 3 Oktober 2019.

2.6.0 Tidak digunakan lagi Tidak digunakan lagi mulai 8 Agustus 2019.
2.5.0 Tidak digunakan lagi Tidak digunakan lagi mulai 6 Juni 2019.
2.4.0 Tidak digunakan lagi Tidak digunakan lagi mulai 20 Maret 2019.
2.3.0 Tidak digunakan lagi Tidak digunakan lagi mulai 30 Januari 2019.
2.2.0 Tidak digunakan lagi Tidak digunakan lagi mulai 2 Desember 2018.
2.1.1
2.1.0
Tidak digunakan lagi Tidak digunakan lagi mulai 23 Agustus 2018.
2.0.0 Tidak digunakan lagi Tidak digunakan lagi mulai 17 Mei 2018.

Go

Versi SDK Status Komponen yang didukung Detail
2.71.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini akan dihentikan pada 22 Januari 2027.
2.70.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi pada 16 Desember 2026.
2.69.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi mulai 28 Oktober 2026.
2.68.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi pada 22 September 2026.
2.67.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi pada 12 Agustus 2026.
2.66.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi mulai 1 Juli 2026.
2.65.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi pada 12 Mei 2026.
2.64.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi pada 31 Maret 2026.
2.63.0 Didukung Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Versi ini tidak akan digunakan lagi mulai 18 Februari 2026.
2.62.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 21 Januari 2026.
2.61.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Dihentikan pada 25 November 2025.
2.60.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 17 Oktober 2025.
2.59.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 11 September 2025.
2.58.1 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 16 Agustus 2025.
2.58.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 6 Agustus 2025.
2.57.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 26 Juni 2025.
2.56.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 1 Mei 2025.
2.55.1 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 8 April 2025.
2.55.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 25 Maret 2025.
2.54.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 14 Februari 2025.
2.53.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 4 Januari 2025.
2.52.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Dihentikan pada 17 November 2024.
2.51.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 12 Oktober 2024.
2.50.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Dihentikan pada 30 Agustus 2024.
2.49.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 17 Juli 2024.
2.48.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 31 Mei 2024.
2.47.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 10 Mei 2024.
2.46.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Dihentikan pada 10 Maret 2024.
2.45.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 15 Februari 2024.
2.44.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 13 Januari 2024.
2.43.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 17 November 2023.
2.42.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 17 Oktober 2023.
2.41.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 23 Agustus 2023.
2.40.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 27 Juni 2023.
2.39.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/xlang
Tidak digunakan lagi pada 25 Mei 2023.
2.38.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
Tidak digunakan lagi pada 20 April 2023.
2.37.0 Tidak digunakan lagi Paket di direktori berikut:
- Paket Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/xlang
Tidak digunakan lagi pada 4 Maret 2023.

SDK Dataflow 2.x

Tabel berikut berisi status dukungan untuk SDK Dataflow 2.x, termasuk Dataflow Java SDK dan Dataflow Python SDK:

Java

Lihat catatan rilis Dataflow SDK 2.x untuk Java untuk mengetahui informasi perubahan.

Versi SDK Status Detail
2.5.0 Tidak digunakan lagi

Tidak digunakan lagi mulai 6 Juni 2019.

Masalah umum:
  • Dalam kasus tertentu, pengguna Dataflow Java SDK 2.5.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.4.0 Dihapus

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Dataflow Java SDK 2.5.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.3.0 Dihapus

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Dataflow Java SDK 2.5.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.2.0 Dihapus

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Dataflow Java SDK 2.5.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.1.0 Dihapus

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Dataflow Java SDK 2.5.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.0.0 Dihapus

Dihentikan mulai 12 Agustus 2020.

Versi ini dihentikan karena penghentian dukungan untuk JSON-RPC dan Endpoint Batch HTTP Global.

Masalah umum:
  • Dalam kasus tertentu, pengguna Dataflow Java SDK 2.5.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.
2.0.0-beta3
2.0.0-beta2
2.0.0-beta1
Dihapus

Dihentikan mulai 28 Februari 2018.

Masalah umum:
  • Dalam kasus tertentu, pengguna Dataflow Java SDK 2.5.0 dan yang lebih lama mungkin mengalami duplikasi data saat membaca file dari Cloud Storage. Duplikasi dapat terjadi jika semua kondisi berikut terpenuhi:
    • Anda membaca file dengan encoding konten yang ditetapkan ke gzip, dan file tersebut ditranskode dekompresi secara dinamis oleh Cloud Storage.
    • Ukuran file (yang didekompresi) lebih besar dari 2,14 GB.
    • Aliran input mengalami error (dan dibuat ulang) setelah 2,14 GB dibaca.
    Sebagai solusinya, jangan tetapkan header content-encoding, dan simpan file terkompresi di Cloud Storage dengan ekstensi yang tepat (misalnya, gz untuk gzip). Untuk file yang ada, Anda dapat memperbarui header dan nama file content-encoding dengan perintah gcloud storage.

Python

Lihat catatan rilis Dataflow SDK 2.x untuk Python untuk mengetahui informasi perubahan.

Versi SDK Status Detail
2.5.0 Tidak digunakan lagi Tidak digunakan lagi mulai 6 Juni 2019.
2.4.0 Tidak digunakan lagi Tidak digunakan lagi mulai 20 Maret 2019.
2.3.0 Tidak digunakan lagi Tidak digunakan lagi mulai 30 Januari 2019.
2.2.0 Tidak digunakan lagi Tidak digunakan lagi mulai 2 Desember 2018.
2.1.1 Tidak digunakan lagi Tidak digunakan lagi mulai 23 Agustus 2018.
Memperbaiki masalah kompatibilitas dengan paket Python six.
Lihat catatan rilis untuk mengetahui informasi selengkapnya.
2.1.0 Tidak digunakan lagi Tidak digunakan lagi mulai 23 Agustus 2018.
Rilis ini memiliki masalah kompatibilitas dengan paket Python six 1.11.0.
Lihat Catatan Rilis untuk mengetahui informasi selengkapnya.
2.0.0 Tidak digunakan lagi Tidak digunakan lagi mulai 17 Mei 2018.
Rilis ini memiliki masalah kompatibilitas dengan paket Python six 1.11.0.
Lihat Catatan Rilis untuk mengetahui informasi selengkapnya.
0.6.0
0.5.5
0.5.1
0.4.4
0.4.3
0.4.2
0.4.1
0.4.0
Dihapus Dihentikan mulai 29 Januari 2018.
0.2.7 dan versi sebelumnya Dihapus Dihentikan sejak 23 Maret 2017.