Daftar versi image cluster Managed Service for Apache Spark

Managed Service untuk Apache Spark Google menggunakan versi image Ubuntu, Debian, dan Rocky Linux untuk menggabungkan sistem operasi, komponen big data, dan Google Cloud konektor menjadi satu paket yang di-deploy di cluster. Untuk mengetahui informasi selengkapnya, lihat Versi Managed Service untuk Apache Spark.

Catatan:

• Versi image Managed Service untuk Apache Spark didukung selama 24 bulan setelah rilis awal.
• Umumnya, versi image Managed Service untuk Apache Spark tersedia selama 24 bulan setelah tanggal akhir dukungannya, tetapi periode ketersediaan dapat dipersingkat jika tanggal dukungan image diperpanjang.

Catatan: Pada 25 Agustus 2026, versi image 1.x dan 2.0 tidak akan tersedia untuk digunakan dalam membuat cluster (lihat tanggal "Tersedia hingga" di versi image yang tidak didukung). Untuk menghindari masalah pembuatan cluster, mendapatkan manfaat dari fitur terbaru, dan memenuhi syarat untuk mendapatkan dukungan Google, buat ulang dan update cluster yang ada untuk menggunakan versi image terbaru yang didukung.

Versi image Managed Service untuk Apache Spark default

Managed Service untuk Apache Spark mengupdate versi image default ke Managed Service untuk Apache Spark berbasis Debian terbaru yang tersedia secara umum setelah tanggal rilis Ketersediaan umum (GA).

Versi image Managed Service untuk Apache Spark yang didukung

Managed Service untuk Apache Spark mencegah pembuatan cluster dengan versi image sebelum 1.3.95, 1.4.77, 1.5.53, dan 2.0.27, yang terpengaruh oleh kerentanan keamanan Apache Log4j Managed Service untuk Apache Spark juga mencegah pembuatan cluster untuk versi image Managed Service untuk Apache Spark 0.x, 1.0.x, 1.1.x, dan 1.2.x. Managed Service untuk Apache Spark menyarankan agar Anda membuat cluster Managed Service untuk Apache Spark dengan versi image sub-minor terbaru jika memungkinkan. Lihat catatan rilis Managed Service untuk Apache Spark guna mengetahui informasi update image dan log4j tertentu.

Image Debian

Versi image berbasis Debian berikut didukung di cluster Managed Service untuk Apache Spark. Perhatikan bahwa cluster baru akan dibuat untuk menyertakan patch sub-minor yang telah dibuat ke versi sejak dirilis.

Saat membuat cluster berbasis Debian, Anda dapat menghilangkan akhiran Kode Distribusi OS versi image, misalnya dengan menentukan 2.0 untuk memilih image 2.0-debian10. Akhiran OS harus digunakan untuk memilih image berbasis Rocky Linux atau Ubuntu, misalnya dengan menentukan 2.0-ubuntu18. Lihat Memilih versi untuk contoh pemilihan image.

Versi	Terakhir diperbarui	Dirilis pada	Didukung hingga	Tersedia hingga	Catatan
3.0-debian12	2026/05/03	2025/09/08	Ditentukan Nanti	Ditentukan Nanti	Rilis pratinjau.
2.3-debian12	2026/05/19	2025/06/09	2027/06/09	2029/06/09	Rilis ketersediaan umum.
2.2-debian12	2026/05/19	2023/12/08	2027/03/31	2027/12/31	Rilis ketersediaan umum. Versi image 2.2 akan menjadi versi image default pada 13 September 2024.
2.1-debian11	2026/05/19	2022/12/12	2026/03/31	2026/12/31	Rilis ketersediaan umum.

Image Ubuntu

Versi image berbasis Ubuntu LTS berikut didukung di cluster Managed Service untuk Apache Spark. Perhatikan bahwa cluster baru akan dibuat untuk menyertakan patch sub-minor yang telah dibuat ke versi sejak dirilis.

Versi	Terakhir diperbarui	Dirilis pada	Didukung hingga	Tersedia hingga	Catatan
3.0-ubuntu24	2026/05/03	2025/09/08	Ditentukan Nanti	Ditentukan Nanti	Rilis pratinjau.
2.3-ubuntu22	2026/05/19	2025/06/09	2027/06/09	2029/06/09	Rilis ketersediaan umum.
2.2-ubuntu22	2026/05/19	2023/12/08	2027/03/31	2027/12/31	Rilis ketersediaan umum.
2.1-ubuntu20	2026/05/19	2022/12/12	2026/03/31	2026/12/31	Rilis ketersediaan umum.

Image Rocky Linux

Versi image berbasis Rocky Linux berikut didukung di cluster Managed Service untuk Apache Spark. Perhatikan bahwa cluster baru akan dibuat untuk menyertakan patch sub-minor yang telah dibuat ke versi sejak dirilis.

Versi	Terakhir diperbarui	Dirilis pada	Didukung hingga	Tersedia hingga	Catatan
3.0-rocky9	2026/05/03	2025/09/08	Ditentukan Nanti	Ditentukan Nanti	Rilis pratinjau.
2.3-rocky9	2026/05/19	2025/06/09	2027/06/09	2029/06/09	Rilis ketersediaan umum.
2.2-rocky9	2026/05/19	2023/12/08	2027/03/31	2027/12/31	Rilis ketersediaan umum.
2.1-rocky8	2026/05/19	2022/12/12	2026/03/31	2026/12/31	Rilis ketersediaan umum.

Versi image Managed Service untuk Apache Spark yang tidak didukung

Klik link ini untuk mendownload skrip yang dapat Anda jalankan untuk memeriksa apakah project atau organisasi Anda menggunakan image Managed Service untuk Apache Spark yang tidak didukung.

Versi Managed Service untuk Apache Spark berikut tidak didukung. Managed Service untuk Apache Spark tidak menyediakan update dan dukungan untuk cluster yang dibuat dengan versi ini. Versi 1.x dan 2.0 akan mencapai akhir siklus proses (EOL) pada 25 Agustus 2026. Jika Anda menjalankan versi yang tidak didukung, Anda harus mengupgrade cluster ke image yang didukung.

Versi	Mencakup	Dirilis Pada	Terakhir Diperbarui	Tersedia hingga	Catatan
2.0-debian10/-ubuntu18/-rocky8	Apache Spark 3.1.3 Apache Hadoop 3.2.4 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.3 Konektor Cloud Storage 2.2.30-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14	2021/01/22:debian10/ubuntu18 2022/02/18:rocky8	24/02/2026	25/08/2026	Tidak didukung mulai 24/02/2026. 2.0.160-debian10/-ubuntu18/-rocky8 adalah versi rilis terakhir.
2.0-centos8	Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Konektor Cloud Storage 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14	16/03/2021	01/02/2022	25/08/2026	Tidak didukung mulai 01/02/2022. 2.0.30-centos8 adalah versi rilis terakhir.
1.5-debian10/-ubuntu18/-rocky8	Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Konektor Cloud Storage 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14	2020/03/25:debian10/ubuntu18 2022/02/18:rocky8	28/04/2023	25/08/2026	Tidak didukung mulai 28/04/2023. 1.5.89-debian10/-ubuntu18/-rocky8 adalah versi rilis terakhir.
1.5-centos8	Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Konektor Cloud Storage 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14	14/12/2020	01/02/2022	25/08/2026	Tidak didukung mulai 01/02/2022. 1.5.56-centos8 adalah versi rilis terakhir.
1.4-debian10/-ubuntu18	Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Konektor Cloud Storage 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14	22/03/2019	01/02/2022	25/08/2026	Tidak didukung mulai 01/02/2022. 1.4.80-debian10/-ubuntu18 adalah versi rilis terakhir.
1.4-debian9	Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Konektor Cloud Storage 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13	22/03/2019	10/07/2020	25/08/2026	Tidak didukung mulai 10/07/2020. 1.4.33-debian9 adalah versi rilis terakhir.
1.3-debian10/-ubuntu18	Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Konektor Cloud Storage 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13	29/06/2018	22/12/2021	25/08/2026	Tidak didukung mulai 01/08/2021. 1.3.95-debian10/-ubuntu18 adalah versi rilis terakhir, yang telah mengatasi kerentanan log4j2. Catatan: versi yang dirilis sebelumnya rentan dan harus diupgrade.
1.3-debian9	Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Konektor Cloud Storage 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13	29/06/2018	10/07/2020	25/08/2026	Tidak didukung mulai 10/07/2020. 1.3.62-debian9 adalah versi rilis terakhir.
1.2-debian9	Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Konektor Cloud Storage 1.6.10-hadoop2 Konektor BigQuery 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13	21/07/2017	10/07/2020	Tidak tersedia	Tidak didukung mulai 10/07/2020. 1.2.102-debian9 adalah versi rilis terakhir.
1.1-debian9	Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Konektor Cloud Storage 1.6.10-hadoop2 Konektor BigQuery 0.10.11-hadoop2	08/08/2016	26/09/2019	Tidak tersedia	Tidak didukung mulai 01/10/2019. 1.1.121-debian9 adalah versi rilis terakhir.
1.0-debian9	Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Konektor Cloud Storage 1.6.10-hadoop2 Konektor BigQuery 0.10.11-hadoop2	22/02/2016	09/05/2019	Tidak tersedia	Rilis pertama image GA. Tidak didukung mulai 01/04/2019. 1.0.119-debian9 adalah versi rilis terakhir.
0.2	Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 Konektor Cloud Storage 1.5.1-hadoop2 Konektor BigQuery 0.7.7-hadoop2	18/11/2015	02/08/2016	Tidak tersedia	Rilis kedua image beta.
0.1	Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Konektor Cloud Storage 1.5.1-hadoop2 Konektor BigQuery 0.7.7-hadoop2	23/09/2015	02/08/2016	Tidak tersedia	Rilis beta Managed Service untuk Apache Spark. Spark 1.5 telah dikompilasi dengan Hive 1.2.