Listen der Image-Versionen für Managed Service for Apache Spark-Cluster

"Auf Ubuntu und Debian basierende Image-Versionen-Cluster | Google Cloud"

Google Managed Service for Apache Spark verwendet Ubuntu-, Debian- und Rocky Linux-Image-Versionen, um das Betriebssystem, Big-Data-Komponenten und Google Cloud Connectors in einem Paket zu bündeln, das auf einem Cluster bereitgestellt wird. Weitere Informationen finden Sie unter Versionierung von Managed Service for Apache Spark.

Hinweise:

  • Image-Versionen von Managed Service for Apache Spark werden nach der ersten Veröffentlichung 24 Monate lang unterstützt.
  • Im Allgemeinen sind Image-Versionen von Managed Service for Apache Spark nach dem Ende des Supports noch 24 Monate lang verfügbar. Der Verfügbarkeitszeitraum kann jedoch kürzer sein, wenn das Supportdatum für ein Image verlängert wird.

Standard-Image-Version von Managed Service for Apache Spark

Managed Service for Apache Spark aktualisiert die Standard-Image-Version nach dem Datum der allgemeinen Verfügbarkeit auf die neueste allgemein verfügbare Debian-basierte Version von Managed Service for Apache Spark.

Unterstützte Image-Versionen von Managed Service for Apache Spark

Debian-Images

Die folgenden Debian-basierten Image-Versionen werden in Managed Service for Apache Spark-Clustern unterstützt. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.

Version Zuletzt aktualisiert Veröffentlicht am Unterstützt bis Verfügbar bis Hinweise
3.0-debian12 03.05.2026 08.09.2025 TBD TBD Vorschaurelease
2.3-debian12 27.04.2026 09.06.2025 09.06.2027 09.06.2029 Release mit allgemeiner Verfügbarkeit
2.2-debian12 27.04.2026 08.12.2023 31.03.2027 31.12.2027 Release mit allgemeiner Verfügbarkeit Am 13. September 2024 wird die Image-Version 2.2 zur Standard-Image-Version.
2.1-debian11 27.04.2026 12.12.2022 31.03.2026 31.12.2026 Release mit allgemeiner Verfügbarkeit

Ubuntu-Images

Die folgenden Ubuntu LTS-basierten Image-Versionen werden in Managed Service for Apache Spark-Clustern unterstützt. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.

Version Zuletzt aktualisiert Veröffentlicht am Unterstützt bis Verfügbar bis Hinweise
3.0-ubuntu24 03.05.2026 08.09.2025 TBD TBD Vorschaurelease
2.3-ubuntu22 27.04.2026 09.06.2025 09.06.2027 09.06.2029 Release mit allgemeiner Verfügbarkeit
2.2-ubuntu22 27.04.2026 08.12.2023 31.03.2027 31.12.2027 Release mit allgemeiner Verfügbarkeit
2.1-ubuntu20 27.04.2026 12.12.2022 31.03.2026 31.12.2026 Release mit allgemeiner Verfügbarkeit

Rocky Linux-Images

Die folgenden Rocky Linux-basierten Image-Versionen werden in Managed Service for Apache Spark-Clustern unterstützt. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.

Version Zuletzt aktualisiert Veröffentlicht am Unterstützt bis Verfügbar bis Hinweise
3.0-rocky9 03.05.2026 08.09.2025 TBD TBD Vorschaurelease
2.3-rocky9 27.04.2026 09.06.2025 09.06.2027 09.06.2029 Release mit allgemeiner Verfügbarkeit
2.2-rocky9 27.04.2026 08.12.2023 31.03.2027 31.12.2027 Release mit allgemeiner Verfügbarkeit
2.1-rocky8 27.04.2026 12.12.2022 31.03.2026 31.12.2026 Release mit allgemeiner Verfügbarkeit

Nicht unterstützte Image-Versionen von Managed Service for Apache Spark

Die folgenden Versionen von Managed Service for Apache Spark werden nicht unterstützt. Managed Service for Apache Spark bietet keine Aktualisierungen und keinen Support für Cluster, die mit diesen Versionen erstellt wurden. Die Versionen 1.x und 2.0 erreichen am 25. August 2026 das End of Life. Wenn Sie nicht unterstützte Versionen verwenden, müssen Sie Ihre Cluster auf unterstützte Images aktualisieren.

Version Umfasst Veröffentlicht am Zuletzt aktualisiert Verfügbar bis Hinweise
2.0-debian10/-ubuntu18/-rocky8 Apache Spark 3.1.3
Apache Hadoop 3.2.4
Apache Pig 0.18.0-SNAPSHOT
Apache Hive 3.1.3
Cloud Storage-Connector 2.2.30-hadoop3
Python 3.8
Scala 2.12.14
Zookeeper 3.4.14
2021/01/22:debian10/ubuntu18
2022/02/18:rocky8
24.02.2026 25.08.2026 Wird seit dem 24.02.2026 nicht mehr unterstützt.
2.0.160-debian10/-ubuntu18/-rocky8 war die letzte veröffentlichte Version.
2.0-centos8 Apache Spark 3.1.2
Apache Hadoop 3.2.2
Apache Pig 0.18.0-SNAPSHOT
Apache Hive 3.1.2
Cloud Storage-Connector 2.2.4-hadoop3
Python 3.8
Scala 2.12.14
Zookeeper 3.4.14
16.03.2021 01.02.2022 25.08.2026 Wird seit dem 01.02.2022 nicht mehr unterstützt.
2.0.30-centos8 war die letzte veröffentlichte Version.
1.5-debian10/-ubuntu18/-rocky8 Apache Spark 2.4.8
Apache Hadoop 2.10.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage-Connector 2.1.9-hadoop2
Python 3.7
Scala 2.12.10
Zookeeper 3.4.14
2020/03/25:debian10/ubuntu18
2022/02/18:rocky8
28.04.2023 25.08.2026 Wird seit dem 28.04.2023 nicht mehr unterstützt.
1.5.89-debian10/-ubuntu18/-rocky8 war die letzte veröffentlichte Version.
1.5-centos8 Apache Spark 2.4.8
Apache Hadoop 2.10.1
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage-Connector 2.1.5-hadoop2
Python 3.7
Scala 2.12.10
Zookeeper 3.4.14
14.12.2020 01.02.2022 25.08.2026 Wird seit dem 01.02.2022 nicht mehr unterstützt.
1.5.56-centos8 war die letzte veröffentlichte Version.
1.4-debian10/-ubuntu18 Apache Spark 2.4.8
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage-Connector 1.9.18-hadoop2
Python 3.6
Scala 2.11.12
Zookeeper 3.4.14
22.03.2019 01.02.2022 25.08.2026 Wird seit dem 01.02.2022 nicht mehr unterstützt.
1.4.80-debian10/-ubuntu18 war die letzte veröffentlichte Version.
1.4-debian9 Apache Spark 2.4.5
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage-Connector 1.9.17-hadoop2
Python 3.6
Scala 2.11.12
Zookeeper 3.4.13
22.03.2019 10.07.2020 25.08.2026 Wird seit dem 10.07.2020 nicht mehr unterstützt.
1.4.33-debian9 war die letzte veröffentlichte Version.
1.3-debian10/-ubuntu18 Apache Spark 2.3.4
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage connector 1.9.18-hadoop2
Python 2.7
Scala 2.11.8
Zookeeper 3.4.13
29.06.2018 22.12.2021 25.08.2026 Wird seit dem 01.08.2021 nicht mehr unterstützt.
1.3.95-debian10/-ubuntu18 war die letzte veröffentlichte Version, in der die Sicherheitslücken von log4j2 behoben wurden. Hinweis: Früher veröffentlichte Versionen sind anfällig und müssen aktualisiert werden.
1.3-debian9 Apache Spark 2.3.4
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage-Connector 1.9.17-hadoop2
Python 2.7
Scala 2.11.8
Zookeeper 3.4.13
29.06.2018 10.07.2020 25.08.2026 Wird seit dem 10.07.2020 nicht mehr unterstützt.
1.3.62-debian9 war die letzte veröffentlichte Version.
1.2-debian9 Apache Spark 2.2.3
Apache Hadoop 2.8.5
Apache Pig 0.16.0
Apache Hive 2.1.1
Cloud Storage-Connector 1.6.10-hadoop2
BigQuery-Connector 0.10.11-hadoop2
Python 2.7
Scala 2.11.8
Zookeeper 3.4.13
21.07.2017 10.07.2020 Nicht verfügbar Wird seit dem 10.07.2020 nicht mehr unterstützt.
1.2.102-debian9 war die letzte veröffentlichte Version.
1.1-debian9 Apache Spark 2.0.2
Apache Hadoop 2.7.7
Apache Pig 0.16.0
Apache Hive 2.1.1
Cloud Storage-Connector 1.6.10-hadoop2
BigQuery-Connector 0.10.11-hadoop2
08.08.2016 26.09.2019 Nicht verfügbar Wird seit dem 01.10.2019 nicht mehr unterstützt.
1.1.121-debian9 ist die letzte veröffentlichte Version.
1.0-debian9 Apache Spark 1.6.2
Apache Hadoop 2.7.4
Apache Pig 0.15.0
Apache Hive 1.2.1
Cloud Storage-Connector 1.6.10-hadoop2
BigQuery-Connector 0.10.11-hadoop2
22.02.2016 09.05.2019 Nicht verfügbar Erste Veröffentlichung des GA-Images.
Wird seit dem 01.04.2019 nicht mehr unterstützt.
1.0.119-debian9 war die letzte veröffentlichte Version.
0.2 Apache Spark 1.5.2
Apache Hadoop 2.7.1
Apache Pig 0.15.0
Apache Hive 1.2.1
Cloud Storage-Connector 1.5.1-hadoop2
BigQuery-Connector 0.7.7-hadoop2
18.11.2015 02.08.2016 Nicht verfügbar Beta-Image zweites Release
0.1 Apache Spark 1.5.0
Apache Hadoop 2.7.1
Apache Pig 0.14.10
Apache Hive 1.0
Cloud Storage-Connector 1.5.1-hadoop2
BigQuery-Connector 0.7.7-hadoop2
23.9.2015 02.08.2016 Nicht verfügbar Beta-Release von Managed Service for Apache Spark
Spark 1.5 wurde basierend auf Hive 1.2 kompiliert.