Google Managed Service for Apache Spark verwendet Ubuntu-, Debian- und Rocky Linux-Image-Versionen, um das Betriebssystem, Big Data-Komponenten und Google Cloud Connectors in einem Paket zu bündeln, das auf einem Cluster bereitgestellt wird. Weitere Informationen finden Sie unter Versionsverwaltung für Managed Service for Apache Spark.
Hinweise:
- Managed Service for Apache Spark-Imageversionen werden nach ihrer ursprünglichen Veröffentlichung 24 Monate lang unterstützt.
- Im Allgemeinen sind Managed Service for Apache Spark-Imageversionen 24 Monate nach dem End-of-Support-Datum verfügbar. Der Verfügbarkeitszeitraum kann jedoch verkürzt werden, wenn das Supportdatum für ein Image verlängert wird.
Standardversion des Managed Service for Apache Spark-Images
Managed Service for Apache Spark aktualisiert die Standardversion des Images auf die neueste allgemein verfügbare Debian-basierte Version von Managed Service for Apache Spark nach dem Datum der allgemeinen Verfügbarkeit (GA).
Unterstützte Managed Service for Apache Spark-Imageversionen
Debian-Images
Die folgenden Debian-basierten Image-Versionen werden in Managed Service for Apache Spark-Clustern unterstützt. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.
| Version | Zuletzt aktualisiert | Veröffentlicht am | Unterstützt bis | Verfügbar bis | Hinweise |
|---|---|---|---|---|---|
| 3.0-debian12 | 03.05.2026 | 08.09.2025 | TBD | TBD | Vorschaurelease |
| 2.3-debian12 | 19.05.2026 | 09.06.2025 | 09.06.2027 | 09.06.2029 | Release mit allgemeiner Verfügbarkeit |
| 2.2-debian12 | 19.05.2026 | 08.12.2023 | 2027/03/31 | 2027/12/31 | Release mit allgemeiner Verfügbarkeit Die Imageversion 2.2 wird am 13. September 2024 zur Standard-Imageversion. |
| 2.1-debian11 | 19.05.2026 | 12.12.2022 | 2026/03/31 | 2026/12/31 | Release mit allgemeiner Verfügbarkeit |
Ubuntu-Images
Die folgenden Ubuntu LTS-basierten Image-Versionen werden in Managed Service for Apache Spark-Clustern unterstützt. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.
| Version | Zuletzt aktualisiert | Veröffentlicht am | Unterstützt bis | Verfügbar bis | Hinweise |
|---|---|---|---|---|---|
| 3.0-ubuntu24 | 03.05.2026 | 08.09.2025 | TBD | TBD | Vorschaurelease |
| 2.3-ubuntu22 | 19.05.2026 | 09.06.2025 | 09.06.2027 | 09.06.2029 | Release mit allgemeiner Verfügbarkeit |
| 2.2-ubuntu22 | 19.05.2026 | 08.12.2023 | 2027/03/31 | 2027/12/31 | Release mit allgemeiner Verfügbarkeit |
| 2.1-ubuntu20 | 19.05.2026 | 12.12.2022 | 2026/03/31 | 2026/12/31 | Release mit allgemeiner Verfügbarkeit |
Rocky Linux-Images
Die folgenden auf Rocky Linux basierenden Image-Versionen werden in Managed Service for Apache Spark-Clustern unterstützt. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.
| Version | Zuletzt aktualisiert | Veröffentlicht am | Unterstützt bis | Verfügbar bis | Hinweise |
|---|---|---|---|---|---|
| 3.0-rocky9 | 03.05.2026 | 08.09.2025 | TBD | TBD | Vorschaurelease |
| 2.3-rocky9 | 19.05.2026 | 09.06.2025 | 09.06.2027 | 09.06.2029 | Release mit allgemeiner Verfügbarkeit |
| 2.2-rocky9 | 19.05.2026 | 08.12.2023 | 2027/03/31 | 2027/12/31 | Release mit allgemeiner Verfügbarkeit |
| 2.1-rocky8 | 19.05.2026 | 12.12.2022 | 2026/03/31 | 2026/12/31 | Release mit allgemeiner Verfügbarkeit |
Nicht unterstützte Managed Service for Apache Spark-Imageversionen
Die folgenden Versionen von Managed Service for Apache Spark werden nicht unterstützt. Managed Service for Apache Spark bietet keine Aktualisierungen und keine Unterstützung für Cluster, die mit diesen Versionen erstellt wurden. Die Versionen 1.x und 2.0 erreichen am 25. August 2026 das End of Life. Wenn Sie nicht unterstützte Versionen verwenden, müssen Sie Ihre Cluster auf unterstützte Images aktualisieren.
| Version | Umfasst | Veröffentlicht am | Zuletzt aktualisiert | Verfügbar bis | Hinweise |
|---|---|---|---|---|---|
2.0-debian10/-ubuntu18/-rocky8 |
Apache Spark 3.1.3 Apache Hadoop 3.2.4 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.3 Cloud Storage-Connector 2.2.30-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
2021/01/22:debian10/ubuntu18 2022/02/18:rocky8 |
2026/02/24 | 25.08.2026 | Wird seit dem 24.02.2026 nicht mehr unterstützt. 2.0.160-debian10/-ubuntu18/-rocky8 war die letzte veröffentlichte Version. |
2.0-centos8 |
Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Cloud Storage-Connector 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
16.03.2021 | 2022-02-01 | 25.08.2026 | Wird seit dem 01.02.2022 nicht mehr unterstützt. 2.0.30-centos8 war die letzte veröffentlichte Version. |
1.5-debian10/-ubuntu18/-rocky8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage-Connector 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/03/25:debian10/ubuntu18 2022/02/18:rocky8 |
28.04.2023 | 25.08.2026 | Wird seit dem 28.04.2023 nicht mehr unterstützt. 1.5.89-debian10/-ubuntu18/-rocky8 war die letzte veröffentlichte Version. |
1.5-centos8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage-Connector 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/12/14 | 2022-02-01 | 25.08.2026 | Wird seit dem 01.02.2022 nicht mehr unterstützt. 1.5.56-centos8 war die letzte veröffentlichte Version. |
1.4-debian10/-ubuntu18 |
Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage-Connector 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14 |
22.03.2019 | 2022-02-01 | 25.08.2026 | Wird seit dem 01.02.2022 nicht mehr unterstützt. 1.4.80-debian10/-ubuntu18 war die letzte veröffentlichte Version. |
1.4-debian9 |
Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage-Connector 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13 |
22.03.2019 | 10.07.2020 | 25.08.2026 | Seit 10.07.2020 nicht mehr unterstützt. 1.4.33-debian9 war die letzte veröffentlichte Version. |
1.3-debian10/-ubuntu18 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29.06.2018 | 22.12.2021 | 25.08.2026 | Wird seit 01.08.2021 nicht mehr unterstützt. 1.3.95-debian10/-ubuntu18 war die letzte veröffentlichte Version, in der die Sicherheitslücken in log4j2 behoben wurden. Hinweis: Früher veröffentlichte Versionen sind anfällig und müssen aktualisiert werden. |
1.3-debian9 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage-Connector 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29.06.2018 | 10.07.2020 | 25.08.2026 | Seit 10.07.2020 nicht mehr unterstützt. 1.3.62-debian9 war die letzte veröffentlichte Version. |
1.2-debian9 |
Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Cloud Storage-Connector 1.6.10-hadoop2 BigQuery-Connector 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
21.07.2017 | 10.07.2020 | Nicht verfügbar | Wird seit 10.07.2020 nicht mehr unterstützt. 1.2.102-debian9 war die letzte veröffentlichte Version. |
1.1-debian9 |
Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Cloud Storage-Connector 1.6.10-hadoop2 BigQuery-Connector 0.10.11-hadoop2 |
08.08.2016 | 26.09.2019 | Nicht verfügbar | Wird seit 01.10.2019 nicht mehr unterstützt. 1.1.121-debian9 ist die letzte veröffentlichte Version. |
1.0-debian9 |
Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Cloud Storage-Connector 1.6.10-hadoop2 BigQuery-Connector 0.10.11-hadoop2 |
22.02.2016 | 09.05.2019 | Nicht verfügbar | Erste Veröffentlichung des GA-Images. Seit dem 1. April 2019 nicht mehr unterstützt. 1.0.119-debian9 war die endgültige Version. |
0.2 |
Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 Cloud Storage-Connector 1.5.1-hadoop2 BigQuery-Connector 0.7.7-hadoop2 |
18.11.2015 | 2.8.2016 | Nicht verfügbar | Beta-Image zweites Release |
0.1 |
Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Cloud Storage-Connector 1.5.1-hadoop2 BigQuery-Connector 0.7.7-hadoop2 |
23.9.2015 | 2.8.2016 | Nicht verfügbar | Betaversion von Managed Service for Apache Spark Spark 1.5 wurde basierend auf Hive 1.2 kompiliert. |