Managed Service for Apache Spark di Google utilizza le versioni immagine di Ubuntu, Debian e Rocky Linux per raggruppare il sistema operativo, i componenti big data e i Google Cloud connettori in un singolo pacchetto di cui viene eseguito il deployment in un cluster. Per saperne di più, consulta la sezione Controllo delle versioni di Managed Service for Apache Spark.
Note:
- Le versioni immagine di Managed Service for Apache Spark sono supportate per 24 mesi dopo la release iniziale.
- In genere, le versioni immagine di Managed Service for Apache Spark sono disponibili per 24 mesi dopo la data di fine del supporto, ma un periodo di disponibilità può essere ridotto se la data di supporto di un'immagine viene estesa.
Versione immagine predefinita di Managed Service for Apache Spark
Managed Service for Apache Spark aggiorna la versione immagine predefinita all'ultima versione di Managed Service for Apache Spark basata su Debian disponibile a livello generale dopo la data di rilascio in disponibilità generale.
Versioni immagine di Managed Service for Apache Spark supportate
Immagini Debian
Le seguenti versioni immagine basate su Debian sono supportate nei cluster Managed Service for Apache Spark. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dalla sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto fino al giorno | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-debian12 | 08/09/2025 | 08/09/2025 | Da definire | Da definire | Versione di anteprima. |
| 2.3-debian12 | 02/04/2026 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release in disponibilità generale. |
| 2.2-debian12 | 24/03/2026 | 08/12/2023 | 31/03/2027 | 31/12/2027 | Release in disponibilità generale. La versione immagine 2.2 diventerà la versione immagine predefinita il 13 settembre 2024. |
| 2.1-debian11 | 24/03/2026 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Release in disponibilità generale. |
| 2.0-debian10 | 24/02/2026 | 22/01/2021 | 30/09/2025 | 31/07/2026 | Release in disponibilità generale. |
Immagini Ubuntu
Le seguenti versioni immagine basate su Ubuntu LTS sono supportate nei cluster Managed Service for Apache Spark. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dalla sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto fino al giorno | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-ubuntu24 | 08/09/2025 | 08/09/2025 | Da definire | Da definire | Versione di anteprima. |
| 2.3-ubuntu22 | 02/04/2026 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release in disponibilità generale. |
| 2.2-ubuntu22 | 24/03/2026 | 08/12/2023 | 31/03/2027 | 31/12/2027 | Release in disponibilità generale. |
| 2.1-ubuntu20 | 24/03/2026 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Release in disponibilità generale. |
| 2.0-ubuntu18 | 24/02/2026 | 22/01/2021 | 30/09/2025 | 31/07/2026 | Release in disponibilità generale. |
Immagini Rocky Linux
Le seguenti versioni immagine basate su Rocky Linux sono supportate nei cluster Managed Service for Apache Spark. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dalla sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto fino al giorno | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-rocky9 | 08/09/2025 | 08/09/2025 | Da definire | Da definire | Versione di anteprima. |
| 2.3-rocky9 | 02/04/2026 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release in disponibilità generale. |
| 2.2-rocky9 | 24/03/2026 | 08/12/2023 | 31/03/2027 | 31/12/2027 | Release in disponibilità generale. |
| 2.1-rocky8 | 24/03/2026 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Release in disponibilità generale. |
| 2.0-rocky8 | 24/02/2026 | 18/02/2022 | 30/09/2025 | 31/07/2026 | Release in disponibilità generale. |
Versioni immagine di Managed Service for Apache Spark non supportate
Le seguenti versioni di Managed Service for Apache Spark non sono supportate. Managed Service for Apache Spark non fornisce aggiornamenti e supporto per i cluster creati con queste versioni. Anche se puoi continuare a eseguire un cluster creato con una versione non supportata, ti consigliamo di sostituire il cluster con un nuovo cluster creato con una versione supportata.
| Versione | Include | Data di rilascio | Ultimo aggiornamento | Note |
|---|---|---|---|---|
1.5-debian10/-ubuntu18/-rocky8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/03/25:debian10/ubuntu18 2022/02/18:rocky8 |
28/04/2023 | Non supportato a partire dal 28/04/2023. 1.5.89-debian10/-ubuntu18/-rocky8 è stata l'ultima versione rilasciata. |
2.0-centos8 |
Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Connettore Cloud Storage 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
16/03/2021 | 01/02/2022 | Non supportato a partire dal 01/02/2022. 2.0.30-centos8 è stata l'ultima versione rilasciata. |
1.5-centos8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
14/12/2020 | 01/02/2022 | Non supportato a partire dal 01/02/2022. 1.5.56-centos8 è stata l'ultima versione rilasciata. |
1.4-debian10/-ubuntu18 |
Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14 |
22/03/2019 | 01/02/2022 | Non supportato a partire dal 01/02/2022. 1.4.80-debian10/-ubuntu18 è stata l'ultima versione rilasciata. |
1.3-debian10/-ubuntu18 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 22/12/2021 | Non supportato a partire dal 01/08/2021. 1.3.95-debian10/-ubuntu18 è stata l'ultima versione rilasciata, che include le vulnerabilità di log4j2. Nota: le versioni rilasciate in precedenza sono vulnerabili e devono essere aggiornate. |
1.4-debian9 |
Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13 |
22/03/2019 | 10/07/2020 | Non supportato a partire dal 10/07/2020. 1.4.33-debian9 è stata l'ultima versione rilasciata. |
1.3-debian9 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 10/07/2020 | Non supportato a partire dal 10/07/2020. 1.3.62-debian9 è stata l'ultima versione rilasciata. |
1.2-debian9 |
Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
21/07/2017 | 10/07/2020 | Non supportato a partire dal 10/07/2020. 1.2.102-debian9 è stata l'ultima versione rilasciata. |
1.1-debian9 |
Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 |
08/08/2016 | 26/09/2019 | Non supportato a partire dal 01/10/2019. 1.1.121-debian9 è l'ultima versione rilasciata. |
1.0-debian9 |
Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 |
22/02/2016 | 09/05/2019 | Prima release dell'immagine in disponibilità generale. Non supportato a partire dal 01/04/2019. 1.0.119-debian9 è stata l'ultima versione rilasciata. |
0.2 |
Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
18/11/2015 | 02/08/2016 | Seconda release dell'immagine beta. |
0.1 |
Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
23/09/2015 | 02/08/2016 | Release beta di Managed Service for Apache Spark. Spark 1.5 è stato compilato con Hive 1.2. |