Managed Service for Apache Spark di Google utilizza le versioni immagine di Ubuntu, Debian e Rocky Linux per raggruppare il sistema operativo, i componenti big data e i Google Cloud connettori in un singolo pacchetto di cui viene eseguito il deployment in un cluster. Per maggiori informazioni, consulta Controllo delle versioni di Managed Service for Apache Spark.
Note:
- Le versioni immagine di Managed Service for Apache Spark sono supportate per 24 mesi dopo la release iniziale.
- In genere, le versioni immagine di Managed Service for Apache Spark sono disponibili per 24 mesi dopo la data di fine del supporto, ma un periodo di disponibilità può essere ridotto se la data di supporto di un'immagine viene estesa.
Versione immagine predefinita di Managed Service for Apache Spark
Managed Service for Apache Spark aggiorna la versione immagine predefinita all'ultima versione di Managed Service for Apache Spark basata su Debian disponibile a livello generale dopo la data di rilascio in disponibilità generale.
Versioni immagine di Managed Service for Apache Spark supportate
Immagini Debian
Le seguenti versioni immagine basate su Debian sono supportate nei cluster Managed Service for Apache Spark. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dalla sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto fino al giorno | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-debian12 | 08/09/2025 | 08/09/2025 | Da definire | Da definire | Versione di anteprima. |
| 2.3-debian12 | 27/04/2026 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release in disponibilità generale. |
| 2.2-debian12 | 27/04/2026 | 08/12/2023 | 31/03/2027 | 31/12/2027 | Release in disponibilità generale. La versione immagine 2.2 diventerà la versione immagine predefinita il 13 settembre 2024. |
| 2.1-debian11 | 27/04/2026 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Release in disponibilità generale. |
Immagini Ubuntu
Le seguenti versioni immagine basate su Ubuntu LTS sono supportate nei cluster Managed Service for Apache Spark. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dalla sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto fino al giorno | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-ubuntu24 | 08/09/2025 | 08/09/2025 | Da definire | Da definire | Versione di anteprima. |
| 2.3-ubuntu22 | 27/04/2026 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release in disponibilità generale. |
| 2.2-ubuntu22 | 27/04/2026 | 08/12/2023 | 31/03/2027 | 31/12/2027 | Release in disponibilità generale. |
| 2.1-ubuntu20 | 27/04/2026 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Release in disponibilità generale. |
Immagini Rocky Linux
Le seguenti versioni immagine basate su Rocky Linux sono supportate nei cluster Managed Service for Apache Spark. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dalla sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto fino al giorno | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-rocky9 | 08/09/2025 | 08/09/2025 | Da definire | Da definire | Versione di anteprima. |
| 2.3-rocky9 | 27/04/2026 | 09/06/2025 | 09/06/2027 | 09/06/2029 | Release in disponibilità generale. |
| 2.2-rocky9 | 27/04/2026 | 08/12/2023 | 31/03/2027 | 31/12/2027 | Release in disponibilità generale. |
| 2.1-rocky8 | 27/04/2026 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Release in disponibilità generale. |
Versioni immagine di Managed Service for Apache Spark non supportate
Le seguenti versioni di Managed Service for Apache Spark non sono supportate. Managed Service for Apache Spark non fornisce aggiornamenti e supporto per i cluster creati con queste versioni. Le versioni 1.x e 2.0 raggiungeranno la fine del ciclo di vita il 25 agosto 2026. Se utilizzi versioni non supportate, devi eseguire l'upgrade dei cluster alle immagini supportate.
| Versione | Include | Data di rilascio | Ultimo aggiornamento | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
2.0-debian10/-ubuntu18/-rocky8 |
Apache Spark 3.1.3 Apache Hadoop 3.2.4 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.3 Connettore Cloud Storage 2.2.30-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
2021/01/22:debian10/ubuntu18 2022/02/18:rocky8 |
24/02/2026 | 25/08/2026 | Non supportata a partire dal 24/02/2026. 2.0.160-debian10/-ubuntu18/-rocky8 è stata l'ultima versione rilasciata. |
2.0-centos8 |
Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Connettore Cloud Storage 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
16/03/2021 | 01/02/2022 | 25/08/2026 | Non supportata a partire dal 01/02/2022. 2.0.30-centos8 è stata l'ultima versione rilasciata. |
1.5-debian10/-ubuntu18/-rocky8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/03/25:debian10/ubuntu18 2022/02/18:rocky8 |
28/04/2023 | 25/08/2026 | Non supportata a partire dal 28/04/2023. 1.5.89-debian10/-ubuntu18/-rocky8 è stata l'ultima versione rilasciata. |
1.5-centos8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
14/12/2020 | 01/02/2022 | 25/08/2026 | Non supportata a partire dal 01/02/2022. 1.5.56-centos8 è stata l'ultima versione rilasciata. |
1.4-debian10/-ubuntu18 |
Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14 |
22/03/2019 | 01/02/2022 | 25/08/2026 | Non supportata a partire dal 01/02/2022. 1.4.80-debian10/-ubuntu18 è stata l'ultima versione rilasciata. |
1.4-debian9 |
Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13 |
22/03/2019 | 10/07/2020 | 25/08/2026 | Non supportata a partire dal 10/07/2020. 1.4.33-debian9 è stata l'ultima versione rilasciata. |
1.3-debian10/-ubuntu18 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 22/12/2021 | 25/08/2026 | Non supportata a partire dal 01/08/2021. 1.3.95-debian10/-ubuntu18 è stata l'ultima versione rilasciata, in cui sono state risolte le vulnerabilità di log4j2. Nota: le versioni rilasciate in precedenza sono vulnerabili e devono essere aggiornate. |
1.3-debian9 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 10/07/2020 | 25/08/2026 | Non supportata a partire dal 10/07/2020. 1.3.62-debian9 è stata l'ultima versione rilasciata. |
1.2-debian9 |
Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
21/07/2017 | 10/07/2020 | Non disponibile | Non supportata a partire dal 10/07/2020. 1.2.102-debian9 è stata l'ultima versione rilasciata. |
1.1-debian9 |
Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 |
08/08/2016 | 26/09/2019 | Non disponibile | Non supportata a partire dal 01/10/2019. 1.1.121-debian9 è l'ultima versione rilasciata. |
1.0-debian9 |
Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 |
22/02/2016 | 09/05/2019 | Non disponibile | Prima release dell'immagine in disponibilità generale. Non supportata a partire dal 01/04/2019. 1.0.119-debian9 è stata l'ultima versione rilasciata. |
0.2 |
Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
18/11/2015 | 02/08/2016 | Non disponibile | Seconda release dell'immagine beta. |
0.1 |
Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
23/09/2015 | 02/08/2016 | Non disponibile | Release beta di Managed Service for Apache Spark. Spark 1.5 è stato compilato con Hive 1.2. |