Google Dataproc utilizza le versioni immagine di Ubuntu, Debian e Rocky Linux per raggruppare il sistema operativo, i componenti big data e i Google Cloud connettori in un singolo pacchetto di cui viene eseguito il deployment in un cluster. Per saperne di più, consulta Controllo delle versioni di Dataproc.
Note:
- Le versioni immagine di Dataproc sono supportate per 24 mesi dopo la loro release iniziale.
- In genere, le versioni immagine di Dataproc sono disponibili per 24 mesi dopo la data di fine del supporto, ma un periodo di disponibilità può essere ridotto se la data di supporto di un'immagine viene estesa.
Versione immagine di Dataproc predefinita
Dataproc aggiorna la versione immagine predefinita all'ultima versione di Dataproc basata su Debian in disponibilità generale dopo la data di rilascio in disponibilità generale.
Versioni immagine di Dataproc supportate
Immagini Debian
Le seguenti versioni immagine basate su Debian sono supportate nei cluster Dataproc. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dopo la sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto soltanto per | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-debian12 | 2025/09/08 | 2025/09/08 | Da definire | Da definire | Versione di anteprima. |
| 2.3-debian12 | 2026/01/06 | 2025/06/09 | 2027/06/09 | 2029/06/09 | Release in disponibilità generale. |
| 2.2-debian12 | 2026/01/06 | 2023/12/08 | 2027/03/31 | 2027/12/31 | Release in disponibilità generale. La versione immagine 2.2 diventerà la versione immagine predefinita il 13 settembre 2024. |
| 2.1-debian11 | 2026/01/06 | 2022/12/12 | 2026/03/31 | 2026/12/31 | Release in disponibilità generale. |
| 2.0-debian10 | 2026/01/06 | 2021/01/22 | 2025/09/30 | 2026/07/31 | Release in disponibilità generale. |
Immagini Ubuntu
Le seguenti versioni immagine basate su Ubuntu LTS sono supportate nei cluster Dataproc. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dopo la sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto soltanto per | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-ubuntu24 | 2025/09/08 | 2025/09/08 | Da definire | Da definire | Versione di anteprima. |
| 2.3-ubuntu22 | 2026/01/06 | 2025/06/09 | 2027/06/09 | 2029/06/09 | Release in disponibilità generale. |
| 2.2-ubuntu22 | 2026/01/06 | 2023/12/08 | 2027/03/31 | 2027/12/31 | Release in disponibilità generale. |
| 2.1-ubuntu20 | 2026/01/06 | 2022/12/12 | 2026/03/31 | 2026/12/31 | Release in disponibilità generale. |
| 2.0-ubuntu18 | 2026/01/06 | 2021/01/22 | 2025/09/30 | 2026/07/31 | Release in disponibilità generale. |
Immagini Rocky Linux
Le seguenti versioni immagine basate su Rocky Linux sono supportate nei cluster Dataproc. Tieni presente che i nuovi cluster verranno creati in modo da includere eventuali patch secondarie apportate a una versione dopo la sua release.
| Versione | Ultimo aggiornamento | Data di rilascio | Supporto soltanto per | Disponibile fino alla data | Note |
|---|---|---|---|---|---|
| 3.0-rocky9 | 2025/09/08 | 2025/09/08 | Da definire | Da definire | Versione di anteprima. |
| 2.3-rocky9 | 2026/01/06 | 2025/06/09 | 2027/06/09 | 2029/06/09 | Release in disponibilità generale. |
| 2.2-rocky9 | 2026/01/06 | 2023/12/08 | 2027/03/31 | 2027/12/31 | Release in disponibilità generale. |
| 2.1-rocky8 | 2026/01/06 | 2022/12/12 | 2026/03/31 | 2026/12/31 | Release in disponibilità generale. |
| 2.0-rocky8 | 2026/01/06 | 2022/02/18 | 2025/09/30 | 2026/07/31 | Release in disponibilità generale. |
Versioni immagine di Dataproc non supportate
Le seguenti versioni di Dataproc non sono supportate. Dataproc non fornisce aggiornamenti e supporto per i cluster creati con queste versioni. Sebbene tu possa continuare a eseguire un cluster che è stato creato con una versione non supportata, ti consigliamo di sostituire il cluster con un nuovo cluster creato con una versione supportata.
| Versione | Include | Data di rilascio: | Ultimo aggiornamento | Note |
|---|---|---|---|---|
1.5-debian10/-ubuntu18/-rocky8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/03/25:debian10/ubuntu18 2022/02/18:rocky8 |
2023/04/28 | Non supportato a partire dal 2023/04/28. 1.5.89-debian10/-ubuntu18/-rocky8 è stata l'ultima versione rilasciata. |
2.0-centos8 |
Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Connettore Cloud Storage 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
2021/03/16 | 2022/02/01 | Non supportato a partire dal 2022/02/01. 2.0.30-centos8 è stata l'ultima versione rilasciata. |
1.5-centos8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/12/14 | 2022/02/01 | Non supportato a partire dal 2022/02/01. 1.5.56-centos8 è stata l'ultima versione rilasciata. |
1.4-debian10/-ubuntu18 |
Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14 |
2019/03/22 | 2022/02/01 | Non supportato a partire dal 2022/02/01. 1.4.80-debian10/-ubuntu18 è stata l'ultima versione rilasciata. |
1.3-debian10/-ubuntu18 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
2018/06/29 | 2021/12/22 | Non supportato a partire dal 2021/08/01. 1.3.95-debian10/-ubuntu18 è stata l'ultima versione rilasciata, in cui sono state risolte le vulnerabilità di log4j2. Nota: le versioni rilasciate in precedenza sono vulnerabili e devono essere aggiornate. |
1.4-debian9 |
Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13 |
2019/03/22 | 2020/07/10 | Non supportato a partire dal 2020/07/10. 1.4.33-debian9 è stata l'ultima versione rilasciata. |
1.3-debian9 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Connettore Cloud Storage 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
2018/06/29 | 2020/07/10 | Non supportato a partire dal 2020/07/10. 1.3.62-debian9 è stata l'ultima versione rilasciata. |
1.2-debian9 |
Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
2017/07/21 | 2020/07/10 | Non supportato a partire dal 2020/07/10. 1.2.102-debian9 è stata l'ultima versione rilasciata. |
1.1-debian9 |
Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 |
2016/08/08 | 2019/09/26 | Non supportato a partire dal 2019/10/01. 1.1.121-debian9 è l'ultima versione rilasciata. |
1.0-debian9 |
Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.6.10-hadoop2 Connettore BigQuery 0.10.11-hadoop2 |
2016/02/22 | 2019/05/09 | Prima release dell'immagine in disponibilità generale. Non supportato a partire dal 2019/04/01. 1.0.119-debian9 è stata l'ultima versione rilasciata. |
0.2 |
Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
2015/11/18 | 2016/08/02 | Seconda release dell'immagine beta. |
0.1 |
Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Connettore Cloud Storage 1.5.1-hadoop2 Connettore BigQuery 0.7.7-hadoop2 |
2015/09/23 | 2016/08/02 | Release beta di Dataproc. Spark 1.5 è stato compilato con Hive 1.2. |