Versions 2.1.x des images de version

Composant 2.1.120-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/10/12		 2.1.119-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/09/04		 2.1.118-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/08/19		 2.1.117-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/30		 2.1.116-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/22
Apache Atlas
action d'initialisation		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
composant facultatif		 1.15.4 1.15.4 1.15.4 1.15.4 1.15.4
Apache Hadoop
installé		 3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
installé		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
composant facultatif		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Composant facultatif
Apache Hudi		 0.12.3 0.12.3 0.12.3 0.12.3 0.12.3
Apache Kafka
action d'initialisation		 3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
installé		 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installé		 3.3.2 3.3.2 3.3.2 3.3.2 3.3.2
Apache Sqoop
action d'initialisation		 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
installé		 0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Connecteur BigQuery
installé		 0.27.1 0.27.1 0.27.1 0.27.1 0.27.1
Connecteur Cloud Storage
installé		 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32
Conscrypt
installé		 2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Docker
composant facultatif		 20.10 20.10 20.10 20.10 20.10
Hue
action d'initialisation		 4.10.0 4.10.0 4.10.0 4.10.0 4.10.0
Java
installé		 11 11 11 11 11
Notebook JupyterLab
composant facultatif		 3.4 3.4 3.4 3.4 3.4
Oozie
action d'initialisation		 5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
installé		 conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10
R
installé		 R 4.1 R 4.1 R 4.1 R 4.1 R 4.1
Ranger
composant facultatif		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Scala
installé		 2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
composant facultatif		 9.0.0 9.0.0 9.0.0 9.0.0 9.0.0
Trino
Trino		 376 376 376 376 376
Notebook Zeppelin
composant facultatif		 0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
composant facultatif		 3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Remarques :

  1. 2.1.x-*-arm images n'est compatible qu'avec les composants installés et les composants facultatifs suivants (les autres composants facultatifs 2.1 et toutes les actions d'initialisation ne sont pas compatibles) :
    • Apache Hive WebHCat
    • Apache Pig (à partir de 2.1.107-ubuntu20-arm)
    • Docker
    • Zeppelin : compatible uniquement avec les images 2.1.77+-ubuntu20-arm.
    • Zookeeper (installé dans les clusters haute disponibilité ; composant facultatif dans les clusters non haute disponibilité)
  2. Les installations d'Apache Hive sur les clusters Managed Service pour Apache Spark incluent HCatalog, mais pas Hive WebHCat (consultez la section Composant facultatif Hive WebHCat pour installer Hive WebHCat sur un cluster).
  3. Le composant facultatif Presto est disponible en tant que composant facultatif Trino dans les versions d'image 2.1 et ultérieures.
  4. Les composants HBase et Druid ne sont pas compatibles avec les versions d'image 2.1 et ultérieures.

  5. Le code source des bibliothèques image 2.1 sous licence réciproque et restreinte est disponible dans le chemin d'accès au fichier /usr/local/share/google/managed-spark/third-party-sources sur les VM du cluster Managed Service pour Apache Spark.

  6. Les versions d'image 2.1.117, 2.1.119 et ultérieures ne disposent pas de canaux Conda préconfigurés. Les packages ne peuvent pas être installés à l'aide de Conda, sauf si les canaux sont configurés manuellement lors de l'initialisation du cluster. De plus, les clusters de version d'image 2.1 qui disposent de canaux Conda préconfigurés, y compris les versions d'image 2.1.118 et antérieures, mais à l'exclusion de 2.1.117, ne pourront plus être utilisés après le 25 août 2026.

    • Vous devrez peut-être supprimer et remplacer les clusters existants. Après le 25 août 2026, les clusters existants créés avec des images comportant des canaux Conda préconfigurés, même si les jobs de cluster n'utilisent pas Conda pour installer des packages, doivent être supprimés et remplacés par de nouveaux clusters créés ou recréés avec des images ne comportant pas de canaux Conda préconfigurés.