Versiones de imágenes de la versión 2.2.x

Componente 2.2.87-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/09/04		 2.2.86-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/08/19		 2.2.85-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/30		 2.2.84-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22		 2.2.83-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
Acción de inicialización de
Apache Atlas		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
componente opcional		 1.17.0 1.17.0 1.17.0 1.17.0 1.17.0
Apache Hadoop
instalado		 3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
instalado		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Componente opcional de
Apache Hive WebHCat		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
componente opcional		 0.15.0 0.15.0 0.15.0 0.15.0 0.15.0
Apache Iceberg
componente opcional		 1.6.1 1.6.1 1.6.1 1.6.1 1.6.1
Acción de inicialización de
Apache Kafka		 3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
instalado		 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
instalado		 3.5.3 3.5.3 3.5.3 3.5.3 3.5.3
Acción de inicialización de
Apache Sqoop		 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
instalado		 0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Conector de BigQuery
instalado		 0.34.1 0.34.1 0.34.1 0.34.1 0.34.1
Conector de Cloud Storage
instalado		 3.0.17 3.0.17 3.0.17 3.0.17 3.0.17
Conscrypt
instalado		 2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Delta Lake
componente opcional		 3.2.1 3.2.1 3.2.1 3.2.1 3.2.1
Docker
componente opcional		 24.0 24.0 24.0 24.0 24.0
Acción de inicialización de
Hue		 4.11.0 4.11.0 4.11.0 4.11.0 4.11.0
Java
instalado		 11 11 11 11 11
Componente opcional de
Notebook de JupyterLab		 3.6 3.6 3.6 3.6 3.6
Acción de inicialización de
Oozie		 5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
instalado		 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11
R
instalado		 R 4.3 R 4.3 R 4.3 R 4.3 R 4.3
Componente opcional de
Ranger		 2.4.0 2.4.0 2.4.0 2.4.0 2.4.0
Scala
instalado		 2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Componente opcional de
Solr		 9.2.1 9.2.1 9.2.1 9.2.1 9.2.1
Componente opcional de
Trino		 432 432 432 432 432
Componente opcional de
Notebook de Zeppelin		 0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Componente opcional de
Zookeeper		 3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Problemas y limitaciones conocidos de la versión de imagen 2.2:

Notas:

  • Las imágenes de 2.2.x-*-arm solo admiten los componentes preinstalados y los siguientes componentes opcionales. No se admiten los otros componentes opcionales de la versión 2.2 ni todas las acciones de inicialización:

    • Apache Hive WebHCat
    • Apache Pig (a partir de 2.2.75-ubuntu22-arm)
    • Docker
    • Zeppelin
    • Zookeeper (se instala en clústeres de alta disponibilidad; componente opcional en otros clústeres)

  • El código fuente de las bibliotecas de la imagen 2.2 que se otorgan bajo licencias recíprocas y restringidas está disponible en la ruta de acceso /usr/local/share/google/managed-spark/third-party-sources en las VMs del clúster de Managed Service para Apache Spark.

  • Se sabe que los siguientes procedimientos de Hudi no funcionan en una tabla de Hudi respaldada por el sistema de archivos de Cloud Storage:

    • run_clustering
    • run_compaction

  • La calculadora de recursos predeterminada para YARN se cambió de DefaultResourceCalculator a DominantResourceCalculator, que usa el concepto de recurso dominante para determinar la asignación de recursos, como la asignación de memoria y CPU. Este cambio afecta al escalador automático, que se ajusta según el uso de recursos dominante del clúster.

  • Versión de Apache Iceberg: En las imágenes 2.2, Apache Iceberg está disponible en las versiones 1.6.1 y 1.10. La versión predeterminada es 1.6.1. Para especificar la versión de Iceberg en cualquier clúster 2.2, establece la propiedad del clúster dataproc:dataproc.iceberg.version en 1.10 (o 1.6) durante la creación del clúster.

  • Las versiones de imagen 2.2.85 y posteriores no tienen canales de Conda preconfigurados. No se pueden instalar paquetes con Conda, a menos que los canales se configuren manualmente durante la inicialización del clúster. Además, los clústeres de la versión de imagen 2.2 que tienen canales de Conda preconfigurados, incluidas las versiones de imagen 2.2.84 y anteriores, no se podrán usar después del 25 de agosto de 2026.

    • Es posible que debas borrar y reemplazar los clústeres existentes. Después del 25 de agosto de 2026, los clústeres existentes que se crearon con imágenes que tienen canales de Conda preconfigurados, incluso si los trabajos del clúster no usan Conda para instalar paquetes, se deben borrar y reemplazar por clústeres nuevos creados o recreados con imágenes que no tengan canales de Conda preconfigurados.