Versiones de imágenes de la versión 2.2.x

Componente 2.2.87-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/09/04
2.2.86-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/08/19
2.2.85-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/30
2.2.84-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
2.2.83-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
Acción de inicialización de
Apache Atlas
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Componente opcional de
Apache Flink
1.17.0 1.17.0 1.17.0 1.17.0 1.17.0
**Apache Hadoop**
instalado
3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
**Apache Hive**
instalado
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Componente opcional de
Apache Hive WebHCat
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Componente opcional de
Apache Hudi
0.15.0 0.15.0 0.15.0 0.15.0 0.15.0
Componente opcional de
**Apache Iceberg**
1.6.1 1.6.1 1.6.1 1.6.1 1.6.1
Acción de inicialización de
Apache Kafka
3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
instalado
0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
instalado
3.5.3 3.5.3 3.5.3 3.5.3 3.5.3
Acción de inicialización de
Apache Sqoop
1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
instalado
0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
**Conector de BigQuery**
instalado
0.34.1 0.34.1 0.34.1 0.34.1 0.34.1
**Conector de Cloud Storage**
instalado
3.0.17 3.0.17 3.0.17 3.0.17 3.0.17
**Conscrypt**
instalado
2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Componente opcional deDelta Lake
3.2.1 3.2.1 3.2.1 3.2.1 3.2.1
**Docker**
componente opcional
24.0 24.0 24.0 24.0 24.0
Acción de inicialización deHue
4.11.0 4.11.0 4.11.0 4.11.0 4.11.0
Java
instalado
11 11 11 11 11
Componente opcional de
**Notebook de JupyterLab**
3.6 3.6 3.6 3.6 3.6
Oozie
5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
**Python**
instalado
conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11
R
instalado
R 4.3 R 4.3 R 4.3 R 4.3 R 4.3
Componente opcional de
Ranger
2.4.0 2.4.0 2.4.0 2.4.0 2.4.0
Scala
instalado
2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
Solr
9.2.1 9.2.1 9.2.1 9.2.1 9.2.1
Trino
Trino
432 432 432 432 432
Componente opcional de
**Notebook de Zeppelin**
0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Componente opcional de
Zookeeper
3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Problemas y limitaciones conocidos de la versión de imagen 2.2:

Notas:

  • Las imágenes 2.2.x-*-arm solo admiten los componentes preinstalados y los siguientes componentes opcionales. No se admiten los otros componentes opcionales de la versión 2.2 ni todas las acciones de inicialización:

    • Apache Hive WebHCat
    • Apache Pig (a partir de 2.2.75-ubuntu22-arm)
    • Docker
    • Zeppelin
    • Zookeeper (instalado en clústeres de alta disponibilidad; componente opcional en otros clústeres)
  • El código fuente de las bibliotecas de la imagen 2.2 con licencia recíproca y restringida está disponible en la ruta de acceso /usr/local/share/google/managed-spark/third-party-sources en las VMs del clúster de Managed Service para Apache Spark.

  • Se sabe que los siguientes procedimientos de Hudi no funcionan en una tabla de Hudi respaldada por el sistema de archivos de Cloud Storage:

    • run_clustering
    • run_compaction
  • La calculadora de recursos predeterminada para YARN cambió de DefaultResourceCalculator a DominantResourceCalculator, que usa el concepto de recurso dominante para determinar la asignación de recursos, como la asignación de memoria y CPU. Este cambio afecta al escalador automático, que se ajusta según el uso de recursos dominantes del clúster.

  • Versión de Apache Iceberg: En las imágenes 2.2, Apache Iceberg está disponible en las versiones 1.6.1 y 1.10. La versión predeterminada es 1.6.1. Para especificar la versión de Iceberg en cualquier clúster 2.2, establece la propiedad del clúster dataproc:dataproc.iceberg.version en 1.10 (o 1.6) durante la creación del clúster.

  • Las versiones de imagen 2.2.85 y posteriores no tienen canales de Conda preconfigurados. No se pueden instalar paquetes con Conda, a menos que los canales se configuren de forma manual durante la inicialización del clúster. Además, los clústeres de la versión de imagen 2.2 que tienen canales de Conda preconfigurados, incluidas las versiones de imagen 2.2.84 y anteriores, no se pueden usar después del 25 de agosto de 2026.

    • Es posible que debas borrar y reemplazar los clústeres existentes. Después del 25 de agosto de 2026, los clústeres existentes que se crearon con imágenes que tienen canales de Conda preconfigurados, incluso si los trabajos del clúster no usan Conda para instalar paquetes, se deben borrar y reemplazar por clústeres nuevos creados o recreados con imágenes que no tengan canales de Conda preconfigurados.