Versões de imagem de lançamento 2.2.x

Componente 2.2.87-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/09/04		 2.2.86-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/08/19		 2.2.85-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/30		 2.2.84-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22		 2.2.83-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
**Apache Atlas**
ação de inicialização		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
**Apache Flink**
componente opcional		 1.17.0 1.17.0 1.17.0 1.17.0 1.17.0
**Apache Hadoop**
instalado		 3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
**Apache Hive**
instalado		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
componente opcional		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
**Apache Hudi**
componente opcional		 0.15.0 0.15.0 0.15.0 0.15.0 0.15.0
**Apache Iceberg**
componente opcional		 1.6.1 1.6.1 1.6.1 1.6.1 1.6.1
**Apache Kafka**
ação de inicialização		 3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
instalado		 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
instalado		 3.5.3 3.5.3 3.5.3 3.5.3 3.5.3
**Apache Sqoop**
ação de inicialização		 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
instalado		 0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Conector do BigQuery
instalado		 0.34.1 0.34.1 0.34.1 0.34.1 0.34.1
conector do Cloud Storage
instalado		 3.0.17 3.0.17 3.0.17 3.0.17 3.0.17
**Conscrypt**
instalado		 2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
**Delta Lake**
componente opcional		 3.2.1 3.2.1 3.2.1 3.2.1 3.2.1
**Docker**
componente opcional		 24.0 24.0 24.0 24.0 24.0
**Hue**
ação de inicialização		 4.11.0 4.11.0 4.11.0 4.11.0 4.11.0
Java
instalado		 11 11 11 11 11
Notebook JupyterLab
componente opcional		 3.6 3.6 3.6 3.6 3.6
Oozie
ação de inicialização		 5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
**Python**
instalado		 conda 23.11.0 com Python 3.11 conda 23.11.0 com Python 3.11 conda 23.11.0 com Python 3.11 conda 23.11.0 com Python 3.11 conda 23.11.0 com Python 3.11
R
instalado		 R 4.3 R 4.3 R 4.3 R 4.3 R 4.3
Ranger
componente opcional		 2.4.0 2.4.0 2.4.0 2.4.0 2.4.0
Scala
instalado		 2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
componente opcional		 9.2.1 9.2.1 9.2.1 9.2.1 9.2.1
Trino
componente opcional		 432 432 432 432 432
Notebook Zeppelin
componente opcional		 0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
**Zookeeper**
componente opcional		 3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Problemas e limitações conhecidos da versão 2.2 da imagem :

Observações :

  • As imagens 2.2.x-*-arm são compatíveis apenas com os componentes pré-instalados e os seguintes componentes opcionais. Os outros componentes opcionais da versão 2.2 e todas as ações de inicialização não são compatíveis:

    • Apache Hive WebHCat
    • Apache Pig (a partir de 2.2.75-ubuntu22-arm)
    • Docker
    • Zeppelin
    • Zookeeper (instalado em clusters de alta disponibilidade; componente opcional em outros clusters)

  • O código-fonte das bibliotecas da imagem 2.2 licenciadas sob licenças recíprocas e restritas está disponível no caminho /usr/local/share/google/managed-spark/third-party-sources nas VMs do cluster do Serviço Gerenciado para Apache Spark.

  • Os procedimentos Hudi a seguir não funcionam em uma tabela Hudi com suporte do sistema de arquivos do Cloud Storage:

    • run_clustering
    • run_compaction

  • A calculadora de recursos padrão para YARN foi alterada de DefaultResourceCalculator para DominantResourceCalculator, que usa o conceito de recurso dominante para determinar a alocação de recursos, como memória e CPU. Essa mudança afeta o escalonador automático, que é escalonado com base no uso de recursos dominantes do cluster.

  • Versão do Apache Iceberg: nas imagens 2.2, o Apache Iceberg está disponível nas versões 1.6.1 e 1.10. A versão padrão é 1.6.1. Para especificar a versão do Iceberg em qualquer cluster 2.2, defina a propriedade do cluster dataproc:dataproc.iceberg.version como 1.10 (ou 1.6) durante a criação do cluster.

  • As versões de imagem 2.2.85 e mais recentes não têm canais Conda pré-configurados. Não é possível instalar pacotes usando o Conda, a menos que os canais sejam configurados manualmente durante a inicialização do cluster. Além disso, os clusters da versão de imagem 2.2 que têm canais Conda pré-configurados, incluindo 2.2.84 e versões de imagem anteriores, não poderão ser usados após 25 de agosto de 2026.

    • Talvez seja necessário excluir e substituir clusters atuais. Após 25 de agosto de 2026, os clusters atuais criados com imagens que têm canais Conda pré-configurados, mesmo que os jobs do cluster não usem o Conda para instalar pacotes, precisam ser excluídos e substituídos por novos clusters criados ou recriados com imagens que não têm canais Conda pré-configurados.