Versões de imagem de lançamento 2.1.x

Componente 2.1.119-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/09/04		 2.1.118-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/08/19		 2.1.117-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/30		 2.1.116-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/22		 2.1.115-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/22
**Apache Atlas**
ação de inicialização		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
**Apache Flink**
componente opcional		 1.15.4 1.15.4 1.15.4 1.15.4 1.15.4
**Apache Hadoop**
instalado		 3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
**Apache Hive**
instalado		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
componente opcional		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
**Apache Hudi**
componente opcional		 0.12.3 0.12.3 0.12.3 0.12.3 0.12.3
**Apache Kafka**
ação de inicialização		 3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
instalado		 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
instalado		 3.3.2 3.3.2 3.3.2 3.3.2 3.3.2
**Apache Sqoop**
ação de inicialização		 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
instalado		 0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Conector do BigQuery
instalado		 0.27.1 0.27.1 0.27.1 0.27.1 0.27.1
conector do Cloud Storage
instalado		 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32
**Conscrypt**
instalado		 2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
**Docker**
componente opcional		 20.10 20.10 20.10 20.10 20.10
**Hue**
ação de inicialização		 4.10.0 4.10.0 4.10.0 4.10.0 4.10.0
Java
instalado		 11 11 11 11 11
Notebook JupyterLab
componente opcional		 3.4 3.4 3.4 3.4 3.4
Oozie
ação de inicialização		 5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
**Python**
instalado		 conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10
R
instalado		 R 4.1 R 4.1 R 4.1 R 4.1 R 4.1
Ranger
componente opcional		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Scala
instalado		 2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
componente opcional		 9.0.0 9.0.0 9.0.0 9.0.0 9.0.0
Trino
componente opcional		 376 376 376 376 376
Notebook Zeppelin
componente opcional		 0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
**Zookeeper**
componente opcional		 3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Observações:

  1. 2.1.x-*-arm images são compatíveis apenas com os componentes instalados e os seguintes componentes opcionais. Os demais componentes opcionais da versão 2.1 e todas as ações de inicialização não são compatíveis:
    • Apache Hive WebHCat
    • Apache Pig (a partir da versão 2.1.107-ubuntu20-arm)
    • Docker
    • Zeppelin: compatível apenas com imagens 2.1.77+-ubuntu20-arm.
    • Zookeeper (instalado em clusters de alta disponibilidade; componente opcional em clusters sem alta disponibilidade)
  2. As instalações do Apache Hive em clusters do Serviço Gerenciado para Apache Spark incluem HCatalog, mas não incluem Hive WebHCat (consulte o Componente opcional do Hive WebHCat para instalar o Hive WebHCat em um cluster).
  3. O componente opcional do Presto está disponível como componente opcional do Trino nas versões de imagem 2.1 e mais recentes.
  4. Os componentes HBase e Druid não são compatíveis com as versões de imagem 2.1 e mais recentes.

  5. O código-fonte das bibliotecas de imagem 2.1 licenciadas sob licenças recíprocas e restritas está disponível no caminho do arquivo /usr/local/share/google/managed-spark/third-party-sources nas VMs do cluster do Serviço Gerenciado para Apache Spark.

  6. As versões de imagem 2.1.117, 2.1.119 e mais recentes não têm canais Conda pré-configurados. Não é possível instalar pacotes usando o Conda, a menos que os canais sejam configurados manualmente durante a inicialização do cluster. Além disso, os clusters da versão de imagem 2.1 que têm canais Conda pré-configurados, incluindo 2.1.118 e versões de imagem anteriores, mas excluindo 2.1.117, não poderão ser usados após 25 de agosto de 2026.

    • Talvez seja necessário excluir e substituir clusters atuais. Após 25 de agosto de 2026, os clusters atuais criados com imagens que têm canais Conda pré-configurados, mesmo que os jobs do cluster não usem o Conda para instalar pacotes, precisam ser excluídos e substituídos por novos clusters criados ou recriados com imagens que não têm canais Conda pré-configurados.