Release-Image-Versionen 2.2.x

Komponente	2.2.87-debian12/ -ubuntu22/ -ubuntu22-arm/ -rocky9 2026/09/04	2.2.86-debian12/ -ubuntu22/ -ubuntu22-arm/ -rocky9 2026/08/19	2.2.85-debian12/ -ubuntu22/ -ubuntu22-arm/ -rocky9 2026/06/30	2.2.84-debian12/ -ubuntu22/ -ubuntu22-arm/ -rocky9 2026/06/22	2.2.83-debian12/ -ubuntu22/ -ubuntu22-arm/ -rocky9 2026/06/22
Apache Atlas ^Initialisierungsaktion	2.2.0	2.2.0	2.2.0	2.2.0	2.2.0
Apache Flink ^optionale Komponente	1.17.0	1.17.0	1.17.0	1.17.0	1.17.0
Apache Hadoop ^installiert	3.3.6	3.3.6	3.3.6	3.3.6	3.3.6
Apache Hive ^installiert	3.1.3	3.1.3	3.1.3	3.1.3	3.1.3
Apache Hive WebHCat ^optionale Komponente	3.1.3	3.1.3	3.1.3	3.1.3	3.1.3
Apache Hudi ^optionale Komponente	0.15.0	0.15.0	0.15.0	0.15.0	0.15.0
Apache Iceberg ^optionale Komponente	1.6.1	1.6.1	1.6.1	1.6.1	1.6.1
Apache Kafka ^Initialisierungsaktion	3.1.0	3.1.0	3.1.0	3.1.0	3.1.0
Apache Pig ^installiert	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT
Apache Spark ^installiert	3.5.3	3.5.3	3.5.3	3.5.3	3.5.3
Apache Sqoop ^Initialisierungsaktion	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT
Apache Tez ^installiert	0.10.2	0.10.2	0.10.2	0.10.2	0.10.2
BigQuery Connector ^installiert	0.34.1	0.34.1	0.34.1	0.34.1	0.34.1
Cloud Storage-Connector ^installiert	3.0.17	3.0.17	3.0.17	3.0.17	3.0.17
Conscrypt ^installiert	2.5.2	2.5.2	2.5.2	2.5.2	2.5.2
Delta Lake ^optionale Komponente	3.2.1	3.2.1	3.2.1	3.2.1	3.2.1
Docker ^optionale Komponente	24.0	24.0	24.0	24.0	24.0
Hue ^Initialisierungsaktion	4.11.0	4.11.0	4.11.0	4.11.0	4.11.0
Java ^installed	11	11	11	11	11
JupyterLab Notebook ^optionale Komponente	3.6	3.6	3.6	3.6	3.6
Oozie ^Initialisierungsaktion	5.2.1	5.2.1	5.2.1	5.2.1	5.2.1
Python ^installiert	conda 23.11.0 mit Python 3.11	conda 23.11.0 mit Python 3.11	conda 23.11.0 mit Python 3.11	conda 23.11.0 mit Python 3.11	conda 23.11.0 mit Python 3.11
R ^installiert	R 4.3	R 4.3	R 4.3	R 4.3	R 4.3
Ranger ^optionale Komponente	2.4.0	2.4.0	2.4.0	2.4.0	2.4.0
Scala ^installiert	2.12.18	2.12.18	2.12.18	2.12.18	2.12.18
Solr ^optionale Komponente	9.2.1	9.2.1	9.2.1	9.2.1	9.2.1
Trino ^optionale Komponente	432	432	432	432	432
^Optionale Zeppelin NotebookKomponente	0.10.1	0.10.1	0.10.1	0.10.1	0.10.1
Zookeeper ^optionale Komponente	3.8.3	3.8.3	3.8.3	3.8.3	3.8.3

Bekannte Probleme und Einschränkungen der Bildversion 2.2:

• Legacy-Agents sind nicht in Clustern mit Image-Version 2.2 installiert. monitoring-agent-defaults sind nur verfügbar, wenn der Ops-Agent installiert ist. Hinweis: OSS-Messwerte und -Logging sind für Managed Service for Apache Spark-Komponenten verfügbar.

• Logging oder Monitoring für Drittanbieteranwendungen sind nur verfügbar, wenn der Ops-Agent installiert ist.

Hinweise:

• 2.2.x-*-arm-Images unterstützen nur die vorinstallierten Komponenten und die folgenden optionalen Komponenten. Die anderen optionalen Komponenten von Version 2.2 und alle Initialisierungsaktionen werden nicht unterstützt:

  • Apache Hive WebHCat
  • Apache Pig (ab 2.2.75-ubuntu22-arm)
  • Docker
  • Zeppelin
  • Zookeeper (in Hochverfügbarkeitsclustern installiert; optionale Komponente in anderen Clustern)

• Der Quellcode für die Bibliotheken in Abbildung 2.2, die unter reziproken und eingeschränkten Lizenzen lizenziert sind, ist auf den VMs von Managed Service for Apache Spark-Clustern unter dem Pfad /usr/local/share/google/managed-spark/third-party-sources verfügbar.

• Die folgenden Hudi-Prozeduren funktionieren nicht für eine Hudi-Tabelle, die vom Cloud Storage-Dateisystem unterstützt wird:

  • run_clustering
  • run_compaction

• Der Standardressourcenrechner für YARN wurde von DefaultResourceCalculator zu DominantResourceCalculator geändert. Dieser verwendet das Konzept der dominanten Ressource, um die Ressourcenzuweisung zu bestimmen, z. B. die Zuweisung von Arbeitsspeicher und CPU. Diese Änderung wirkt sich auf Autoscaler aus, das auf der Grundlage der dominanten Ressourcennutzung des Clusters skaliert wird.

• Apache Iceberg-Version: In Version 2.2-Images ist Apache Iceberg in den Versionen 1.6.1 und 1.10 verfügbar. Die Standardversion ist 1.6.1. Wenn Sie die Iceberg-Version für einen beliebigen Cluster mit Version 2.2 angeben möchten, legen Sie beim Erstellen des Clusters das Clusterattribut dataproc:dataproc.iceberg.version auf 1.10 (oder 1.6) fest.

• Die Image-Versionen 2.2.85 und höher haben keine vorkonfigurierten Conda-Channels. Pakete können mit Conda nur installiert werden, wenn Channels während der Clusterinitialisierung manuell konfiguriert werden. Außerdem können Cluster mit der Imageversion 2.2, die vorkonfigurierte Conda-Channels haben, einschließlich der Imageversionen 2.2.84 und früher, nach dem 25. August 2026 nicht mehr verwendet werden.

  • Möglicherweise müssen Sie vorhandene Cluster löschen und ersetzen. Nach dem 25. August 2026 müssen vorhandene Cluster, die mit Images mit vorkonfigurierten Conda-Channels erstellt wurden, gelöscht und durch neue Cluster ersetzt werden, die mit Images ohne vorkonfigurierte Conda-Channels erstellt oder neu erstellt wurden. Dies gilt auch dann, wenn in Clusterjobs keine Conda-Channels zum Installieren von Paketen verwendet werden.