Problemi noti e limitazioni della versione 2.2 delle immagini:
Gli agenti legacy non sono installati nei cluster con versione immagine 2.2. monitoring-agent-defaults non sono disponibili a meno che non sia installato Ops Agent. Nota: le metriche e la registrazione OSS sono disponibili per i componenti Dataproc.
Il logging o il monitoraggio per applicazioni di terze parti non sono disponibili a meno che non sia installato Ops Agent.
Note:
Le immagini
2.2.x-*-arm
supportano solo i componenti preinstallati e i seguenti componenti opzionali. Gli altri componenti facoltativi della versione 2.2 e tutte le azioni di inizializzazione non sono supportati:- Apache Hive WebHCat
- Docker
- Zeppelin
- Zookeeper (installato in cluster ad alta disponibilità; componente facoltativo in altri cluster)
Il codice sorgente delle librerie dell'immagine 2.2 con licenza reciproca e con limitazioni è disponibile nel percorso
/usr/local/share/google/dataproc/third-party-sources
sulle VM del cluster Dataproc.È noto che le seguenti procedure Hudi non funzionano su una tabella Hudi supportata dal file system Cloud Storage:
run_clustering
run_compaction
Il calcolatore delle risorse predefinito per YARN è stato modificato da DefaultResourceCalculator a DominantResourceCalculator, che utilizza il concetto di risorsa dominante per determinare l'allocazione delle risorse, come l'allocazione di memoria e CPU. Questa modifica influisce su Autoscaler, che esegue lo scale in base all'utilizzo dominante delle risorse del cluster.