Problemas y limitaciones conocidos de la versión 2.2 de las imágenes:
Los agentes antiguos no se instalan en los clústeres con la versión de imagen 2.2. monitoring-agent-defaults no está disponible a menos que se instale el agente de operaciones. Nota: Las métricas y los registros de OSS están disponibles para los componentes de Dataproc.
El registro o la monitorización de aplicaciones de terceros no están disponibles a menos que se instale el Agente de operaciones.
Notas:
Las imágenes
2.2.x-*-armsolo admiten los componentes preinstalados y los siguientes componentes opcionales. No se admiten los demás componentes opcionales de la versión 2.2 ni todas las acciones de inicialización:- Apache Hive WebHCat
- Docker
- Zeppelin
- Zookeeper (instalado en clústeres de alta disponibilidad; componente opcional en otros clústeres)
El código fuente de las bibliotecas de la imagen 2.2, que tienen licencias recíprocas y restringidas, está disponible en la ruta
/usr/local/share/google/dataproc/third-party-sourcesde las VMs del clúster de Dataproc.Se sabe que los siguientes procedimientos de Hudi no funcionan en una tabla de Hudi respaldada por el sistema de archivos de Cloud Storage:
run_clusteringrun_compaction
La calculadora de recursos predeterminada de YARN se ha cambiado de DefaultResourceCalculator a DominantResourceCalculator, que usa el concepto de recurso dominante para determinar la asignación de recursos, como la asignación de memoria y CPU. Este cambio afecta a Autoscaler, que se escala en función del uso de recursos dominante del clúster.