Problemas conocidos y limitaciones de la versión de imagen 2.2:
Los agentes heredados no se instalan en los clústeres con la versión de imagen 2.2. Los monitoring-agent-defaults no están disponibles a menos que se instale el Agente de operaciones. Nota: Las métricas y el registro de OSS están disponibles para los componentes de Dataproc.
El registro o la supervisión de aplicaciones de terceros no están disponibles, a menos que se instale el Agente de operaciones.
Notas:
Las imágenes de
2.2.x-*-armsolo admiten los componentes preinstalados y los siguientes componentes opcionales. No se admiten los otros componentes opcionales de la versión 2.2 ni todas las acciones de inicialización:- Apache Hive WebHCat
- Docker
- Zeppelin
- Zookeeper (se instala en clústeres de alta disponibilidad; componente opcional en otros clústeres)
El código fuente de las bibliotecas de la imagen 2.2 que se otorgan bajo licencias recíprocas y restringidas está disponible en la ruta de acceso
/usr/local/share/google/dataproc/third-party-sourcesen las VMs del clúster de Dataproc.Se sabe que los siguientes procedimientos de Hudi no funcionan en una tabla de Hudi respaldada por el sistema de archivos de Cloud Storage:
run_clusteringrun_compaction
La calculadora de recursos predeterminada para YARN se cambió de DefaultResourceCalculator a DominantResourceCalculator, que usa el concepto de recurso dominante para determinar la asignación de recursos, como la asignación de memoria y CPU. Este cambio afecta al escalador automático, que se ajusta según el uso de recursos dominante del clúster.