알려진 2.2 이미지 버전 문제 및 제한사항:
기존 에이전트는 2.2 이미지 버전 클러스터에 설치되지 않습니다. 운영 에이전트가 설치되어 있지 않으면 monitoring-agent-defaults를 사용할 수 없습니다. 참고: OSS 측정항목 및 로깅은 Dataproc 구성요소에 사용 가능합니다.
운영 에이전트가 설치되어 있지 않으면 서드 파티 애플리케이션의 로깅이나 모니터링을 사용할 수 없습니다.
참고:
2.2.x-*-arm
이미지는 미리 설치된 구성요소와 다음 선택적 구성요소만 지원합니다. 나머지 2.2 선택적 구성요소 및 모든 초기화 작업은 지원되지 않습니다.- Apache Hive WebHCat
- Docker
- Zeppelin
- Zookeeper (고가용성 클러스터에 설치됨, 기타 클러스터의 선택적 구성요소)
상호 및 제한된 라이선스에 따라 라이선스가 부여된 이미지 2.2 라이브러리의 소스 코드는 Dataproc 클러스터 VM의
/usr/local/share/google/dataproc/third-party-sources
경로에서 제공됩니다.다음 Hudi 프로시저는 Cloud Storage 파일 시스템으로 지원되는 Hudi 테이블에서 작동하지 않는 것으로 알려져 있습니다.
run_clustering
run_compaction
YARN의 기본 리소스 계산기가 DefaultResourceCalculator에서 DominantResourceCalculator는 메모리 및 CPU 할당과 같은 리소스 할당을 결정하기 위해 기본 리소스 개념을 사용합니다. 이 변경사항은 클러스터의 지배적인 리소스 사용량을 기준으로 확장하는 자동 확장 처리기에 영향을 미칩니다.