Puedes instalar componentes adicionales, como Zookeeper, cuando creas un clúster de Managed Service para Apache Spark con la función de componentes opcionales. En esta página, se describe el componente de Zookeeper.
El componente Apache Zookeeper es un servicio centralizado que proporciona una sincronización distribuida de datos.
Instala el componente
Instala el componente cuando crees un clúster de Managed Service para Apache Spark.
Consulta las versiones compatibles de Dataproc para la versión del componente incluida en cada versión de la imagen de Managed Service para Apache Spark.
Comando de gcloud
Para crear un clúster de Managed Service para Apache Spark que incluya el componente Zookeeper, usa el comando gcloud dataproc clusters create cluster-name con la marca --optional-components (si usas la versión de imagen 1.0 o posterior).
gcloud dataproc clusters create cluster-name \ --optional-components=ZOOKEEPER \ --region=region \ ... other flags
API de REST
El componente de Zookeeper se puede especificar a través de la API de Managed Service para Apache Spark con SoftwareConfig.Component como parte de una solicitud clusters.create.Console
- Habilita el componente.
- En la consola de Google Cloud , abre la página Crear un clúster de Managed Service para Apache Spark. Se selecciona el panel Configurar clúster.
- En la sección Componentes, en Componentes opcionales, selecciona Zookeeper y otros componentes opcionales para instalar en tu clúster.