Per eseguire i container Docker sui nodi del cluster Dataproc, attiva il componente facoltativo Docker durante la creazione del cluster. Questo documento spiega come installare e configurare il componente Docker su Dataproc.
Per scoprire di più sugli altri componenti facoltativi disponibili in Dataproc, consulta Componenti facoltativi disponibili.
Come funziona il componente Docker
Quando abiliti il componente Dataproc Docker, viene installato un
daemon Docker
su ogni nodo del cluster. Inoltre, configura un utente e un gruppo Linux, entrambi denominati
"docker", su ogni nodo per eseguire il daemon Docker. Inoltre, il componente
crea il servizio "docker" systemd
per eseguire il servizio
dockerd. Devi utilizzare questo servizio systemd per gestire il ciclo di vita del servizio Docker.
Installa il componente
Installa il componente quando crei un cluster Dataproc. Il componente Docker può essere installato su cluster creati con Dataproc versione immagine 1.5 o successive.
Consulta Versioni di Dataproc supportate per la versione del componente inclusa in ogni release dell'immagine Dataproc.
Comando g-cloud
Per creare un cluster Dataproc che includa il componente Docker,
utilizza il comando
gcloud dataproc clusters create cluster-name
con il flag --optional-components.
gcloud dataproc clusters create cluster-name \ --optional-components=DOCKER \ --region=region \ --image-version=1.5 \ ... other flags
API REST
Il componente Docker può essere specificato tramite l'API Dataproc utilizzando SoftwareConfig.Component come parte di una richiesta clusters.create.
Console
- Attiva il componente.
- Nella console Google Cloud , apri la pagina Dataproc Crea un cluster. Il riquadro Configura cluster è selezionato.
- Nella sezione Componenti:
- Nella sezione Componenti facoltativi, seleziona Docker e altri componenti facoltativi da installare sul cluster.
Attiva Docker su YARN
Consulta Personalizzare l'ambiente di runtime del job Spark con Docker su YARN per utilizzare un'immagine Docker personalizzata con YARN.
Logging di Docker
Per impostazione predefinita, il componente Dataproc Docker scrive i log in
Cloud Logging impostando gcplogs driver. Per maggiori informazioni, consulta
Visualizzazione dei log.
Docker Registry
Il componente Dataproc Docker configura Docker per utilizzare Container Registry oltre ai registri Docker predefiniti. Docker utilizzerà l'assistente per le credenziali Docker per l'autenticazione con Container Registry.
Utilizzare il componente Docker su un cluster Kerberos
Puoi installare il componente facoltativo Docker su un cluster in fase di creazione con la sicurezza Kerberos abilitata.