"Managed Service for Apache Spark" is the new name for the product formerly known as "Dataproc on Compute Engine" (cluster deployment) and "Google Cloud Serverless for Apache Spark" (serverless deployment).

Google utilizza la tecnologia AI per tradurre i contenuti nella tua lingua preferita. Le traduzioni generate dall'AI potrebbero contenere errori.

Componente Pig facoltativo di Managed Service per Apache Spark

Puoi installare componenti aggiuntivi come Apache Pig quando crei un cluster Managed Service for Apache Spark utilizzando la funzionalità Componenti facoltativi. Questa pagina descrive il componente Pig, una piattaforma open source per l'analisi di set di dati di grandi dimensioni.

Installare il componente

Installa il componente quando crei un cluster Managed Service for Apache Spark.

Apache Pig è un componente facoltativo nelle versioni dell'immagine 2.3 e successive di Managed Service for Apache Spark.

Per le versioni dei componenti incluse nelle ultime release delle immagini di Managed Service for Apache Spark, consulta Versioni di Managed Service for Apache Spark supportate.

Google Cloud Console

Nella Google Cloud console, apri la pagina Crea cluster.
Fai clic su Configurazione aggiuntiva per espandere la sezione.
Modifica Componenti facoltativi.
Nel riquadro che si apre, seleziona la casella di controllo per Pig, quindi fai clic su Salva.

gcloud CLI

Per creare un cluster Managed Service for Apache Spark che includa il componente Pig, utilizza il gcloud dataproc clusters create CLUSTER_NAME comando con il --optional-components flag (utilizzando la versione dell'immagine 2.3 o successive).

gcloud dataproc clusters create CLUSTER_NAME \
    --region=REGION \
    --optional-components=PIG \
    --image-version=2.3 \
    ... other flags

API REST

Il componente Pig può essere specificato tramite l'API Dataproc utilizzando SoftwareConfig.Component come parte di una clusters.create.