"Managed Service for Apache Spark" is the new name for the product formerly known as "Dataproc on Compute Engine" (cluster deployment) and "Google Cloud Serverless for Apache Spark" (serverless deployment).

Google uses AI technology to translate content into your preferred language. AI translations can contain errors.

Komponen Pig opsional Managed Service untuk Apache Spark

Anda dapat menginstal komponen tambahan seperti Apache Pig saat membuat cluster Managed Service untuk Apache Spark menggunakan fitur Komponen opsional. Halaman ini menjelaskan komponen Pig, platform open source untuk menganalisis set data besar.

Instal komponen

Instal komponen saat Anda membuat cluster Managed Service untuk Apache Spark.

Apache Pig adalah komponen opsional di Managed Service untuk Apache Spark 2.3 dan versi image yang lebih baru.

Lihat Versi Managed Service untuk Apache Spark yang didukung untuk versi komponen yang disertakan dalam rilis gambar Managed Service untuk Apache Spark terbaru.

KonsolGoogle Cloud

Di Konsol Google Cloud , buka halaman Create cluster.
Klik Konfigurasi tambahan untuk meluaskan bagian tersebut.
Edit Komponen opsional.
Di panel yang terbuka, centang kotak untuk Pig, lalu klik Simpan.

gcloud CLI

Untuk membuat cluster Managed Service untuk Apache Spark yang menyertakan komponen Pig, gunakan perintah gcloud dataproc clusters create CLUSTER_NAME dengan flag --optional-components (menggunakan versi image 2.3 atau yang lebih baru).

gcloud dataproc clusters create CLUSTER_NAME \
    --region=REGION \
    --optional-components=PIG \
    --image-version=2.3 \
    ... other flags

REST API

Komponen Pig dapat ditentukan melalui Dataproc API menggunakan SoftwareConfig.Component sebagai bagian dari permintaan clusters.create.