"Managed Service for Apache Spark" is the new name for the product formerly known as "Dataproc on Compute Engine" (cluster deployment) and "Google Cloud Serverless for Apache Spark" (serverless deployment).

Google uses AI technology to translate content into your preferred language. AI translations can contain errors.

Komponen Pig opsional Managed Service untuk Apache Spark

Anda dapat menginstal komponen tambahan seperti Apache Pig saat membuat cluster Managed Service untuk Apache Spark menggunakan fitur Komponen opsional. Halaman ini menjelaskan komponen Pig, platform open source untuk menganalisis set data besar.

Menginstal komponen

Instal komponen saat Anda membuat cluster Managed Service untuk Apache Spark.

Apache Pig adalah komponen opsional di Managed Service untuk Apache Spark 2.3 dan versi image yang lebih baru.

Lihat Versi Managed Service untuk Apache Spark yang didukung untuk mengetahui versi komponen yang disertakan dalam rilis image Managed Service untuk Apache Spark terbaru.

Google Cloud Konsol

Di Google Cloud konsol, buka halaman Create cluster.
Klik Additional configuration untuk meluaskan bagian tersebut.
Edit Optional components.
Di panel yang terbuka, centang kotak untuk Pig, lalu klik Save.

gcloud CLI

Untuk membuat cluster Managed Service untuk Apache Spark yang menyertakan komponen Pig, gunakan gcloud dataproc clusters create CLUSTER_NAME perintah dengan flag --optional-components (menggunakan versi image 2.3 atau yang lebih baru).

gcloud dataproc clusters create CLUSTER_NAME \
    --region=REGION \
    --optional-components=PIG \
    --image-version=2.3 \
    ... other flags

REST API

Komponen Pig dapat ditentukan melalui Dataproc API menggunakan SoftwareConfig.Component sebagai bagian dari permintaan clusters.create.