Managed Service for Apache Spark 選用 Pig 元件

當您使用選用元件功能建立 Managed Service for Apache Spark 叢集時，可以安裝 Apache Pig 等其他元件。本頁說明 Pig 元件，這是用來分析大型資料集的開放原始碼平台。

安裝元件

請在建立 Managed Service for Apache Spark 叢集時安裝元件。

Apache Pig 是 Managed Service for Apache Spark 2.3 和更新版本映像檔的選用元件。

注意： Managed Service for Apache Spark 2.2 和更早的映像檔版本會自動安裝 Apache Pig。

如要瞭解最新 Managed Service for Apache Spark 映像檔版本中包含的元件版本，請參閱「支援的 Managed Service for Apache Spark 版本」。

Google Cloud 控制台

1. 在 Google Cloud 控制台中，開啟「建立叢集」頁面。
2. 按一下「其他設定」展開該部分。
3. 編輯「選用元件」。
4. 在開啟的面板中，勾選「Pig」核取方塊，然後按一下「儲存」。

gcloud CLI

如要建立包含 Pig 元件的 Managed Service for Apache Spark 叢集，請使用 gcloud dataproc clusters create CLUSTER_NAME 指令搭配 --optional-components 旗標 (請使用 2.3 以上版本的映像檔)。

gcloud dataproc clusters create CLUSTER_NAME \
    --region=REGION \
    --optional-components=PIG \
    --image-version=2.3 \
    ... other flags

REST API

您可以透過 Dataproc API，使用 SoftwareConfig.Component 做為 clusters.create 要求的一部分，指定 Pig 元件。