Sie können zusätzliche Komponenten wie Apache Pig installieren, wenn Sie einen Managed Service for Apache Spark-Cluster mit dem Feature Optionale Komponenten erstellen. Auf dieser Seite wird die Pig-Komponente beschrieben, eine Open-Source-Plattform zum Analysieren großer Datasets.
Komponente installieren
Installieren Sie die Komponente, wenn Sie einen Managed Service for Apache Spark-Cluster erstellen.
Apache Pig ist eine optionale Komponente in Managed Service for Apache Spark-Image-Versionen ab Version 2.3.
Unter Unterstützte Managed Service for Apache Spark-Versionen finden Sie die Komponentenversionen, die in den neuesten Managed Service for Apache Spark-Image Releases enthalten sind.
Google Cloud Console
- Öffnen Sie in der Google Cloud Console die Seite Cluster erstellen.
- Klicken Sie auf Zusätzliche Konfiguration , um den Bereich zu maximieren.
- Bearbeiten Sie Optionale Komponenten.
- Wählen Sie im daraufhin geöffneten Bereich das Kästchen für Pig aus und klicken Sie dann auf Speichern.
gcloud CLI
Verwenden Sie zum Erstellen eines Managed Service for Apache Spark-Clusters, der die Pig-Komponente enthält,
verwenden Sie den
gcloud dataproc clusters create CLUSTER_NAME
Befehl mit dem --optional-components Flag (mit Image-Version
ab Version 2.3).
gcloud dataproc clusters create CLUSTER_NAME \ --region=REGION \ --optional-components=PIG \ --image-version=2.3 \ ... other flags
REST API
Die Pig-Komponente kann über die Dataproc API mit SoftwareConfig.Component als Teil einer clusters.create Anfrage angegeben werden.