"Managed Service for Apache Spark" is the new name for the product formerly known as "Dataproc on Compute Engine" (cluster deployment) and "Google Cloud Serverless for Apache Spark" (serverless deployment).

Google uses AI technology to translate content into your preferred language. AI translations can contain errors.

רכיב Pig אופציונלי של Managed Service for Apache Spark

כשיוצרים אשכול של Managed Service for Apache Spark באמצעות התכונה רכיבים אופציונליים, אפשר להתקין רכיבים נוספים כמו Apache Pig. בדף הזה מתואר רכיב Pig, פלטפורמת קוד פתוח לניתוח מערכי נתונים גדולים.

התקנת הרכיב

מתקינים את הרכיב כשיוצרים אשכול של Managed Service for Apache Spark.

‫Apache Pig הוא רכיב אופציונלי ב-Managed Service for Apache Spark 2.3 ובגרסאות מאוחרות יותר של תמונות.

במאמר גרסאות נתמכות של Managed Service for Apache Spark מפורטות גרסאות הרכיבים שנכללות במהדורות האחרונות של תמונות Managed Service for Apache Spark.

מסוףGoogle Cloud

במסוף Google Cloud , פותחים את הדף Create cluster.
לוחצים על הגדרה נוספת כדי להרחיב את הקטע.
עורכים את הרכיבים האופציונליים.
בחלונית שנפתחת, מסמנים את התיבה Pig ולוחצים על שמירה.

‫CLI של gcloud

כדי ליצור אשכול Managed Service for Apache Spark שכולל את רכיב Pig, משתמשים בפקודה gcloud dataproc clusters create CLUSTER_NAME עם הדגל --optional-components (באמצעות גרסת תמונה 2.3 ואילך).

gcloud dataproc clusters create CLUSTER_NAME \
    --region=REGION \
    --optional-components=PIG \
    --image-version=2.3 \
    ... other flags

‫API בארכיטקטורת REST

אפשר לציין את רכיב Pig באמצעות Dataproc API באמצעות SoftwareConfig.Component כחלק מבקשת clusters.create.