שימוש חוזר באשכולות

שימוש חוזר באשכולות של Managed Service for Apache Spark ב-Cloud Data Fusion מאפשר לכם להפחית את התקורה של הקצאת המשאבים ולהאיץ את הביצוע של צינור עיבוד הנתונים בכל ההרצות. מידע נוסף זמין במאמרים מתי להשתמש מחדש באשכולות והפעלת צינור עיבוד נתונים באשכול קיים של Managed Service for Apache Spark.

לפני שמתחילים

  • צריך להיות לכם מכונה של Cloud Data Fusion בגרסה 6.5.0 ואילך.

הפעלת שימוש חוזר באשכולות

אפשר להשתמש שוב באשכולות בפרופיל מחשוב חדש, או בפרופיל שכבר השתמשתם בו ב-pipeline שנפרס.

הפעלת שימוש חוזר באשכולות בפרופיל חדש

  1. עוברים למכונה:

    1. במסוף Google Cloud , נכנסים לדף Cloud Data Fusion.

    2. כדי לפתוח את המכונה ב-Cloud Data Fusion Studio, לוחצים על Instances (מכונות) ואז על View instance (הצגת מכונה).

      כניסה לדף Instances

  2. לוחצים על System admin > Configuration > System compute profiles.

  3. לוחצים על יצירת פרופיל חדש.

  4. בוחרים את המקצה Managed Service for Apache Spark.

  5. בחלון Create a profile for Managed Service for Apache Spark, מזינים את פרטי האשכול:

    1. בשדות Profile label ו-Profile name, מזינים שם לזיהוי הפרופיל, לדוגמה execution_compute-profile.
    2. בשדה Description, מתארים את מטרת הפרופיל, לדוגמה Profile used for pipeline execution.
    3. בשדה זמן מקסימלי ללא פעילות, מזינים ערך. מידע נוסף זמין במאמר הגדרת זמן חוסר פעילות מקסימלי.
    4. מגדירים את השדה Skip cluster delete לערך True. מידע נוסף זמין במאמר מתי כדאי להשתמש מחדש באשכולות.
    5. אופציונלי: מגדירים שדות אופציונליים אחרים.
    6. לוחצים על יצירה.

הפעלת שימוש חוזר באשכול בצינור עיבוד נתונים פרוס

  1. עוברים למכונה:

    1. במסוף Google Cloud , נכנסים לדף Cloud Data Fusion.

    2. כדי לפתוח את המכונה ב-Cloud Data Fusion Studio, לוחצים על Instances (מכונות) ואז על View instance (הצגת מכונה).

      כניסה לדף Instances

  2. לוחצים על רשימה.

  3. לוחצים על הכרטיסייה Deployed ואז על שם של צינור עיבוד נתונים. צינור עיבוד הנתונים שנפרס נפתח בדף Studio בממשק האינטרנט של Cloud Data Fusion.

  4. לוחצים על הגדרה.

  5. בחלון Compute config, בוחרים את הפרופיל הרצוי ולוחצים על Customize.

  6. בחלון שנפתח, מזינים את הערכים הבאים:

    1. בשדה זמן חוסר פעילות מקסימלי, מזינים ערך. מידע נוסף זמין במאמר הגדרת זמן חוסר פעילות מקסימלי.
    2. מגדירים את Skip cluster delete לערך True. מידע נוסף זמין במאמר מתי כדאי להשתמש מחדש באשכולות.

  7. לוחצים על סיום.

המאמרים הבאים