Serverless ל-Apache Spark מציע שני מסלולים, מסלול רגיל ומסלול פרימיום (ביצועים גבוהים), כדי לאפשר ללקוחות להתאים את דרישות הביצועים ואת הגישה לפיצ'רים לעלות אופטימלית.
ההטבות של מינוי Premium
מסלול הפרימיום שונה מהמסלול הרגיל ביכולות ובתכונות הנוספות שלו. רמת הפרימיום מספקת האצה מתקדמת של שאילתות, והאצה של מחשוב, דיסק וזיכרון, שלרוב נדרשים לעומסי עבודה מורכבים או לעומסי עבודה שרגישים לזמן האחזור.
תכונות ויכולות של מסלול פרימיום
בטבלה הבאה מפורטות התכונות והיכולות הבלעדיות של מסלול הפרימיום של Serverless for Apache Spark.
| תכונה | רגילה | פרימיום |
|---|---|---|
| Lightning Engine (האצת שאילתות) |  |
(ברירת מחדל: מופעלת, למעט סשנים אינטראקטיביים) |
| עומסי עבודה אינטראקטיביים (סשנים) | |
(ברירת מחדל: מופעל) |
| משימות שדורשות הרבה ערבוב (דיסק פרימיום) | |
(ברירת מחדל: מושבת) |
| משימות שדורשות הרבה זיכרון (זיכרון מורחב) | |
(ברירת מחדל: מושבת) |
| תמיכה ב-GPU | |
(ברירת מחדל: מושבת) |
| עומסי עבודה (workloads) של אצווה | ||
| התאמה אוטומטית לעומס (autoscaling) | ||
| ממשק משתמש של Spark ללא שרת | ||
| Lineage, Security and Compliance (VPC-SC, CMEK) |
סשנים ועומסי עבודה (workloads) באצווה במסלול פרימיום
כדי להשתמש בעומסי העבודה ובסשנים הבאים, נדרש מסלול פרימיום:
- Lightning Engine: Lightning Engine זמין באופן בלעדי ברמת הפרימיום. זוהי תכונה חשובה שמאיצה את הביצועים של Spark באמצעות ביצוע אופטימלי של שאילתות. היא מופעלת כברירת מחדל כשבוחרים במסלול הפרימיום לעומסי עבודה של אצווה על ידי הגדרת המאפיין
dataproc.tierלערךpremium. - סשנים אינטראקטיביים: סשנים אינטראקטיביים נחשבים באופן אוטומטי לתכונת פרימיום בעלת ערך גבוה. הן מופעלות באמצעות Dataproc sessions API, והחיוב עליהן הוא לפי תעריף פרימיום של DCU. הן מספקות יכולות כמו אינטראקטיביות עם זמן אחזור קצר וניהול מצב. בסשנים אינטראקטיביים, כדי להפעיל את Lightning Engine, צריך להגדיר את המאפיין
spark.dataproc.engineלערךlightningEngine. - תמיכה ב-GPU: תמיכה ב-GPU זמינה רק ברמת הפרימיום. ההגדרה הזו מושבתת כברירת מחדל. מפעילים אותו באמצעות דגלי הגדרה. תמיכה ב-GPU מתבססת על תשתית ייעודית, והיא כלולה בתעריף הפרימיום של DCU ללא עלות נוספת של מחשוב.
מודל תמחור צפוי של מסלול פרימיום
במסלול פרימיום יש מודל תמחור פשוט הכולל את כל היכולות העיקריות. התעריף של יחידת הקיבולת Premium כולל גישה לתכונות מתקדמות כמו Lightning Engine, זיכרון מורחב והתשתית הייעודית שנדרשת לעבודות שכוללות הרבה ערבוב נתונים. כשמפעילים את התכונות האלה באמצעות דגלי הגדרה, הן נכללות בתעריף הבסיסי של DCU Premium ולא כרוכות בעלות נוספת על מחשוב. כלומר, אתם משלמים מחיר פרימיום אחד צפוי כדי לקבל גישה לחבילה המלאה של יכולות מתקדמות ברמת פרימיום.