Provisioners in Cloud Data Fusion

מנהל הקצאות (provisioner) אחראי ליצירה ולפירוק של אשכול הענן שבו הפייפליין מופעל. ספקי הקצאת משאבים שונים יכולים ליצור סוגים שונים של אשכולות בעננים שונים.

כל מנהל הקצאות (provisioner) חושף קבוצה של הגדרות קביעת תצורה ששולטות בסוג האשכול שנוצר להרצה. לדוגמה, לספקי השירותים Managed Service for Apache Spark ו-Amazon EMR יש הגדרות לגודל האשכול. לספקי השירות יש גם הגדרות לפרטי הכניסה שנדרשים כדי לתקשר עם העננים המתאימים ולספק את צמתי המחשוב הנדרשים.

ספקי הקצאות נתמכים ב-Cloud Data Fusion

‫Cloud Data Fusion תומך בספקי השירות הבאים:

Managed Service for Apache Spark
שירות ענן מנוהל, מהיר וקל לשימוש להפעלת אשכולות של Apache Spark ו-Apache Hadoop.
‫Amazon Elastic MapReduce‏ (EMR)
מספק מסגרת מנוהלת של Hadoop שמעבדת כמויות עצומות של נתונים במקרים של מופעי Amazon EC2 שניתנים להרחבה באופן דינמי.
‫Remote Hadoop
הרצת משימות באשכול Hadoop קיים, מקומי או בענן.