Google Managed Service for Apache Spark משתמש בגרסאות של תמונות Ubuntu, Debian ו-Rocky Linux כדי לאגד מערכת הפעלה, רכיבי ביג דאטה ו Google Cloud מחברים Google Cloud לחבילה אחת שמוצבת באשכול. מידע נוסף זמין במאמר ניהול גרסאות ב-Managed Service for Apache Spark.
הערות:
- גרסאות של תמונות של Managed Service for Apache Spark נתמכות למשך 24 חודשים אחרי ההשקה הראשונית שלהן.
- בדרך כלל, גרסאות תמונות של Managed Service for Apache Spark זמינות למשך 24 חודשים אחרי תאריך סיום התמיכה שלהן, אבל תקופת הזמינות יכולה להתקצר אם תאריך התמיכה בתמונה הוארך.
גרסת ברירת המחדל של תמונת Managed Service for Apache Spark
Managed Service for Apache Spark מעדכן את גרסת התמונה שמוגדרת כברירת מחדל לגרסה האחרונה של Managed Service for Apache Spark שמבוסס על Debian, אחרי תאריך ההשקה של הגרסה שזמינה לכלל המשתמשים (GA).
גרסאות נתמכות של תמונות של Managed Service for Apache Spark
תמונות של Debian
הגרסאות הבאות של תמונות מבוססות Debian נתמכות באשכולות של Managed Service for Apache Spark. שימו לב: ייווצרו אשכולות חדשים שיכללו תיקונים משניים (sub-minor) שבוצעו בגרסה מסוימת מאז ההשקה שלה.
| גרסה | עדכון אחרון | תאריך הפרסום | נתמך עד | זמין עד | הערות |
|---|---|---|---|---|---|
| 3.0-debian12 | 2026/05/03 | 2025/09/08 | TBD | TBD | גרסת בטא. |
| 2.3-debian12 | 2026/05/19 | 2025/06/09 | 2027/06/09 | 2029/06/09 | גרסה שזמינה לכלל המשתמשים (GA). |
| 2.2-debian12 | 2026/05/19 | 2023/12/08 | 31/03/2027 | 2027/12/31 | השקה לזמינות לכלל המשתמשים (GA). גרסת התמונה 2.2 תהפוך לגרסת התמונה שמוגדרת כברירת מחדל ב-13 בספטמבר 2024. |
| 2.1-debian11 | 2026/05/19 | 2022/12/12 | 2026/03/31 | 31/12/2026 | גרסה שזמינה לכלל המשתמשים (GA). |
תמונות של Ubuntu
הגרסאות הבאות של תמונות מבוססות Ubuntu LTS נתמכות באשכולות של Managed Service for Apache Spark. שימו לב שאשכולות חדשים ייווצרו כך שיכללו תיקונים משניים שבוצעו בגרסה מאז ההשקה שלה.
| גרסה | עדכון אחרון | תאריך הפרסום | נתמך עד | זמין עד | הערות |
|---|---|---|---|---|---|
| 3.0-ubuntu24 | 2026/05/03 | 2025/09/08 | TBD | TBD | גרסת בטא. |
| 2.3-ubuntu22 | 2026/05/19 | 2025/06/09 | 2027/06/09 | 2029/06/09 | גרסה שזמינה לכלל המשתמשים (GA). |
| 2.2-ubuntu22 | 2026/05/19 | 2023/12/08 | 31/03/2027 | 2027/12/31 | גרסה שזמינה לכלל המשתמשים (GA). |
| 2.1-ubuntu20 | 2026/05/19 | 2022/12/12 | 2026/03/31 | 31/12/2026 | גרסה שזמינה לכלל המשתמשים (GA). |
תמונות של Rocky Linux
הגרסאות הבאות של תמונות מבוססות Rocky Linux נתמכות באשכולות של Managed Service for Apache Spark. שימו לב: ייווצרו אשכולות חדשים שיכללו את כל תיקוני המשנה שבוצעו בגרסה מאז ההשקה שלה.
| גרסה | עדכון אחרון | תאריך הפרסום | נתמך עד | זמין עד | הערות |
|---|---|---|---|---|---|
| 3.0-rocky9 | 2026/05/03 | 2025/09/08 | TBD | TBD | גרסת בטא. |
| 2.3-rocky9 | 2026/05/19 | 2025/06/09 | 2027/06/09 | 2029/06/09 | גרסה שזמינה לכלל המשתמשים (GA). |
| 2.2-rocky9 | 2026/05/19 | 2023/12/08 | 31/03/2027 | 2027/12/31 | גרסה שזמינה לכלל המשתמשים (GA). |
| 2.1-rocky8 | 2026/05/19 | 2022/12/12 | 2026/03/31 | 31/12/2026 | גרסה שזמינה לכלל המשתמשים (GA). |
גרסאות תמונה של Managed Service for Apache Spark שלא נתמכות
הגרסאות הבאות של Managed Service for Apache Spark לא נתמכות. שירות Managed Service for Apache Spark לא מספק עדכונים ותמיכה לאשכולות שנוצרו באמצעות הגרסאות האלה. תאריך סוף החיים של גרסאות 1.x ו-2.0 הוא 25 באוגוסט 2026. אם אתם מפעילים גרסאות שלא נתמכות, אתם צריכים לשדרג את האשכולות לתמונות נתמכות.
| גרסה | כולל | תאריך הפרסום | תאריך עדכון אחרון | זמין עד | הערות |
|---|---|---|---|---|---|
2.0-debian10/-ubuntu18/-rocky8 |
Apache Spark 3.1.3 Apache Hadoop 3.2.4 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.3 Cloud Storage connector 2.2.30-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
2021/01/22:debian10/ubuntu18 2022/02/18:rocky8 |
2026/02/24 | 2026/08/25 | לא נתמך החל מ-24.2.2026. הגרסה האחרונה שפורסמה הייתה 2.0.160-debian10/-ubuntu18/-rocky8. |
2.0-centos8 |
Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Cloud Storage connector 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
2021/03/16 | 2022/02/01 | 2026/08/25 | לא נתמכת החל מ-2022/02/01. 2.0.30-centos8 הייתה הגרסה הסופית שהושקה. |
1.5-debian10/-ubuntu18/-rocky8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/03/25:debian10/ubuntu18 2022/02/18:rocky8 |
28/04/2023 | 2026/08/25 | לא נתמך החל מ-28 באפריל 2023. 1.5.89-debian10/-ubuntu18/-rocky8 הייתה הגרסה הסופית שפורסמה. |
1.5-centos8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/12/14 | 2022/02/01 | 2026/08/25 | לא נתמך החל מ-2022/02/01. 1.5.56-centos8 הייתה הגרסה הסופית שפורסמה. |
1.4-debian10/-ubuntu18 |
Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14 |
2019/03/22 | 2022/02/01 | 2026/08/25 | הגרסה לא נתמכת החל מ-2022/02/01. 1.4.80-debian10/-ubuntu18 הייתה הגרסה הסופית שפורסמה. |
1.4-debian9 |
Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13 |
2019/03/22 | 2020/07/10 | 2026/08/25 | התמיכה הופסקה ב-10 ביולי 2020. 1.4.33-debian9 הייתה הגרסה האחרונה שפורסמה. |
1.3-debian10/-ubuntu18 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
2018/06/29 | 2021/12/22 | 2026/08/25 | לא נתמכת החל מ-2021/08/01. 1.3.95-debian10/-ubuntu18 הייתה הגרסה האחרונה שפורסמה, ובה טופלו נקודות חולשה ב-log4j2. הערה: גרסאות שפורסמו בעבר פגיעות, וחובה לשדרג אותן. |
1.3-debian9 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
2018/06/29 | 2020/07/10 | 2026/08/25 | התמיכה הופסקה ב-10 ביולי 2020. 1.3.62-debian9 הייתה הגרסה הסופית שפורסמה. |
1.2-debian9 |
Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Cloud Storage connector 1.6.10-hadoop2 BigQuery connector 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
2017/07/21 | 2020/07/10 | לא זמין | התמיכה בגרסה הזו הופסקה ב-10 ביולי 2020. 1.2.102-debian9 הייתה הגרסה האחרונה שפורסמה. |
1.1-debian9 |
Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Cloud Storage connector 1.6.10-hadoop2 BigQuery connector 0.10.11-hadoop2 |
2016/08/08 | 2019/09/26 | לא זמין | התמיכה הופסקה ב-2019/10/01. 1.1.121-debian9 היא הגרסה הסופית שפורסמה. |
1.0-debian9 |
Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Cloud Storage connector 1.6.10-hadoop2 BigQuery connector 0.10.11-hadoop2 |
2016/02/22 | 2019/05/09 | לא זמין | הגרסה הראשונה של GA image. התמיכה בה הופסקה ב-1 באפריל 2019. הגרסה האחרונה שפורסמה הייתה 1.0.119-debian9. |
0.2 |
Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 Cloud Storage connector 1.5.1-hadoop2 BigQuery connector 0.7.7-hadoop2 |
2015/11/18 | 2016/08/02 | לא זמין | גרסה שנייה של תמונת בטא. |
0.1 |
Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Cloud Storage connector 1.5.1-hadoop2 BigQuery connector 0.7.7-hadoop2 |
2015/09/23 | 2016/08/02 | לא זמין | השקת גרסת בטא של Managed Service for Apache Spark. Spark 1.5 עבר קומפילציה מול Hive 1.2. |