ב-Cloud Storage יש מגוון אפשרויות שיעזרו לכם לבצע אופטימיזציה של אחסון הנתונים לתרחישים לדוגמה שדורשים ביצועים גבוהים, כמו בינה מלאכותית (AI), למידת מכונה (ML) וניתוח נתונים עתירי נתונים. בדף הזה נציג את האפשרויות האלה ונסביר איך לבחור את האפשרות שמתאימה לצרכים של עומסי העבודה שלכם.
משפחת המוצרים Cloud Storage Rapid
Cloud Storage Rapid היא משפחה של מוצרים עם ביצועים גבוהים ב-Cloud Storage, שנועדו לפתור צווארי בקבוק בנתונים בעומסי עבודה של AI/ML וניתוח נתונים. ככל שהמורכבות של מודלים של AI/ML גדלה וקבוצות הנתונים מגיעות לגודל של פטה-בייט, ביצועי האחסון הופכים לעיתים קרובות לצוואר הבקבוק העיקרי של אשכולות GPU ו-TPU יקרים. Cloud Storage Rapid משתמש בארכיטקטורות אזוריות כדי לקרב את הנתונים למשאבי המחשוב, וכך עוזר למאיצים להישאר רוויים, מקצר את זמני האימון ומפחית את עלות הבעלות הכוללת (TCO) של עומסי העבודה הכי תובעניים.
Cloud Storage Rapid כולל את Rapid Bucket ואת Rapid Cache.
אחסון נתונים בקטגוריית האחסון Rapid Storage באמצעות Rapid Bucket
Rapid Bucket הוא פתרון לאחסון אובייקטים באזורים עם ביצועים גבוהים, שמאפשר לאחסן נתונים בסוג האחסון Rapid על ידי הגדרת אזור כמיקום של הקטגוריה. בעזרת Rapid Bucket אתם יכולים למקם את הנתונים באותו אזור פיזי שבו נמצאים מאיצי ה-AI, וכך ליהנות מהזמן הקצר ביותר של זמן האחזור ומהקצב הגבוה ביותר של העברת הנתונים בהשוואה למוצרים אחרים של Cloud Storage. Rapid Bucket מספק זמן אחזור של פחות מאלפית השנייה, קצב העברת נתונים מצטבר של עד 15TB לשנייה, ותומך בעד 20 מיליון שאילתות לשנייה (QPS).
ב-Rapid Bucket אפשר להוסיף אובייקטים בסטרימינג עם שמירת מצב, וכך אפליקציות יכולות לכתוב נתונים לאובייקטים קיימים בזמן אמת. היכולת הזו מאפשרת לכם להימנע משכתובים יקרים של אובייקטים, ומאפשרת לראות את הנתונים באופן מיידי, כך שאפליקציות צרכניות יכולות לקרוא את הנתונים בזמן שהם נכתבים.
השימוש הכי מתאים: אימון, נקודות ביקורת והצגת מודלי AI שדורשים זמן אחזור קצר במיוחד וביצועים דטרמיניסטיים גבוהים
מתי כדאי להשתמש באפשרות הזו: כשרוצים ביצועים גבוהים ייעודיים גם לקריאה וגם לכתיבה
במאמר יצירת קטגוריות לפי אזור מוסבר איך יוצרים קטגוריות לפי אזור באמצעות Rapid Bucket.
יצירת מטמונים אזוריים באמצעות Rapid Cache
Rapid Cache הוא מטמון קריאה אזורי שמנוהל באופן מלא ומגובה ב-SSD. הוא פועל עם הקטגוריות הקיימות שלכם באזור אחד, בשני אזורים או בכמה אזורים, בלי צורך בשינויים ב-API. המטמון מספק קיבולת אחסון זמנית ורוחב פס שמתרחבים או מצטמצמים באופן אוטומטי בהתאם לצורכי עומסי העבודה. הנתונים נקלטים באופן אוטומטי במטמון מהקטגוריה, כשהנתונים נקראים על ידי מכונה וירטואלית שנמצאת באותו אזור כמו המטמון.
Rapid Cache מספק קצב העברת נתונים מצטבר של 2.5TB לשנייה ומפחית את זמן האחזור לקריאות מהירות יותר, על ידי מיקום הנתונים באותם אזורים שבהם נמצאות המכונות הווירטואליות. בנוסף להצגת נתונים מהירה יותר, הצגת נתונים ממטמון יכולה להוביל לעמלות נמוכות יותר על העברת נתונים, על אחזור נתונים ועל תפעול, בהשוואה להצגת נתונים ישירות מקטגוריה. מידע נוסף זמין בקטע יתרונות של Rapid Cache.
השימוש הכי טוב: אימון, שחזור נקודות ביקורת והצגת מודלים של AI שדורשים רוחב פס גבוה לקריאה מקטגוריה קיימת של Cloud Storage
מתי כדאי להשתמש באפשרות הזו? אם יש לכם מאגר נתונים קיים בקטגוריה של Cloud Storage שאתם רוצים להאיץ.