סקירה כללית על שמירה במטמון ב-Cloud Storage FUSE

במאמר הזה מפורטות אפשרויות השמירה במטמון שזמינות ל-Cloud Storage FUSE, ומוסבר איך להגדיר כל סוג של מטמון.

כדי לעזור להגדיל את הביצועים של אחזור הנתונים, Cloud Storage FUSE מציע ארבעה סוגים של שמירה במטמון (אופציונלי). בטבלה הבאה מפורט מידע נוסף על כל סוג של שמירה במטמון:

סוג השמירה במטמון תיאור
שמירת קבצים במטמון

מאיצה קריאות של נתוני קבצים לעומסי עבודה (workloads) עם קריאות רבות שבהם יש גישה חוזרת לנתונים, במיוחד אימון של בינה מלאכותית (AI) ולמידת מכונה שבו קוראים את אותם קבצים גדולים מספר פעמים, וכך מקטינה באופן משמעותי את זמן האחזור.
שמירה במטמון של רשימות

מאיצה פעולות של רישום ספריות עבור עומסי עבודה שכוללים רישום תכנים שלמים של ספריות לעיתים קרובות, כמו איטרציה על קבוצה גדולה של קבצים בתחילת עבודת עיבוד, וכך משפרת את מהירות הסריקה של הספריות.
שמירת נתונים סטטיסטיים במטמון

מאיץ פעולות של מטא-נתונים של קבצים באפליקציות שבודקות לעיתים קרובות מאפייני קבצים. זה נפוץ בהרבה אפליקציות שבודקות שוב ושוב אם קובץ השתנה, וכך מצמצם את מספר הקריאות ל-GetMetadata עבור Cloud Storage.
שמירה במטמון של סוגים

התכונה הזו מזרזת את הבדיקות של קבצים או ספריות בעומסי עבודה שמבצעים הרבה בדיקות של קבצים או חיפושים של נתיבים, ומשפרת את זמן האחזור על ידי צמצום מספר הבקשות שנשלחות ל-Cloud Storage כדי לבדוק אם נתיב קיים.

לתשומת ליבכם

  • הפעלת שמירת נתונים במטמון יכולה לשפר את הביצועים אבל להפחית את העקביות, מה שקורה בדרך כלל כשניגשים לאותו מאגר באמצעות כמה לקוחות עם שיעור שינוי גבוה. כדי לצמצם את ההשפעה על העקביות, מומלץ לטעון קטגוריות במצב קריאה בלבד. מידע נוסף על התנהגות השמירה במטמון אפשר למצוא במאמר בנושא הסמנטיקה של Cloud Storage FUSE במאמרי העזרה של Cloud Storage FUSE GitHub.

  • כדי למנוע מצב של החלפת נתונים במטמון, צריך לוודא שמערך הנתונים כולו נכנס לקיבולת המטמון. כדאי גם לקחת בחשבון את הקיבולת המקסימלית ואת הביצועים שהמדיה במטמון יכולה לספק. אם מגיעים לביצועים המקסימליים של המטמון שהוקצה, למגבלת הקיבולת או לשניהם, כדאי לקרוא ישירות מ-Cloud Storage, שבו המגבלות גבוהות בהרבה מאלה של Cloud Storage FUSE.

נתיב קריאה לנתונים שנשמרו במטמון

המטמון של Cloud Storage FUSE מזרז קריאות חוזרות אחרי שהן נטמעו במטמון. קריאות ראשונות ופספוסים במטמון מועברים ישירות אל Cloud Storage, והם כפופים לזמני השהייה הרגילים ברשת של Cloud Storage. כדי לשפר את הביצועים של קריאה ראשונה, אפשר לעיין במאמר בנושא אכלוס מראש של מטמון המטא-נתונים.

המאמרים הבאים