מידע על הכלי לייעוץ בנושא Storage Intelligence

בדף הזה מוסבר איך אפשר להשתמש ב-Storage Intelligence Advisor כדי לעקוב אחרי סביבת Cloud Storage ולנהל אותה בארגונים, בתיקיות ובפרויקטים.

היועץ של Storage Intelligence מציג מגמות וחריגות בדפוסי האחסון, ומספק המלצות מובנות לאופטימיזציה של השימוש ולפתרון צווארי בקבוק בביצועים.

איך פותחים את Storage Intelligence advisor

המבנה והחלקים של Storage Intelligence advisor

כדי לעזור לכם לנהל את סביבת האחסון, הייעוץ של Storage Intelligence מציג תובנות באמצעות היררכיה מובנית של מדדים, ממצאים והשלבים הבאים:

  • מדדים: נקודות על הגרף שנאספות מסביבת Cloud Storage, כמו נפח האחסון, מספר האובייקטים וקצב הפעולות.
  • ממצאים: חריגות שזוהו במדדים ודורשות התייחסות, כמו עלייה חדה במספר השגיאות או שימוש לא יעיל באחסון.
  • השלבים הבאים: המלצות שמופיעות לצד כל ממצא כדי לעזור לכם לפתור את הבעיה שזוהתה.

כדי לעזור לכם לנתח את נתוני האחסון, הייעוץ של Storage Intelligence כולל את החלקים הבאים.

בקצרה

בקטע בקצרה מוצגת תמונת מצב יומית של סביבת האחסון. תווית הקטע משתנה בהתאם למשאב שנבחר: Project at a glance,‏ Folder at a glance או Organization at a glance. מוצגים כאן מדדים מרכזיים כמו גודל האחסון הכולל, מספר הקטגוריות ומספר האובייקטים, וגודל האובייקט הממוצע. בטבלה הבאה מוסבר איך להשתמש במדדים האלה כדי לנתח את ניצול האחסון:

מדד תיאור
נפח האחסון הכולל הגודל הכולל של האחסון שלכם בסוגי האחסון Multi-Regional ו-Regional.
סך כל הקטגוריות עם אובייקטים מספר הקטגוריות שמכילות לפחות אובייקט אחד.
סה"כ אובייקטים המספר הכולל של האובייקטים בהיקף המשאבים שבחרתם.
גודל אובייקט ממוצע הגודל הממוצע של האובייקטים בפרויקט, בתיקייה או בארגון, שמציין את יעילות האחסון.

הממצאים המובילים

בקטע ממצאים מובילים מוצגות התראות על שינויים בהתנהגות האחסון שדורשים התייחסות. בהתאם להיקף המשאבים שנבחר, הממצאים מספקים תובנות מצטברות או מפורטות:

  • היקף הארגון והתיקייה: בכל כרטיס של ממצא מוצגות אנומליות שמצטברות בפרויקטים הכלולים, ומוצג מספר הפרויקטים המושפעים. כדי לראות חלונית עם רשימה של כל הפרויקטים המושפעים, לוחצים על הצגת פרטים. לאחר מכן תוכלו לפתוח את פרטי הממצאים של כל פרויקט בכרטיסייה חדשה.
  • היקף הפרויקט: כרטיסי המידע מאפשרים לכם להתעמק בפרטים ברמת הקטגוריה וברמת האובייקט של הפרויקט.

כל ממצא משויך לאחת מהקטגוריות הבאות כדי לציין את ההשפעה שלו:

  • אופטימיזציה של השימוש: ממצאים שמשפיעים על נפח אחסון נדרש ועל היעילות של העלויות.

  • ביצועים: ממצאים שמשפיעים על המהירות, זמן האחזור והתקינות התפעולית.

בטבלה הבאה מתוארים הממצאים שזמינים ב-Storage Intelligence advisor:

ממצא קטגוריה תיאור
עלייה חדה בפעולות מסוג Class A או Class B בנתונים ב-Coldline או ב-Archive אופטימיזציה של השימוש

מציין פעולות תכופות על נתונים ב-Coldline Storage וב-Archive Storage. לדוגמה, יכול להיות שתראו את הממצא הזה אם עבודת ניתוח נתונים ניגשת מדי יום לדוחות חודשיים שמאוחסנים ב-Archive Storage, וכך יוצרת קצב גבוה של פעולות על נתונים שמתאימים יותר לאחסון ב-Standard Storage. כדי לפתור את הבעיה הזו, צריך להעביר את הנתונים לסוג אחסון שמתאים לגישה תכופה, או לשנות את הגדרות ניתוח הנתונים כך שישתמשו בנתונים שנשמרו במטמון.

מידע נוסף זמין במאמר אופטימיזציה של השימוש בנתונים ב-Coldline Storage וב-Archive Storage.

עלייה חדה בשגיאות 429, שמצביעות על בקשות שהקצב שלהן מוגבל ביצועים

מציין ש-Cloud Storage מגביל את קצב הבקשות, מה שגורם לזמן אחזור ארוך ולזמן קצוב לתפוגה. לדוגמה, הממצא הזה יכול להופיע אם משימת עיבוד ברצף (batch processing) קוראת או כותבת במהירות הרבה אובייקטים באותה קטגוריה, חורגת ממגבלות הבקשות וגורמת לשגיאות 429 Too Many Requests. כדי לפתור את הבעיה הזו, צריך להטמיע באפליקציה השהיה מעריכית (exponential backoff) לפני ניסיון חוזר או להגדיל בהדרגה את קצב העברת הבקשות.

מידע נוסף זמין במאמר שיפור הביצועים על ידי צמצום שגיאות של בקשות מוגבלות.

עלייה חדה בתעבורת הנתונים היוצאת לכמה אזורים אופטימיזציה של השימוש

מציין עלייה בהעברת הנתונים בין קטגוריות של Cloud Storage באזור אחד לבין שירותי Google Cloud אחרים באזור אחר. הפעילות הזו עלולה להוביל לעלויות בלתי צפויות של תעבורת נתונים יוצאת. לדוגמה, הממצא הזה יכול להופיע אם מכונה של Compute Engine ב-us-central1 ניגשת לעיתים קרובות לקטגוריה ב-us-east1. כדי לפתור את הממצא הזה, מקם את משאבי האחסון ואת Google Cloud באותו אזור באמצעות העברת קטגוריות למיקום גיאוגרפי אחר.

מידע נוסף על ניהול תעבורת נתונים יוצאת בין אזורים

מספר הבייטים הכולל שמאוחסנים עלה מעל למגמה ב-30 הימים האחרונים אופטימיזציה של השימוש

מציין שצריכת האחסון גדלה מעבר למגמות ההיסטוריות ב-30 הימים האחרונים. לדוגמה, הממצא הזה יכול להופיע אם הקטגוריה שומרת גרסאות לא עדכניות של אובייקטים ללא הגבלת זמן אחרי שמעלים גרסאות חדשות. שמירה ללא הגבלת זמן עלולה להוביל לעלויות אחסון מיותרות. כדי לפתור את הבעיה, אתם יכולים להשתמש בניהול מחזור החיים של אובייקטים כדי למחוק גרסאות לא עדכניות או להעביר אותן לאחסון בשימוש נדיר (cold storage), או להפעיל סיווג אוטומטי כדי לנהל באופן אוטומטי את סוגי האחסון על סמך דפוסי הגישה.

מידע נוסף על זיהוי צריכת אחסון מעל המגמה

תרשימים עיקריים

בקטע Key charts יש תרשימים של סדרות זמנים, שמאפשרים לראות את המגמות הבאות באחסון:

  • מספר מצטבר של אובייקטים: מעקב אחרי המספר הכולל של אובייקטים בפרויקט, בתיקייה או בארגון שבחרתם, במיקומים ובסוגי אחסון שונים.
  • ‫Storage volume over time: מעקב אחרי נפח האחסון במיקומים ובסוגי אחסון שונים.

תרחישים לדוגמה

היועץ של Storage Intelligence תומך בתרחישי השימוש הבאים.

מזעור של דוחות בהתאמה אישית

אפשר לעקוב אחרי מדדים בסביבת Cloud Storage בלי לתחזק צינורות לעיבוד נתונים בהתאמה אישית, סקריפטים של BigQuery או כלי ויזואליזציה חיצוניים.

פיקוח מרכזי

אתם יכולים להעריך את התקינות של כל סביבת Cloud Storage בממשק אחד, בפרויקטים, בתיקיות או בארגונים, בלי להריץ שאילתות ידניות ביומנים או במשאבים שונים.

כדי להתחיל, קראו את המאמר הצגת הייעוץ של Storage Intelligence.

אופטימיזציה של נפח האחסון הנדרש

לזהות הזדמנויות לאופטימיזציה של נפח אחסון נדרש, על ידי התאמת הנתונים לסוג האחסון המתאים. לדוגמה, ממצא Spike in Class A or B operations on Coldline or Archive data מציין שיש גישה תכופה לנתונים ב-Coldline Storage או ב-Archive Storage. יכול להיות שהנתונים האלה מתאימים יותר לסוג אחסון שמיועד לגישה תכופה, כמו Standard Storage או Nearline Storage.

מידע נוסף זמין במאמר אופטימיזציה של השימוש בנתונים ב-Coldline Storage וב-Archive Storage.

פתרון צווארי בקבוק בביצועים

זיהוי בעיות בביצועים, כמו ויסות נתונים (throttle) של בקשות או עלייה חדה לא צפויה בפעולות. ממצאים כמו Spike in 429 errors עוזרים לבצע אופטימיזציה של דפוסי הקלט/פלט כדי לשפר את האמינות של האפליקציה.

מידע נוסף זמין במאמר שיפור הביצועים על ידי צמצום שגיאות של בקשות שהקצב שלהן מוגבל.

תמיכה ב-VPC Service Controls

היועץ של Storage Intelligence תומך ב-VPC Service Controls למשאבים ברמת הפרויקט בתוך גבולות גזרה לשירות. לפרטים על התמיכה ב-VPC Service Controls והמגבלות ברמת המשאב, קראו את המאמר מוצרים נתמכים של VPC Service Controls: ‏Cloud Storage.

המאמרים הבאים