מידע על הכלי לייעוץ בנושא Storage Intelligence

בדף הזה מוסבר איך אפשר להשתמש ב-Storage Intelligence Advisor כדי לעקוב אחרי סביבת Cloud Storage ולנהל אותה בארגונים, בתיקיות ובפרויקטים.

היועץ של Storage Intelligence מציג מגמות וחריגות בדפוסי האחסון, ומספק המלצות מובנות לאופטימיזציה של השימוש ולפתרון צווארי בקבוק בביצועים.

איך פותחים את Storage Intelligence advisor

המבנה והחלקים של Storage Intelligence advisor

כדי לעזור לכם לנהל את סביבת האחסון, הייעוץ של Storage Intelligence מציג תובנות באמצעות היררכיה מובנית של מדדים, ממצאים והשלבים הבאים:

  • מדדים: נקודות על הגרף שנאספות מסביבת Cloud Storage, כמו נפח האחסון, מספר האובייקטים וקצב הפעולות.
  • ממצאים: חריגות שזוהו במדדים ודורשות התייחסות, כמו עלייה חדה במספר השגיאות או שימוש לא יעיל באחסון.
  • השלבים הבאים: המלצות שמופיעות לצד כל ממצא כדי לעזור לכם לפתור את הבעיה שזוהתה.

כדי לעזור לכם לנתח את נתוני האחסון, הייעוץ של Storage Intelligence כולל את החלקים הבאים.

בקצרה

בקטע בקצרה מוצגת תמונת מצב יומית של סביבת האחסון. תווית הקטע משתנה בהתאם למשאב שנבחר: Project at a glance,‏ Folder at a glance או Organization at a glance. מוצגים בו מדדים מרכזיים כמו גודל האחסון הכולל, מספר הקטגוריות והאובייקטים וגודל האובייקט הממוצע. בטבלה הבאה מוסבר איך להשתמש במדדים האלה כדי לנתח את ניצול האחסון:

מדד תיאור
נפח האחסון הכולל הגודל הכולל של האחסון שלכם בסוגי האחסון Multi-Regional ו-Regional.
סה"כ קטגוריות עם אובייקטים מספר הקטגוריות שמכילות לפחות אובייקט אחד.
סה"כ אובייקטים המספר הכולל של האובייקטים בהיקף המשאבים שבחרתם.
גודל אובייקט ממוצע הגודל הממוצע של האובייקטים בפרויקט, בתיקייה או בארגון, שמציין את יעילות האחסון.

הממצאים המובילים

בקטע Top findings מוצגות התראות על שינויים בהתנהגות האחסון שדורשים התייחסות. בהתאם להיקף המשאבים שנבחר, הממצאים מספקים תובנות מצטברות או מפורטות:

  • היקפים של ארגונים ותיקיות: כל כרטיס ממצא צובר חריגות בפרויקטים הכלולים ומציג את מספר הפרויקטים המושפעים. כדי לפתוח חלונית עם רשימה של כל הפרויקטים המושפעים, לוחצים על View details. לאחר מכן תוכלו לפתוח את פרטי הממצאים של כל פרויקט בכרטיסייה חדשה.
  • היקף הפרויקט: כרטיסי הממצאים מאפשרים לכם להציג פרטים ברמת הקטגוריה וברמת האובייקט של הפרויקט.

כל ממצא משויך לאחת מהקטגוריות הבאות כדי לציין את ההשפעה שלו:

  • אופטימיזציה של השימוש: ממצאים שמשפיעים על נפח אחסון נדרש ועל היעילות מבחינת עלות.

  • ביצועים: ממצאים שמשפיעים על המהירות, זמן האחזור והתקינות התפעולית.

בטבלה הבאה מתוארים הממצאים שזמינים ב-Storage Intelligence advisor:

ממצא קטגוריה תיאור
עלייה חדה בפעולות מסוג Class A או Class B בנתונים ב-Coldline או ב-Archive אופטימיזציה של השימוש

מציין פעולות תכופות על נתונים ב-Coldline Storage וב-Archive Storage. לדוגמה, הממצא הזה יכול להופיע אם משימת ניתוח ניגשת מדי יום לדוחות חודשיים שמאוחסנים ב-Archive Storage, וכך נוצר שיעור גבוה של פעולות על נתונים שמתאימים יותר ל-Standard Storage. כדי לפתור את הבעיה, צריך להעביר את הנתונים לסוג אחסון שמתאים לגישה תכופה, או לשנות את משימת הניתוח כך שתשתמש בנתונים שנשמרו במטמון.

מידע נוסף זמין במאמר אופטימיזציה של השימוש בנתונים ב-Coldline Storage וב-Archive Storage.
עלייה חדה בשגיאות 429, שמצביעות על בקשות שהקצב שלהן מוגבל ביצועים

מציין ש-Cloud Storage מגביל את קצב הבקשות, מה שגורם לזמן אחזור ארוך ולזמן קצוב לתפוגה. לדוגמה, הממצא הזה יכול להופיע אם משימת עיבוד ברצף (batch processing) קוראת או כותבת במהירות הרבה אובייקטים באותה קטגוריה, חורגת ממגבלות הבקשות וגורמת לשגיאות 429 Too Many Requests. כדי לפתור את הבעיה, צריך להטמיע באפליקציה השהיה מעריכית לפני ניסיון חוזר (exponential backoff) או להגדיל בהדרגה את קצב הבקשות.

מידע נוסף זמין במאמר שיפור הביצועים על ידי הפחתת שגיאות של בקשות שהקצב שלהן מוגבל.
עלייה חדה בתעבורת הנתונים היוצאת לכמה אזורים אופטימיזציה של השימוש

מציין עלייה בהעברת הנתונים בין קטגוריות של Cloud Storage באזור אחד לבין שירותי Google Cloud אחרים באזור אחר. הפעילות הזו עלולה להוביל לעלויות בלתי צפויות של תעבורת נתונים יוצאת. לדוגמה, הממצא הזה יכול להופיע אם מכונה של Compute Engine ב-us-central1 ניגשת לעיתים קרובות לקטגוריה ב-us-east1. כדי לפתור את הבעיה, צריך להעביר את משאבי ה- Google Cloud והאחסון לאותו אזור באמצעות העברת קטגוריות למיקום גיאוגרפי אחר.

מידע נוסף זמין במאמר ניהול תעבורת נתונים יוצאת בין אזורים.
מספר הבייטים הכולל שמאוחסנים עלה מעל למגמה ב-30 הימים האחרונים אופטימיזציה של השימוש

מציין שצריכת האחסון גדלה מעבר למגמות ההיסטוריות ב-30 הימים האחרונים. לדוגמה, הממצא הזה יכול להופיע אם הקטגוריה שומרת גרסאות לא עדכניות של אובייקטים ללא הגבלת זמן אחרי שמעלים גרסאות חדשות. שמירה ללא הגבלת זמן עלולה להוביל לעלויות אחסון מיותרות. כדי לפתור את הבעיה, אתם יכולים להשתמש בניהול מחזור החיים של אובייקטים כדי למחוק גרסאות לא עדכניות או להעביר אותן לאחסון בשימוש נדיר (cold storage), או להפעיל סיווג אוטומטי כדי לנהל באופן אוטומטי את סוגי האחסון על סמך דפוסי הגישה.

מידע נוסף זמין במאמר זיהוי צריכת אחסון מעל למגמה.

תרשימים מרכזיים

בקטע Key charts יש תרשימים של סדרות זמנים, שמאפשרים לראות את המגמות הבאות באחסון:

  • מספר האובייקטים המצטבר: מעקב אחרי המספר הכולל של האובייקטים בפרויקט, בתיקייה או בארגון שבחרתם, בכל המיקומים וסוגי האחסון.
  • ‫Storage volume over time: מעקב אחרי נפח האחסון במיקומים ובסוגי אחסון שונים.

תרחישים לדוגמה

היועץ של Storage Intelligence תומך בתרחישי השימוש הבאים.

מזעור של דוחות בהתאמה אישית

אתם יכולים לעקוב אחרי מדדים בסביבת Cloud Storage בלי לתחזק צינורות עיבוד נתונים בהתאמה אישית, סקריפטים של BigQuery או כלים חיצוניים להמחשה חזותית.

פיקוח מרכזי

אתם יכולים להעריך את התקינות של כל סביבת Cloud Storage בממשק אחד, בפרויקטים, בתיקיות או בארגונים, בלי להריץ שאילתות ידניות ביומנים או במשאבים שונים.

כדי להתחיל, קראו את המאמר הצגת הייעוץ של Storage Intelligence.

אופטימיזציה של נפח האחסון הנדרש

לזהות הזדמנויות לאופטימיזציה של נפח אחסון נדרש, על ידי התאמת הנתונים לסוג האחסון המתאים. לדוגמה, ממצא מסוג Spike in Class A or B operations on Coldline or Archive data מציין שמתבצעת גישה לעיתים קרובות לנתונים ב-Coldline Storage או ב-Archive Storage. יכול להיות שלנתונים האלה מתאימה יותר סוג אחסון שמיועד לגישה תכופה, כמו Standard Storage או Nearline Storage.

מידע נוסף זמין במאמר אופטימיזציה של השימוש בנתונים ב-Coldline Storage וב-Archive Storage.

פתרון בעיות שקשורות לצווארי בקבוק בביצועים

זיהוי בעיות בביצועים, כמו ויסות נתונים (throttle) של בקשות או עלייה חדה לא צפויה בפעולות. ממצאים כמו Spike in 429 errors עוזרים לבצע אופטימיזציה של דפוסי הקלט/פלט כדי לשפר את האמינות של האפליקציה.

מידע נוסף זמין במאמר שיפור הביצועים על ידי צמצום שגיאות של בקשות שהקצב שלהן מוגבל.

תמיכה ב-VPC Service Controls

היועץ של Storage Intelligence תומך ב-VPC Service Controls למשאבים ברמת הפרויקט בתוך גבולות גזרה לשירות. לפרטים על התמיכה ב-VPC Service Controls והמגבלות ברמת המשאב, קראו את המאמר מוצרים נתמכים של VPC Service Controls: ‏Cloud Storage.

המאמרים הבאים