בדף הזה מוסבר איך לזהות ולפתור בעיות של זמן אחזור ברכיבי Spanner. במאמר נקודות זמן של זמן אחזור בבקשה של Spanner מפורט מידע נוסף על נקודות זמן אפשריות של זמן אחזור בבקשה של Spanner.
אתם יכולים למדוד ולהשוות את זמני האחזור של הבקשות בין רכיבים שונים לבין מסד הנתונים, כדי לקבוע איזה רכיב גורם לעיכוב. זמני האחזור האלה כוללים את זמן האחזור מקצה לקצה, זמן האחזור של ממשק הקצה של Google (GFE), זמן האחזור של בקשת API של Spanner וזמן האחזור של השאילתה.
באפליקציית הלקוח שמשתמשת בשירות, מוודאים שיש עלייה בזמן האחזור מקצה לקצה. בודקים את המאפיינים הבאים במדדים בצד הלקוח. למידע נוסף, קראו את תיאורי המדדים בצד הלקוח.
-
client_name: השם והגרסה של ספריית הלקוח. -
location: האזור ב- Google Cloud שבו מתפרסמים המדדים בצד הלקוח. אם האפליקציה נפרסת מחוץ ל-Google Cloud, המדדים מתפרסמים באזורglobal. -
method: שם ה-method של ה-RPC, לדוגמהspanner.commit. -
status: סטטוס ה-RPC, לדוגמהOKאוINTERNAL.
אפשר לקבץ לפי המאפיינים האלה כדי לבדוק אם הבעיה מוגבלת ללקוח, לסטטוס או לשיטה ספציפיים. בעומסי עבודה בשני אזורים או במספר אזורים, בדקו אם הבעיה מוגבלת ללקוח ספציפי או לאזור ספציפי של Spanner.
-
בודקים את תקינות אפליקציית הלקוח, במיוחד את תשתית המחשוב בצד הלקוח (לדוגמה, VM, מעבד (CPU) או ניצול זיכרון, חיבורים, תיאורי קבצים וכו').
כדי לבדוק את זמן האחזור ברכיבי Spanner, אפשר לעיין במדדים בצד הלקוח:
בודקים את זמן האחזור מקצה לקצה באמצעות המדד
spanner.googleapis.com/client/operation_latencies.בודקים את זמן האחזור של ממשק הקצה של Google (GFE) באמצעות המדד
spanner.googleapis.com/client/gfe_latencies.בודקים את מספר השגיאות בקישוריות ל-GFE באמצעות המדד
spanner.googleapis.com/client/gfe_connectivity_error_count, מסונן לפיstatus=DEADLINE_EXCEEDED. זמן האחזור של GFE לא כולל ניסיונות שהזמן הקצוב שלהם מסתיים לפני שהלקוח מקבל כותרות תגובה. אם המספר הזה עולה, צריך לבדוק אם הערכים שלspanner.googleapis.com/client/attempt_latenciesמתקרבים למועד האחרון לשליחת הבקשה. לשלבים הבאים, קראו את המאמר פתרון בעיות של שגיאות חריגה מהמועד האחרון.
בודקים את המאפיינים הבאים של מדדי Spanner:
-
database: השם של מסד הנתונים ב-Spanner. -
method: שם ה-method של ה-RPC, לדוגמהspanner.commit. -
status: סטטוס ה-RPC, לדוגמהOKאוINTERNAL.
אפשר לקבץ לפי המאפיינים האלה כדי לבדוק אם הבעיה מוגבלת למסד נתונים, סטטוס או שיטה ספציפיים. בעומסי עבודה בשני אזורים או במספר אזורים, כדאי לבדוק אם הבעיה מוגבלת לאזור ספציפי.
-
בודקים את זמן האחזור של בקשת Spanner API באמצעות המדד
spanner.googleapis.com/api/request_latencies. מידע נוסף זמין במאמר מדדי Spanner.אם זמן האחזור מקצה לקצה ארוך, זמן האחזור של GFE קצר ואין עלייה במספר שגיאות הקישוריות של GFE (ראו שלב 3), וזמן האחזור של בקשות ה-API של Spanner קצר, יכול להיות שיש בעיה בקוד האפליקציה. יכול להיות שזה גם מעיד על בעיה ברשת בין הלקוח לבין ה-GFE האזורי. אם יש באפליקציה בעיה בביצועים שגורמת לנתיבי קוד מסוימים להיות איטיים, זמן האחזור מקצה לקצה של כל בקשת API עשוי לעלות. יכול להיות גם שיש בעיה בתשתית המחשוב של הלקוח שלא זוהתה בשלב הקודם.
אם זמן האחזור של GFE גבוה, אבל זמן האחזור של בקשת ה-API של Spanner נמוך, יכולות להיות לכך כמה סיבות:
גישה למסד נתונים מאזור אחר. הפעולה הזו יכולה לגרום לזמן אחזור ארוך ב-GFE ולזמן אחזור קצר בבקשות API ל-Spanner. לדוגמה, לתנועה מלקוח באזור
us-east1שיש לו מכונה באזורus-central1יכול להיות זמן אחזור גבוה ב-GFE, אבל זמן אחזור נמוך יותר בבקשת ה-API של Spanner.יש בעיה בשכבת ה-GFE. בודקים בGoogle Cloud לוח הבקרה של סטטוס שירותי Google אם יש בעיות ברשת באזור שלכם. אם אין בעיות, פותחים בקשת תמיכה וכוללים את המידע הזה כדי שמהנדסי התמיכה יוכלו לעזור בפתרון הבעיות ב-GFE.
בודקים את ניצול המעבד (CPU) של המכונה. אם ניצול המעבד (CPU) של המכונה גבוה מהרמה המומלצת, צריך להוסיף עוד צמתים באופן ידני או להגדיר התאמה אוטומטית לעומס (automatic scaling). מידע נוסף זמין במאמר סקירה כללית על התאמה לעומס (scaling).
כדאי לבדוק ולפתור בעיות בנקודות חמות פוטנציאליות או דפוסי גישה לא מאוזנים באמצעות Key Visualizer, ולנסות להחזיר למצב קודם שינויים בקוד האפליקציה שקשורים באופן הדוק לפרק הזמן שבו הבעיה התרחשה. כדי לאזן את הגישה בין משאבי המחשוב של Spanner, כדאי לפעול לפי השיטות המומלצות לעיצוב סכימה.
בודקים אם יש שינויים בדפוסי התנועה.
בודקים את תובנות השאילתות ואת תובנות העסקאות כדי לראות אם יש צווארי בקבוק בביצועים של השאילתות או העסקאות.
משתמשים בפרוצדורות שב-Oldest active queries כדי לראות אם יש שאילתות יקרות שעלולות לגרום לצוואר בקבוק בביצועים, ומבטלים את השאילתות לפי הצורך.
כדי לפתור את הבעיה, אפשר להשתמש בתהליכים שבקטעי פתרון הבעיות בנושאים הבאים, בעזרת כלי הבדיקה הפנימית של Spanner:
המאמרים הבאים
- אחרי שזיהיתם את הרכיב שגורם לעיכוב, אתם יכולים להשתמש במדדים המובְנים בצד הלקוח כדי לבדוק את הבעיה לעומק.
- איך משתמשים במדדים כדי לאבחן זמן אחזור
- איך פותרים שגיאות של חריגה מהמועד האחרון ב-Spanner