במסמך הזה מפורטות שגיאות שעשויות להתרחש כשמשתמשים בדיסקים עם ממשק Non-Volatile Memory Express (NVMe).
אתם יכולים להשתמש בממשק NVMe לכונני SSD מקומיים ולדיסקים לאחסון מתמיד (Persistent Disk או Google Cloud Hyperdisk). רק סדרות המכונות החדשות ביותר, כמו Tau T2A, M3, C3, C3D ו-H3, משתמשות בממשק NVMe ל-Persistent Disk. גם ב-Confidential VMs משתמשים ב-NVMe ל-Persistent Disk. בכל שאר סדרות המכונות של Compute Engine, ממשק הדיסק SCSI משמש לדיסקי אחסון מתמידים (persistent disk).
שגיאה: הזמן הקצוב לפעולת קלט/פלט פג
אם אתם נתקלים בשגיאות של זמן קצוב לתפוגה של קלט/פלט, יכול להיות שהזמן הקצוב לתפוגה של פעולות קלט/פלט שנשלחות למכשירי NVMe חורג מהפרמטר שמוגדר כברירת מחדל.
הודעת שגיאה:
[1369407.045521] nvme nvme0: I/O 252 QID 2 timeout, aborting [1369407.050941] nvme nvme0: I/O 253 QID 2 timeout, aborting [1369407.056354] nvme nvme0: I/O 254 QID 2 timeout, aborting [1369407.061766] nvme nvme0: I/O 255 QID 2 timeout, aborting [1369407.067168] nvme nvme0: I/O 256 QID 2 timeout, aborting [1369407.072583] nvme nvme0: I/O 257 QID 2 timeout, aborting [1369407.077987] nvme nvme0: I/O 258 QID 2 timeout, aborting [1369407.083395] nvme nvme0: I/O 259 QID 2 timeout, aborting [1369407.088802] nvme nvme0: I/O 260 QID 2 timeout, aborting ...
פתרון:
כדי לפתור את הבעיה, מגדילים את הערך של פרמטר הזמן הקצוב לתפוגה:
Linux
מציגים את הערך הנוכחי של פרמטר הזמן הקצוב לתפוגה:
- כדי לזהות את בקר ה-NVMe שבו משתמשים ה-Persistent Disk או נפח ה-SSD המקומי:
ls -l /dev/disk/by-id
מציגים את ההגדרה
io_timeoutשל הדיסק, בשניות: מחליפים את הערכים בשדות הבאים:cat /sys/class/nvme/CONTROLLER_ID/NAMESPACE/queue/io_timeout
-
CONTROLLER_ID: המזהה של בקר הדיסק NVMe, לדוגמה,nvme1 -
NAMESPACE: מרחב השמות של דיסק ה-NVMe, לדוגמהnvme1n1
אם יש לכם רק דיסק אחד שמשתמש ב-NVMe, מריצים את הפקודה הבאה:
cat /sys/class/nvme/nvme0/nvme0n1/queue/io_timeout
-
- כדי לזהות את בקר ה-NVMe שבו משתמשים ה-Persistent Disk או נפח ה-SSD המקומי:
כדי להגדיל את פרמטר הזמן הקצוב לתפוגה של פעולות קלט/פלט שנשלחות למכשירי NVMe, מוסיפים את השורה הבאה לקובץ
/lib/udev/rules.d/65-gce-disk-naming.rulesואז מפעילים מחדש את ה-VM:KERNEL=="nvme*n*", ENV{DEVTYPE}=="disk", ATTRS{model}=="nvme_card-pd", ATTR{queue/io_timeout}="4294967295"
Windows
כדי להגדיל את פרמטר הזמן הקצוב לתפוגה של פעולות קלט/פלט שנשלחות למכשירי NVMe ב-Windows, פותחים את PowerShell כאדמינים ומריצים את הפקודות הבאות כדי להגדיר את מאפיין הרישום
IoTimeoutValue:$RegistryPath = 'HKLM:\SYSTEM\CurrentControlSet\Services\stornvme\Parameters' $Name = 'IoTimeoutValue' $Value = '240' New-ItemProperty -Path $RegistryPath -Name $Name -Value $Value -PropertyType DWORD -Force
מפעילים מחדש את ה-VM כדי שהשינויים ייכנסו לתוקף.
דיסקים מנותקים עדיין מופיעים במערכת ההפעלה של מכונה
במכונות וירטואליות שמשתמשות בגרסאות 6.0 עד 6.2 של גרסת ליבה של Linux, יכול להיות שפעולות שכוללות את ה-method instances.detachDisk של Compute Engine API או את הפקודה gcloud compute instances detach-disk לא יפעלו כמו שצריך.
במסוף Google Cloud המכשיר מוצג כמוסר, והמטא-נתונים של המכונה (הפקודה compute disks describe) מציגים את המכשיר כמוסר, אבל נקודת הטעינה של המכשיר וכל הקישורים הסימבוליים שנוצרו על ידי כללי udev עדיין מוצגים במערכת ההפעלה של האורח.
הודעת שגיאה:
ניסיון לקרוא מהדיסק המנותק ב-VM גורם לשגיאות קלט/פלט:
sudo head /dev/nvme0n3 head: error reading '/dev/nvme0n3': Input/output error
הבעיה:
אימג'ים של מערכות הפעלה שמשתמשים בליבת Linux 6.0-6.2, אבל לא כוללים היסב בגרסאות מוקדמות יותר (backporting) של תיקון NVMe, לא מזהים כשדיסק NVMe מנותק.
פתרון:
מפעילים מחדש את ה-VM כדי להשלים את תהליך הסרת הדיסק.
כדי להימנע מהבעיה הזו, השתמשו במערכת הפעלה עם גרסת ליבה של Linux שאין בה את הבעיה הזו:
- 5.19 ומטה
- 6.3 ואילך
כדי לראות את גרסת הליבה של Linux, אתם יכולים להשתמש בפקודה uname -r במערכת ההפעלה של האורח.