בעיות ומגבלות ידועות בגרסת תמונה 2.2:
סוכנים מדור קודם לא מותקנים באשכולות של גרסת תמונה 2.2. monitoring-agent-defaults לא זמין אלא אם סוכן תפעול מותקן. הערה: מדדים ורישום ביומן של OSS זמינים עבור רכיבים של Managed Service for Apache Spark.
אי אפשר לבצע רישום ביומן או מעקב אחרי אפליקציות של צד שלישי, אלא אם סוכן התפעול מותקן.
הערות:
תמונות
2.2.x-*-armתומכות רק ברכיבים שמותקנים מראש וברכיבים האופציונליים הבאים. אין תמיכה בשני הרכיבים האופציונליים האחרים מגרסה 2.2 ובכל פעולות האתחול:- Apache Hive WebHCat
- Apache Pig (החל מ-
2.2.75-ubuntu22-arm) - Docker
- Zeppelin
- Zookeeper (מותקן באשכולות של זמינות גבוהה; רכיב אופציונלי באשכולות אחרים)
קוד המקור של ספריות תמונה 2.2 שמוצגות ברישיון הדדי ומוגבל זמין בנתיב
/usr/local/share/google/managed-spark/third-party-sourcesבמכונות וירטואליות של אשכולות Managed Service for Apache Spark.ידוע שהפרוצדורות הבאות של Hudi לא פועלות בטבלת Hudi שמגובה על ידי מערכת הקבצים של Cloud Storage:
run_clusteringrun_compaction
הגדרת ברירת המחדל של מחשבון המשאבים ב-YARN השתנתה מ-DefaultResourceCalculator ל-DominantResourceCalculator. ההגדרה החדשה משתמשת במושג של משאב דומיננטי כדי לקבוע את הקצאת המשאבים, כמו הקצאת זיכרון ומעבד. השינוי הזה משפיע על Autoscaler, שמשנה את גודל האשכול בהתאם לשימוש הדומיננטי במשאבים.
גרסת Apache Iceberg: בתמונות 2.2, Apache Iceberg זמין בגרסאות
1.6.1ו-1.10. גרסת ברירת המחדל היא1.6.1. כדי לציין את גרסת Iceberg בכל אשכול 2.2, מגדירים את מאפיין האשכולdataproc:dataproc.iceberg.versionלערך1.10(או1.6) במהלך יצירת האשכול.