מסמכי מידע על Managed Service for Apache Spark
Managed Service for Apache Spark באשכולות מאפשר לכם ליהנות מכלי נתונים בקוד פתוח לעיבוד ברצף (batch processing), לשליחת שאילתות, להעברת נתונים בסטרימינג וללמידת מכונה. השירות המנוהל לאוטומציה של Apache Spark עוזר לכם ליצור אשכולות במהירות, לנהל אותם בקלות ולחסוך כסף על ידי השבתת האשכולות כשאתם לא צריכים אותם. כך תוכלו להשקיע פחות זמן וכסף באדמיניסטרציה ולהתמקד בעבודה ובנתונים שלכם.
אתם יכולים להשתמש ב-Managed Service for Apache Spark serverless כדי להריץ עומסי עבודה של Spark batch בלי להקצות ולנהל אשכול משלכם. מציינים את הפרמטרים של עומס העבודה, ואז שולחים את עומס העבודה לשירות Managed Service for Apache Spark. השירות יריץ את עומס העבודה בתשתית מחשוב מנוהלת, וישנה את קנה המידה של המשאבים באופן אוטומטי לפי הצורך. החיובים על Managed Service for Apache Spark חלים רק על הזמן שבו עומס העבודה מופעל.
立获300美元免费赠金
Google Cloud新用户首次注册即可获得300美元赠金。此外,无论新老用户,均可免费使用20多款产品,积累动手实践经验。
立获300美元免费赠金
Google Cloud新用户首次注册即可获得300美元赠金。此外,无论新老用户,均可免费使用20多款产品,积累动手实践经验。
מאמרי עזרה
מקורות מידע שקשורים לנושא
הרצת משימת Spark ב-Google Kubernetes Engine
שליחת משימות Spark לאשכול Google Kubernetes Engine פעיל מתוך Dataproc Jobs API.
מבוא ל-Cloud Dataproc: Hadoop ו-Spark ב-Google Cloud
הקורס כולל שילוב של הרצאות, הדגמות ושיעורי Lab מעשיים שבהם תלמדו איך ליצור אשכול Dataproc, לשלוח משימת Spark ואז לכבות את האשכול.
למידת מכונה באמצעות Spark ב-Dataproc
הקורס כולל שילוב של הרצאות, הדגמות ושיעורי Lab מעשיים שמטרתם ליישם רגרסיה לוגיסטית באמצעות ספריית למידת מכונה של Apache Spark שפועלת באשכול Dataproc, כדי לפתח מודל לנתונים ממערך נתונים מרובה משתנים.
העברת נתונים מ-HDFS משרת מקומי ל-Google Cloud
איך מעבירים נתונים ממערכת קבצים מבוזרת של Hadoop (HDFS) בארגון ל-Google Cloud.
ניהול יחסי תלות של Java ו-Scala ב-Apache Spark
גישות מומלצות להכללת תלות כששולחים משימת Spark לאשכול Managed Service for Apache Spark.