המסמכים של Dataflow
Dataflow הוא שירות מנוהל להרצה של מגוון רחב של דפוסי עיבוד נתונים. במסמכים באתר הזה מוסבר איך לפרוס את צינורות עיבוד הנתונים שלכם (batch וסטרימינג) באמצעות Dataflow, כולל הוראות לשימוש בתכונות השירות.
Apache Beam SDK הוא מודל תכנות בקוד פתוח שמאפשר לפתח צינורות עיבוד נתונים באצווה ובפייפליין זורם. אתם יוצרים את צינורות הנתונים באמצעות תוכנית Apache Beam ומריצים אותם בשירות Dataflow. במסמכי התיעוד של Apache Beam יש מידע קונספטואלי מעמיק וחומר עזר למודל התכנות, לערכות ה-SDK ולרכיבי runner אחרים של Apache Beam.
כדי ללמוד מושגים בסיסיים של Apache Beam, אפשר לעיין במאמרים Tour of Beam ו-Beam Playground. במאגר Dataflow Cookbook יש גם צינורות מוכנים להפעלה ועצמאיים, ותרחישי השימוש הנפוצים ביותר ב-Dataflow.
立获300美元免费赠金
Google Cloud新用户首次注册即可获得300美元赠金。此外，无论新老用户，均可免费使用20多款产品，积累动手实践经验。
立获300美元免费赠金
Google Cloud新用户首次注册即可获得300美元赠金。此外，无论新老用户，均可免费使用20多款产品，积累动手实践经验。
מאמרי עזרה
מדריכים
מקורות מידע שקשורים לנושא
הרצת עומסי עבודה מקבילים מאוד של HPC
בעזרת Dataflow, אתם יכולים להריץ עומסי עבודה מקבילים בצינור עיבוד נתונים אחד, לשפר את היעילות ולנהל את תהליך העבודה בקלות רבה יותר.
הרצת הסקה באמצעות Dataflow ML
בעזרת Dataflow ML אתם יכולים להשתמש ב-Dataflow כדי לפרוס ולנהל צינורות עיבוד נתונים שלמים של למידת מכונה (ML). להשתמש במודלים של למידת מכונה כדי להסיק מסקנות באופן מקומי ומרחוק, באמצעות פייפליינים באצווה ובסטרימינג. משתמשים בכלים לעיבוד נתונים כדי להכין את הנתונים לאימון המודל ולעבד את התוצאות של המודלים.
יצירת פייפליין זורם של מסחר אלקטרוני
יצירת אפליקציית מסחר אלקטרוני לדוגמה מקצה לקצה שמעבירה נתונים בסטרימינג מחנות אינטרנט ל-BigQuery ול-Bigtable. האפליקציה לדוגמה ממחישה תרחישים נפוצים ושיטות מומלצות להטמעה של ניתוח נתוני סטרימינג ובינה מלאכותית (AI) בזמן אמת.