סטטוס התמיכה בגרסת SDK

בדף הזה מפורט סטטוס התמיכה של Dataflow בגרסאות של Apache Beam SDK ו-Dataflow SDK:

במאמר התקנה או עדכון של Apache Beam SDK מוסבר איך להתקין או לשדרג גרסאות SDK בפרויקט.

הגדרות של רמות התמיכה ב-Apache Beam SDK

אלה רמות התמיכה של Dataflow ב-Apache Beam SDK:

  • נתמכות: גרסאות Apache Beam SDK נתמכות על ידי Dataflow מתאריך ההשקה שלהן ועד לתאריך ההוצאה שלהן משימוש.
  • הוצאה משימוש: כשגרסת SDK יוצאת משימוש, היא ממשיכה לפעול עם Dataflow אבל יכול להיות שהיא תושבת בעתיד. לפני שגרסת SDK מוצאת משימוש, הלקוחות מקבלים הודעה וניתן להם זמן לשדרג את הסביבות שלהם. בקשות למשימות שנשלחות מגרסאות SDK שהוצאו משימוש גורמות להודעת אזהרה. מומלץ לעדכן סביבות שמשתמשות בגרסה של SDK שהוצאה משימוש לגרסה נתמכת, אבל גרסאות SDK שהוצאו משימוש ממשיכות לפעול עם Dataflow.
  • הוצאה משימוש: גרסאות SDK שהוצאו משימוש לא פועלות יותר עם Dataflow. בקשות למשימות שנשלחות מגרסאות SDK שהוצאו משימוש גורמות לשגיאה. כדי להשתמש ב-SDK עם Dataflow, צריך לעדכן את הסביבה לגרסת SDK שלא הוצאה משימוש. מומלץ לעדכן את ה-SDK לגרסה נתמכת. גרסאות SDK יוצאות משימוש לעיתים רחוקות. לפני שגרסת SDK מוצאת משימוש, הלקוחות מקבלים הודעה וניתן להם זמן לשדרג את הסביבות שלהם.

ההגדרות הקודמות לא חלות על ערכות SDK או תכונות שמעולם לא נתמכו.

ערכות Apache Beam 2.x SDK

‫Apache Beam הוא פרויקט בקוד פתוח שמנוהל על ידי הקהילה. ‫Google ו- Google Cloud הן חלק מקהילת Apache Beam, אבל הפרויקט לא בבעלותנו ואנחנו לא שולטים בתהליך ההשקה. יכול להיות שנפתח באגים או נשלח תיקונים לבסיס הקוד של Apache Beam בשביל לקוחות Dataflow. אנחנו לא יכולים ליצור תיקונים חמים או גרסאות רשמיות של Apache Beam על פי דרישה. למידע נוסף על מדיניות ההפצה, קראו את הדף מדיניות Apache Beam.

‫Dataflow תומך ברכיבים ספציפיים של Apache Beam SDK לגרסאות ה-SDK שמפורטות בדף הזה. הרכיבים האלה נבדקו ביסודיות ב-Dataflow. אין תמיכה בתכונות ניסיוניות.

למידע על השינויים, עיינו בנתוני הגרסה של Apache Beam.

בטבלאות הבאות מפורט סטטוס התמיכה בערכות ה-SDK של Apache Beam 2.x, כולל Apache Beam Python SDK,‏ Apache Beam Java SDK ו-Apache Beam Go SDK:

Java

גרסת SDK סטטוס רכיבים נתמכים פרטים
2.77.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התמיכה בגרסה הזו תופסק ב-7 באוקטובר 2027.

2.76.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-31 באוגוסט 2027.

2.75.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-8 ביולי 2027.

בעיה ידועה: יכול להיות שתהיה נסיגה בביצועים של צינורות עיבוד נתונים עם עומס עבודה בינוני עד כבד של קריאה ב-Cloud Storage. הבעיה הזו משפיעה על גרסאות 2.74.0 ו-2.75.0 של Apache Beam, והיא תתוקן בגרסה 2.76.0. כדי לפתור את הבעיה, צריך לשדרג לאחור ל-Apache Beam 2.73.0. למידע נוסף, ראו בעיה מספר 39548 ב-Apache Beam GitHub.

2.74.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-2 ביוני 2027.

בעיה ידועה: יכול להיות שתהיה נסיגה בביצועים של צינורות עיבוד נתונים עם עומס עבודה בינוני עד כבד של קריאה ב-Cloud Storage. הבעיה הזו משפיעה על גרסאות 2.74.0 ו-2.75.0 של Apache Beam, והיא תתוקן בגרסה 2.76.0. כדי לפתור את הבעיה, צריך לשדרג לאחור ל-Apache Beam 2.73.0. למידע נוסף, ראו בעיה מספר 39548 ב-Apache Beam GitHub.

2.73.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-29 באפריל 2027.

2.72.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-30 במרץ 2027.

2.71.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-22 בינואר 2027.

2.70.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-16 בדצמבר 2026.

2.69.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התכונה הנוכחית תצא משימוש ב-28 באוקטובר 2026.

2.68.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התכונה הנוכחית תצא משימוש ב-22 בספטמבר 2026.

2.67.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-12 באוגוסט 2026.

2.66.0 נתמך org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הגרסה הזו תצא משימוש ב-1 ביולי 2026.

2.65.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התכונה הנוכחית תצא משימוש ב-12 במאי 2026.

2.64.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התכונה הנוכחית תצא משימוש ב-31 במרץ 2026.

2.63.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התכונה הנוכחית תצא משימוש ב-18 בפברואר 2026.

2.62.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התכונה הנוכחית תצא משימוש ב-21 בינואר 2026.

בעיה ידועה: במשימות של Dataflow Streaming Appliance, יכול להיות שהשמירות ייכשלו עם KeyCommitTooLargeException כשמפתח מוציא תוצאות של יותר מ-180MB. הבאג משפיע על גרסאות 2.60.x עד 2.62.x, והתיקון יושק בגרסה 2.63.0. כדי לפתור את הבעיה, צריך לשדרג לאחור ל-Apache Beam 2.59.0, לשדרג ל-Apache Beam 2.63.0 או להפעיל את Streaming Engine. למידע נוסף, ראו בעיה מספר 33588 ב-Apache Beam GitHub.

2.61.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

הוצא משימוש ב-25 בנובמבר 2025.

בעיה ידועה: במשימות של Dataflow Streaming Appliance, יכול להיות שהשמירות ייכשלו עם KeyCommitTooLargeException כשמפתח מוציא תוצאות של יותר מ-180MB. הבאג משפיע על גרסאות 2.60.x עד 2.62.x, והתיקון יושק בגרסה 2.63.0. כדי לפתור את הבעיה, צריך לשדרג לאחור ל-Apache Beam 2.59.0, לשדרג ל-Apache Beam 2.63.0 או להפעיל את Streaming Engine. למידע נוסף, ראו בעיה מספר 33588 ב-Apache Beam GitHub.

2.60.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed

התכונה הנוכחית תצא משימוש ב-17 באוקטובר 2025.

בעיה ידועה: במשימות של Dataflow Streaming Appliance, יכול להיות שהשמירות ייכשלו עם KeyCommitTooLargeException כשמפתח מוציא תוצאות של יותר מ-180MB. הבאג משפיע על גרסאות 2.60.x עד 2.62.x, והתיקון יושק בגרסה 2.63.0. כדי לפתור את הבעיה, צריך לשדרג לאחור ל-Apache Beam 2.59.0, לשדרג ל-Apache Beam 2.63.0 או להפעיל את Streaming Engine. למידע נוסף, ראו בעיה מספר 33588 ב-Apache Beam GitHub.

2.59.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
התכונה הנוכחית תצא משימוש ב-11 בספטמבר 2025.
2.58.1 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
התכונה הנוכחית תצא משימוש ב-16 באוגוסט 2025.
2.58.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
התכונה הנוכחית תצא משימוש ב-6 באוגוסט 2025.
2.57.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
הוצא משימוש ב-26 ביוני 2025.
2.56.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-iceberg
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
org.apache.beam:beam-sdks-java-managed
התכונה הנוכחית תצא משימוש ב-1 במאי 2025.
2.55.1 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-8 באפריל 2025.
2.55.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql

הוצא משימוש ב-25 במרץ 2025.

בעיה ידועה: הטרנספורמציה WriteToJson בצינורות עיבוד נתונים בשפות שונות נכשלת ומוצגת שגיאה. כדי לפתור את הבעיה, שדרגו לגרסה 2.55.1 של Apache Beam. למידע נוסף, קראו את הבעיה מספר 30776: נכשל WriteToJson של Beam YAML.

2.54.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-14 בפברואר 2025.
2.53.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-4 בינואר 2025.
2.52.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-17 בנובמבר 2024.
2.51.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-12 באוקטובר 2024.
2.50.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-30 באוגוסט 2024.
2.49.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-17 ביולי 2024.
2.48.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצאה משימוש ב-31 במאי 2024.
2.47.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-10 במאי 2024.
2.46.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-10 במרץ 2024.
2.45.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-15 בפברואר 2024.
2.44.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-13 בינואר 2024.
2.43.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-17 בנובמבר 2023.
2.42.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
התכונה יצאה משימוש ב-17 באוקטובר 2023.
2.41.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצאה משימוש ב-23 באוגוסט 2023.
2.40.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-27 ביוני 2023.
2.39.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-25 במאי 2023.
2.38.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-20 באפריל 2023.
2.37.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
התכונה הנוכחית יצאה משימוש ב-4 במרץ 2023.
2.36.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-7 בפברואר 2023.
2.35.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-io-jdbc
org.apache.beam:beam-sdks-java-extensions-sql
הוצא משימוש ב-29 בדצמבר 2022.
2.34.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
org.apache.beam:beam-sdks-java-extensions-sql
התכונה יצאה משימוש ב-11 בנובמבר 2022.
2.33.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
התכונה יצאה משימוש ב-7 באוקטובר 2022.
2.32.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
הוצא משימוש ב-25 באוגוסט 2022.
2.31.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
התכונה הנוכחית יצאה משימוש ב-8 ביולי 2022.
2.30.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka
הוצא משימוש ב-10 ביוני 2022.
2.29.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-29 באפריל 2022.

בעיה ידועה: אם משתמשים ב-Portable Runner, כברירת מחדל Dataflow ישתמש בקונטיינר של Java 8 SDK, בלי קשר לגרסת ה-Java של המשתמש. כדי לעקוף את הבעיה ב-Java 11, אפשר לשנות את קובץ האימג' של ה-SDK שמוגדר כברירת מחדל על ידי הוספת האפשרות `--worker_harness_container_image=gcr.io/cloud-dataflow/v1beta3/beam_java11_sdk:2.29.0` לפייפליין. מידע נוסף זמין בIssue Tracker של Apache Beam.

2.28.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-22 בפברואר 2022.

2.27.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-7 בינואר 2022.

בגרסה הזו נוספה תמיכה ב-JDK 11.

2.26.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצאה משימוש ב-11 בדצמבר 2021.

2.25.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

התכונה יצאה משימוש ב-23 באוקטובר 2021.

2.24.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצאה משימוש ב-18 בספטמבר 2021.

בעיה ידועה: אם אתם משתמשים בטיימרים שמתאפסים, ולא בטיימרים שמוגדרים ומופעלים רק פעם אחת, אל תשדרגו לגרסה 2.24.0. כשמופעל טיימר אבל הוא מאופס לפני שהוא מופעל, יכולה להיות דליפה של סימן מים, שתגרום למשימה בצינור עיבוד הנתונים להיתקע. מידע נוסף זמין בIssue Tracker ב-Apache Beam.
2.23.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

התכונה יצאה משימוש ב-29 ביולי 2021.

2.22.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
Google Cloud מחברי קלט/פלט במודול org.apache.beam:beam-runners-google-cloud-dataflow-java: bigquery, bigtable, datastore, healthcare, pubsub, spanner
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצאה משימוש ב-8 ביוני 2021.

2.21.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-27 במאי 2021.

2.20.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-15 באפריל 2021.

2.19.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-4 בפברואר 2021.

2.18.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-23 בינואר 2021.

2.17.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-6 בינואר 2021.

2.16.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-7 באוקטובר 2020.

2.15.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-23 באוגוסט 2020.

בעיות מוכרות:
  • משתמשי Dataflow שמשתמשים בתכונות של סכימה (כולל טרנספורמציות של SQL) לא צריכים לשדרג לגרסה 2.15.0 בגלל בעיה ידועה. מידע נוסף זמין בכלי למעקב אחר בעיות של Apache Beam.
2.14.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-1 באוגוסט 2020.

2.13.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-6 ביוני 2020.

בגרסה הזו הוספנו תמיכה ניסיונית ב-JDK 9 ובגרסאות עדכניות יותר. מידע נוסף זמין בכלי למעקב אחר בעיות של Apache Beam.

2.12.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-25 באפריל 2020.

בעיות מוכרות:
  • ל-Dataflow runner יש הגדרת רישום ביומן שגויה, שעלולה לגרום לכך שכל היומנים יהיו חסרים. כדי לעקוף את הבעיה הזו, צריך להוסיף את slf4j-jdk14 ליחסי התלות בזמן הריצה.
2.11.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-1 במרץ 2020.

בעיות מוכרות:
  • ל-Dataflow runner יש הגדרת רישום ביומן שגויה, שעלולה לגרום לכך שכל היומנים יהיו חסרים. כדי לעקוף את הבעיה הזו, צריך להוסיף את slf4j-jdk14 ליחסי התלות בזמן הריצה.
2.10.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-11 בפברואר 2020.

בעיות מוכרות:
  • גרסה 2.10.0 של ה-SDK תלויה בגרסה 1.9.13 של ספריית הלקוח gcsio, שיש בה בעיות ידועות:

    כדי לעקוף את הבעיות האלה, צריך לשדרג ל-SDK 2.11.0 או לשנות את גרסת ספריית הלקוח של gcsio ל-1.9.16 ואילך.

  • ל-Dataflow runner יש הגדרת רישום ביומן שגויה, שעלולה לגרום לכך שכל היומנים יהיו חסרים. כדי לעקוף את הבעיה הזו, צריך להוסיף את slf4j-jdk14 ליחסי התלות בזמן הריצה.
2.9.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-13 בדצמבר 2019.

בעיות מוכרות:
  • אם מפעילים את הניסוי של Streaming Engine (בטא), לא משדרגים ל-SDK 2.9.0 בגלל בעיה ידועה. אם בוחרים להשתמש ב-SDK 2.9.0, צריך גם להגדיר את הדגל הניסיוני enable_conscrypt_security_provider כדי להפעיל את Conscrypt, שיש לו בעיות יציבות ידועות.
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית עם פריסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.8.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש ב-25 באוקטובר 2019.

בעיות מוכרות:
  • יכול להיות שהצינורות נתקעו בגלל בעיה בספריית Conscrypt. אם מופיעות שגיאות ב-Stackdriver Logging עם דוחות קריסות שכוללים קריאות שקשורות ל-Conscrypt, יכול להיות שהבעיה הזו משפיעה עליכם. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ומעלה של ה-SDK.
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.7.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-3 באוקטובר 2019.

בעיות מוכרות:
  • יכול להיות שהצינורות נתקעו בגלל בעיה בספריית Conscrypt. אם מופיעות שגיאות ב-Stackdriver Logging עם דוחות קריסות שכוללים קריאות שקשורות ל-Conscrypt, יכול להיות שהבעיה הזו משפיעה עליכם. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ומעלה של ה-SDK.
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.6.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-8 באוגוסט 2019.

בעיות מוכרות:
  • יכול להיות שהצינורות נתקעו בגלל בעיה בספריית Conscrypt. אם מופיעות שגיאות ב-Stackdriver Logging עם דוחות קריסות שכוללים קריאות שקשורות ל-Conscrypt, יכול להיות שהבעיה הזו משפיעה עליכם. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ומעלה של ה-SDK.
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.5.0 הוצא משימוש org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management
org.apache.beam:beam-sdks-java-io-kafka

הוצא משימוש החל מ-6 ביוני 2019.

בעיות מוכרות:
  • יכול להיות שהצינורות נתקעו בגלל בעיה בספריית Conscrypt. אם מופיעות שגיאות ב-Stackdriver Logging עם דוחות קריסות שכוללים קריאות שקשורות ל-Conscrypt, יכול להיות שהבעיה הזו משפיעה עליכם. כדי לפתור את הבעיה, צריך לשדרג לגרסה 2.9.0 ומעלה של ה-SDK.
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.4.0 הוסר org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.3.0 הוסר org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.2.0 הוסר org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כדי לעקוף את הבעיה, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.1.0 הוסר org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.0.0 הוסר org.apache.beam:beam-sdks-java-core
org.apache.beam:beam-sdks-java-io-google-cloud-platform
org.apache.beam:beam-sdks-java-extensions-google-cloud-platform-core
org.apache.beam:beam-sdks-java-extensions-protobuf
org.apache.beam:beam-runners-direct-java
org.apache.beam:beam-runners-google-cloud-dataflow-java
org.apache.beam:beam-model-pipeline
org.apache.beam:beam-runners-core-construction-java
org.apache.beam:beam-model-job-management

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרה ספציפי, משתמשים ב-Apache Beam Java SDK בגרסה 2.9.0 ומטה עלולים לחוות שכפול נתונים בזמן קריאת קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית עם פריסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.

Python

גרסת SDK סטטוס רכיבים נתמכים פרטים
2.77.0 נתמך ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התמיכה בגרסה הזו תופסק ב-7 באוקטובר 2027.

2.76.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-31 באוגוסט 2027.

2.75.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-8 ביולי 2027.

2.74.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-2 ביוני 2027.

2.73.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-29 באפריל 2027.

2.72.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-30 במרץ 2027.

2.71.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-22 בינואר 2027.

2.70.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-16 בדצמבר 2026.

2.69.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-28 באוקטובר 2026.

2.68.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-22 בספטמבר 2026.

2.67.0 נתמך ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הגרסה הזו תצא משימוש ב-12 באוגוסט 2026.

2.66.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-1 באוקטובר 2026.

2.65.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-12 במאי 2026.

2.64.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-31 במרץ 2026.

2.63.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-18 בפברואר 2026.

2.62.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-21 בינואר 2026.

2.61.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-25 בנובמבר 2025.

2.60.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-17 באוקטובר 2025.

2.59.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-11 בספטמבר 2025.

2.58.1 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-16 באוגוסט 2025.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.58.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-6 באוגוסט 2025.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.57.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-26 ביוני 2025.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.56.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית תצא משימוש ב-1 במאי 2025.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.55.1 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-8 באפריל 2025.

בעיה ידועה: צינורות עיבוד נתונים ב-Python שמשתמשים ב-SDK הזה עלולים להיתקע מדי פעם. מידע נוסף זמין בבעיה מספר 30867 ב-Apache Beam GitHub.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.55.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קובץ ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-25 במרץ 2025.

בעיה ידועה: הטרנספורמציה WriteToJson בצינורות עיבוד נתונים בשפות שונות נכשלת ומוצגת שגיאה. כדי לפתור את הבעיה, שדרגו לגרסה 2.55.1 של Apache Beam. למידע נוסף, קראו את הבעיה מספר 30776: נכשל WriteToJson של Beam YAML.

בעיה ידועה: צינורות עיבוד נתונים ב-Python שמשתמשים ב-SDK הזה עלולים להיתקע מדי פעם. מידע נוסף זמין בבעיה מספר 30867 ב-Apache Beam GitHub.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.54.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql, ‏ yaml
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-14 בפברואר 2025.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.53.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-4 בינואר 2025.

בעיה ידועה: בצינורות עיבוד נתונים שקוראים נתונים מ-Cloud Storage באמצעות GcsIO, באופן ישיר או עקיף, כמו באמצעות BigQueryIO, יכול להיות שיהיה שיבוש בנתונים בגרסאות 2.53.0 עד 2.58.1 של Apache Beam Python SDK. מידע נוסף זמין בבעיה מספר 32169 ב-Apache Beam GitHub.

2.52.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-17 בנובמבר 2024.

2.51.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-12 באוקטובר 2024.

2.50.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-30 באוגוסט 2024.

2.49.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-17 ביולי 2024.

2.48.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצאה משימוש ב-31 במאי 2024.

2.47.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-10 במאי 2024.

2.46.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית יצאה משימוש ב-10 במרץ 2025.

2.45.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-15 בפברואר 2024.

2.44.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-13 בינואר 2024.

2.43.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-17 בנובמבר 2023.

2.42.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה יצאה משימוש ב-17 באוקטובר 2023.

2.41.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצאה משימוש ב-23 באוגוסט 2023.

2.40.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ ml.inference (לא כולל PytorchModelHandlerKeyedTensor ו-SklearnModelHandlerPandas), ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-27 ביוני 2023.

2.39.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-25 במאי 2023.

2.38.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-20 באפריל 2023.

2.37.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

התכונה הנוכחית יצאה משימוש ב-4 במרץ 2023.

בעיות מוכרות:
  • כשמשתמשים ב-WriteToBigQuery עם הפרמטר ignore_unknown_columns שמוגדר כ-true, המערכת מתעלמת מערך הפרמטר. הבעיה הזו תוקנה בגרסה 2.38.0. פרטים נוספים זמינים במאמר BEAM-14039.
2.36.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-7 בפברואר 2023.

בעיות מוכרות:
  • כשמשתמשים ב-WriteToBigQuery עם הפרמטר ignore_unknown_columns שמוגדר כ-true, המערכת מתעלמת מערך הפרמטר. הבעיה הזו תוקנה בגרסה 2.38.0. פרטים נוספים זמינים במאמר BEAM-14039.
2.35.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub
המחברים ב-apache_beam.io.jdbc: ‏ReadFromJdbc, ‏ WriteToJdbc.

הוצא משימוש ב-29 בדצמבר 2022.

2.34.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints, ‏ sql
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

התכונה יצאה משימוש ב-11 בנובמבר 2022.

2.33.0 הוצא משימוש ספריית Python SDK בסיסית במודול apache_beam: מודולי משנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: bigquery, ‏ datastore, ‏ pubsub

התכונה יצאה משימוש ב-7 באוקטובר 2022.

2.32.0 הוצא משימוש ספריית ה-SDK הבסיסית של Python במודול apache_beam: מודולי המשנה coders,‏ dataframe, ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-25 באוגוסט 2022.

2.31.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe (גרסת טרום-השקה (Preview)), ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem, ‏ filesystems, ‏ fileio
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

התכונה הנוכחית יצאה משימוש ב-8 ביולי 2022.

2.30.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe (גרסת טרום-השקה (Preview)), ‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-10 ביוני 2022.

2.29.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe (גרסת טרום-השקה), metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-29 באפריל 2022.

2.28.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe (גרסת טרום-השקה), metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-22 בפברואר 2022.

2.27.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe (גרסת טרום-השקה), metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

הוצא משימוש ב-7 בינואר 2022.

2.26.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ dataframe (גרסת טרום-השקה), metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

התכונה יצאה משימוש ב-11 בדצמבר 2021.

2.25.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

התכונה יצאה משימוש ב-23 באוקטובר 2021.

2.24.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

הוצאה משימוש ב-18 בספטמבר 2021. בנוסף, גרסה 2.24.0 של Apache Beam SDK היא האחרונה שתומכת ב-Python 2 וב-Python 3.5.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.23.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

התכונה יצאה משימוש ב-29 ביולי 2021.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.22.0 הוצא משימוש ספריית הליבה של Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp: ‏bigquery, ‏ datastore, ‏ pubsub

הוצאה משימוש ב-8 ביוני 2021.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.21.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-27 במאי 2021.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.20.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-15 באפריל 2021.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.19.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-4 בפברואר 2021.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.18.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-23 בינואר 2021.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.17.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-6 בינואר 2021.

‫Dataflow לא תומך יותר בצינורות עיבוד נתונים שמשתמשים ב-Python 2. מידע נוסף זמין בדף התמיכה ב-Python 2 ב- Google Cloud.

2.16.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש ב-7 באוקטובר 2020.
2.15.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש ב-23 באוגוסט 2020.
2.14.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp

הוצא משימוש ב-1 באוגוסט 2020.

בעיות מוכרות:
  • במקור MongoDB שנוסף בגרסה הזו יש בעיה ידועה שעלולה לגרום לאובדן נתונים. פרטים נוספים זמינים במאמר BEAM-7866.
2.13.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש החל מ-6 ביוני 2020.
2.12.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי המשנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש החל מ-25 באפריל 2020.
2.11.0 הוצא משימוש ספריית Core Python SDK במודול apache_beam: מודולי משנה coders,‏ metrics, ‏ options, ‏ portability, ‏ runners.dataflow,‏ runners.direct, ‏ transforms, ‏ typehints
מקורות וכיורים מבוססי-קבצים ומודולים קשורים במודול apache_beam.io: ‏textio, ‏ avroio, ‏ parquetio, ‏ tfrecordio, ‏ gcsfilesystem,‏ localfilesystem
Google Cloud מחברי קלט/פלט במודול apache_beam.io.gcp
הוצא משימוש החל מ-1 במרץ 2020.
2.10.0 הוצא משימוש הוצא משימוש החל מ-11 בפברואר 2020.
2.9.0 הוצא משימוש הוצא משימוש החל מ-13 בדצמבר 2019.
2.8.0 הוצא משימוש הוצא משימוש ב-25 באוקטובר 2019.
2.7.0 הוצא משימוש

הוצא משימוש החל מ-3 באוקטובר 2019.

2.6.0 הוצא משימוש הוצא משימוש החל מ-8 באוגוסט 2019.
2.5.0 הוצא משימוש הוצא משימוש החל מ-6 ביוני 2019.
2.4.0 הוצא משימוש הוצא משימוש החל מ-20 במרץ 2019.
2.3.0 הוצא משימוש הוצא משימוש ב-30 בינואר 2019.
2.2.0 הוצא משימוש הוצא משימוש החל מ-2 בדצמבר 2018.
2.1.1
2.1.0
הוצא משימוש הוצא משימוש החל מ-23 באוגוסט 2018.
2.0.0 הוצא משימוש הוצא משימוש החל מ-17 במאי 2018.

המשך

גרסת SDK סטטוס רכיבים נתמכים פרטים
2.77.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התמיכה בגרסה הזו תופסק ב-7 באוקטובר 2027.
2.76.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-31 באוגוסט 2027.
2.75.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-8 ביולי 2027.
2.74.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-2 ביוני 2027.
2.73.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-29 באפריל 2027.
2.72.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-30 במרץ 2027.
2.71.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-22 בינואר 2027.
2.70.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-16 בדצמבר 2026.
2.69.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-28 באוקטובר 2026.
2.68.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-22 בספטמבר 2026.
2.67.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-12 באוגוסט 2026.
2.66.0 נתמך חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הגרסה הזו תצא משימוש ב-1 ביולי 2026.
2.65.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-12 במאי 2026.
2.64.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-31 במרץ 2026.
2.63.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-18 בפברואר 2026.
2.62.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-21 בינואר 2026.
2.61.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-25 בנובמבר 2025.
2.60.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-17 באוקטובר 2025.
2.59.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-11 בספטמבר 2025.
2.58.1 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-16 באוגוסט 2025.
2.58.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-6 באוגוסט 2025.
2.57.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-26 ביוני 2025.
2.56.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה הנוכחית תצא משימוש ב-1 במאי 2025.
2.55.1 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-8 באפריל 2025.
2.55.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-25 במרץ 2025.
2.54.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-14 בפברואר 2025.
2.53.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-4 בינואר 2025.
2.52.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-17 בנובמבר 2024.
2.51.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-12 באוקטובר 2024.
2.50.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-30 באוגוסט 2024.
2.49.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-17 ביולי 2024.
2.48.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצאה משימוש ב-31 במאי 2024.
2.47.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-10 במאי 2024.
2.46.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-10 במרץ 2024.
2.45.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-15 בפברואר 2024.
2.44.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-13 בינואר 2024.
2.43.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-17 בנובמבר 2023.
2.42.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
התכונה יצאה משימוש ב-17 באוקטובר 2023.
2.41.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצאה משימוש ב-23 באוגוסט 2023.
2.40.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-27 ביוני 2023.
2.39.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/xlang
הוצא משימוש ב-25 במאי 2023.
2.38.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/pubsubio
- beam/io/xlang
הוצא משימוש ב-20 באפריל 2023.
2.37.0 הוצא משימוש חבילות בספריות הבאות:
- חבילת Core Beam Go SDK
- beam/transforms
- beam/io/textio
- beam/io/xlang
התכונה הנוכחית יצאה משימוש ב-4 במרץ 2023.

ערכות SDK של Dataflow 2.x

בטבלאות הבאות מפורט סטטוס התמיכה בערכות ה-SDK של Dataflow בגרסה 2.x, כולל Dataflow Java SDK ו-Dataflow Python SDK:

Java

למידע על השינויים, קראו את נתוני הגרסה של Dataflow SDK 2.x ל-Java.

גרסת SDK סטטוס פרטים
2.5.0 הוצא משימוש

הוצא משימוש החל מ-6 ביוני 2019.

בעיה מוכרת:
  • במקרים מסוימים, משתמשים ב-Dataflow Java SDK בגרסה 2.5.0 ומטה עלולים להיתקל בכפילות נתונים כשהם קוראים קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית עם פריסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.4.0 הוסר

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרים מסוימים, משתמשים ב-Dataflow Java SDK בגרסה 2.5.0 ומטה עלולים להיתקל בכפילות נתונים כשהם קוראים קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.3.0 הוסר

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרים מסוימים, משתמשים ב-Dataflow Java SDK בגרסה 2.5.0 ומטה עלולים להיתקל בכפילות נתונים כשהם קוראים קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.2.0 הוסר

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרים מסוימים, משתמשים ב-Dataflow Java SDK בגרסה 2.5.0 ומטה עלולים להיתקל בכפילות נתונים כשהם קוראים קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.1.0 הוסר

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרים מסוימים, משתמשים ב-Dataflow Java SDK בגרסה 2.5.0 ומטה עלולים להיתקל בכפילות נתונים כשהם קוראים קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.0.0 הוסר

הוצא משימוש ב-12 באוגוסט 2020.

הגרסה הזו הוצאה משימוש בגלל ביטול שירות התמיכה ב-JSON-RPC ובנקודות קצה גלובליות של HTTP Batch.

בעיה מוכרת:
  • במקרים מסוימים, משתמשים ב-Dataflow Java SDK בגרסה 2.5.0 ומטה עלולים להיתקל בכפילות נתונים כשהם קוראים קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.
2.0.0-beta3
2.0.0-beta2
2.0.0-beta1
הוסר

הוצא משימוש ב-28 בפברואר 2018.

בעיה מוכרת:
  • במקרים מסוימים, משתמשים ב-Dataflow Java SDK בגרסה 2.5.0 ומטה עלולים להיתקל בכפילות נתונים כשהם קוראים קבצים מ-Cloud Storage. כפילות יכולה להתרחש כשכל התנאים הבאים מתקיימים:
    • אתם קוראים קבצים שקידוד התוכן שלהם מוגדר ל-gzip, והקבצים עוברים המרת קידוד דינמית שמבטלת דחיסה על ידי Cloud Storage.
    • גודל הקובץ (לא דחוס) גדול מ-2.14GB.
    • מתרחשת שגיאה בזרם הקלט (והוא נוצר מחדש) אחרי קריאה של 2.14GB.
    כפתרון עקיף, אל תגדירו את הכותרת content-encoding, ואחסנו קבצים דחוסים ב-Cloud Storage עם הסיומת המתאימה (לדוגמה, gz ל-gzip). כדי לעדכן את כותרת קידוד התוכן ואת שם הקובץ של קבצים קיימים, אפשר להשתמש בפקודות gcloud storage.

Python

למידע על השינויים, קראו את נתוני הגרסה של Dataflow SDK 2.x for Python.

גרסת SDK סטטוס פרטים
2.5.0 הוצא משימוש הוצא משימוש החל מ-6 ביוני 2019.
2.4.0 הוצא משימוש הוצא משימוש החל מ-20 במרץ 2019.
2.3.0 הוצא משימוש הוצא משימוש ב-30 בינואר 2019.
2.2.0 הוצא משימוש הוצא משימוש החל מ-2 בדצמבר 2018.
2.1.1 הוצא משימוש הוצא משימוש החל מ-23 באוגוסט 2018.
תיקון בעיית תאימות עם החבילה six של Python.
מידע נוסף זמין בנתוני הגרסה.
2.1.0 הוצא משימוש הוצא משימוש החל מ-23 באוגוסט 2018.
בגרסה הזו יש בעיית תאימות עם חבילת Python six 1.11.0.
מידע נוסף זמין בנתוני הגרסה.
2.0.0 הוצא משימוש הוצא משימוש החל מ-17 במאי 2018.
בגרסה הזו יש בעיית תאימות עם חבילת Python six 1.11.0.
מידע נוסף זמין בנתוני הגרסה.
0.6.0
0.5.5
0.5.1
0.4.4
0.4.3
0.4.2
0.4.1
0.4.0
הוסר הוצא משימוש ב-29 בינואר 2018.
גרסה 0.2.7 וגרסאות קודמות הוסר הוצא משימוש ב-23 במרץ 2017.