Release-Image-Versionen 2.2.x

Komponente 2.2.87-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/09/04
2.2.86-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/08/19
2.2.85-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/30
2.2.84-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
2.2.83-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
**Apache Atlas**
Initialisierungsaktion
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
optionale Komponente
1.17.0 1.17.0 1.17.0 1.17.0 1.17.0
**Apache Hadoop**
installiert
3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
**Apache Hive**
installiert
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
optionale Komponente
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
**Apache Hudi**
optionale Komponente
0.15.0 0.15.0 0.15.0 0.15.0 0.15.0
**Apache Iceberg**
optionale Komponente
1.6.1 1.6.1 1.6.1 1.6.1 1.6.1
**Apache Kafka**
Initialisierungsaktion
3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
installiert
0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installiert
3.5.3 3.5.3 3.5.3 3.5.3 3.5.3
Apache Sqoop
Initialisierungsaktion
1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
**Apache Tez**
installiert
0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
BigQuery-Connector
installiert
0.34.1 0.34.1 0.34.1 0.34.1 0.34.1
**Cloud Storage-Connector**
installiert
3.0.17 3.0.17 3.0.17 3.0.17 3.0.17
**Conscrypt**
installiert
2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
**Delta Lake**
optionale Komponente
3.2.1 3.2.1 3.2.1 3.2.1 3.2.1
Docker
optionale Komponente
24.0 24.0 24.0 24.0 24.0
Hue
Initialisierungsaktion
4.11.0 4.11.0 4.11.0 4.11.0 4.11.0
Java
installiert
11 11 11 11 11
**JupyterLab Notebook**
optionale Komponente
3.6 3.6 3.6 3.6 3.6
Oozie
Initialisierungsaktion
5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
installiert
conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11
R
installiert
R 4.3 R 4.3 R 4.3 R 4.3 R 4.3
Ranger
optionale Komponente
2.4.0 2.4.0 2.4.0 2.4.0 2.4.0
Scala
installiert
2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
optionale Komponente
9.2.1 9.2.1 9.2.1 9.2.1 9.2.1
Trino
optionale Komponente
432 432 432 432 432
**Zeppelin Notebook**
optionale Komponente
0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
**Zookeeper**
optionale Komponente
3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Bekannte Probleme und Beschränkungen der Image-Version 2.2 :

Hinweise :

  • 2.2.x-*-arm Images unterstützen nur die vorinstallierten Komponenten und die folgenden optionalen Komponenten. Die anderen optionalen Komponenten der Version 2.2 und alle Initialisierungsaktionen werden nicht unterstützt:

  • Der Quellcode für die Bibliotheken des Images 2.2, die unter wechselseitigen und eingeschränkten Lizenzen lizenziert sind, ist unter /usr/local/share/google/managed-spark/third-party-sources auf den VMs des Managed Service for Apache Spark-Clusters verfügbar.

  • Die folgenden Hudi-Prozeduren funktionieren bekanntermaßen nicht in einer Hudi-Tabelle, die durch das Cloud Storage-Dateisystem gesichert wird:

    • run_clustering
    • run_compaction
  • Der Standardressourcenrechner für YARN wurde von DefaultResourceCalculator in DominantResourceCalculatorgeändert, der das Konzept der dominanten Ressource verwendet, um die Ressourcenzuweisung zu bestimmen, z. B. die Speicher- und CPU-Zuweisung. Diese Änderung wirkt sich auf die automatische Skalierungaus, die auf der Grundlage der dominanten Ressourcennutzung des Clusters skaliert.

  • Apache Iceberg-Version: In 2.2-Images ist Apache Iceberg in den Versionen 1.6.1 und 1.10 verfügbar. Die Standardversion ist 1.6.1. Wenn Sie die Iceberg-Version in einem beliebigen 2.2-Cluster angeben möchten, legen Sie das Clusterattribut dataproc:dataproc.iceberg.version während der Clustererstellung auf 1.10 (oder 1.6) fest.

  • Die 2.2.85 und höher Image-Versionen haben keine vorkonfigurierten Conda-Channels. Pakete können mit Conda nur installiert werden, wenn Channels während der Clusterinitialisierung manuell konfiguriert werden. Außerdem können Cluster mit der Image-Version 2.2 mit vorkonfigurierten Conda-Channels, einschließlich 2.2.84 und früherer Image-Versionen, nach dem 25. August 2026 nicht mehr verwendet werden.

    • Möglicherweise müssen Sie vorhandene Cluster löschen und ersetzen. Nach dem 25. August 2026, müssen vorhandene Cluster, die mit Images mit vorkonfigurierten Conda-Channels erstellt wurden, gelöscht und durch neue Cluster ersetzt werden, die mit Images ohne vorkonfigurierte Conda-Channels erstellt oder neu erstellt wurden. Das gilt auch dann, wenn in Clusterjobs keine Pakete mit Conda installiert werden.