Release-Image-Versionen 2.1.x

Komponente 2.1.119-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/09/04
2.1.118-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/08/19
2.1.117-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/30
2.1.116-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/22
2.1.115-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/22
Apache Atlas
Initialisierungsaktion
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
optionale Komponente
1.15.4 1.15.4 1.15.4 1.15.4 1.15.4
Apache Hadoop
installiert
3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
installiert
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
optionale Komponente
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
optionale Komponente
0.12.3 0.12.3 0.12.3 0.12.3 0.12.3
Apache Kafka
Initialisierungsaktion
3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
installiert
0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installiert
3.3.2 3.3.2 3.3.2 3.3.2 3.3.2
Apache Sqoop
Initialisierungsaktion
1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
installiert
0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
BigQuery Connector
installiert
0.27.1 0.27.1 0.27.1 0.27.1 0.27.1
Cloud Storage-Connector
installiert
hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32
Conscrypt
installiert
2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Docker
optionale Komponente
20.10 20.10 20.10 20.10 20.10
Hue
Initialisierungsaktion
4.10.0 4.10.0 4.10.0 4.10.0 4.10.0
Java
installed
11 11 11 11 11
JupyterLab Notebook
optionale Komponente
3.4 3.4 3.4 3.4 3.4
Oozie
Initialisierungsaktion
5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
installiert
conda 22.9.0 mit Python 3.10 conda 22.9.0 mit Python 3.10 conda 22.9.0 mit Python 3.10 conda 22.9.0 mit Python 3.10 conda 22.9.0 mit Python 3.10
R
installiert
R 4.1 R 4.1 R 4.1 R 4.1 R 4.1
Ranger
optionale Komponente
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Scala
installiert
2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
optionale Komponente
9.0.0 9.0.0 9.0.0 9.0.0 9.0.0
Trino
optionale Komponente
376 376 376 376 376
Optionale
Zeppelin NotebookKomponente
0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
optionale Komponente
3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Hinweise:

  1. 2.1.x-*-arm images unterstützen nur die installierten Komponenten und die folgenden optionalen Komponenten (die verbleibenden 2.1 optionalen Komponenten und alle Initialisierungsaktionen werden nicht unterstützt):
    • Apache Hive WebHCat
    • Apache Pig (ab 2.1.107-ubuntu20-arm)
    • Docker
    • Zeppelin: Wird nur von 2.1.77+-ubuntu20-arm-Images unterstützt.
    • Zookeeper (in HA-Clustern installiert; optionale Komponente in Nicht-HA-Clustern)
  2. Apache Hive-Installationen in Managed Service for Apache Spark-Clustern schließen HCatalog ein, aber nicht Hive WebHCat. (Informationen zur Installation von Hive WebHCat in einem Cluster finden Sie unter Optionale Hive WebHCat-Komponente).
  3. Die optionale Presto-Komponente ist in Image-Versionen 2.1 und höher als optionale Trino-Komponente verfügbar.
  4. Die HBase- und Druid-Komponenten werden in Image-Versionen 2.1 und höher nicht unterstützt.
  5. Der Quellcode für die Bibliotheken in Abbildung 2.1, die unter reziproken und eingeschränkten Lizenzen lizenziert sind, ist auf den VMs des Managed Service for Apache Spark-Clusters unter dem Dateipfad /usr/local/share/google/managed-spark/third-party-sources verfügbar.

  6. Die Image-Versionen 2.1.117, 2.1.119 und höher haben keine vorkonfigurierten Conda-Channels. Pakete können mit Conda nur installiert werden, wenn Channels während der Clusterinitialisierung manuell konfiguriert werden. Außerdem können 2.1-Image-Version-Cluster mit vorkonfigurierten Conda-Channels, einschließlich 2.1.118 und früheren Image-Versionen, aber ohne 2.1.117, nach dem 25. August 2026 nicht mehr verwendet werden.

    • Möglicherweise müssen Sie vorhandene Cluster löschen und ersetzen. Nach dem 25. August 2026 müssen vorhandene Cluster, die mit Images mit vorkonfigurierten Conda-Channels erstellt wurden, gelöscht und durch neue Cluster ersetzt werden, die mit Images ohne vorkonfigurierte Conda-Channels erstellt oder neu erstellt wurden. Dies gilt auch dann, wenn in Clusterjobs keine Conda-Channels zum Installieren von Paketen verwendet werden.