Versioni immagine release 2.2.x

Componente 2.2.87-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/09/04
2.2.86-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/08/19
2.2.85-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/30
2.2.84-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
2.2.83-debian12/
-ubuntu22/
-ubuntu22-arm/
-rocky9
2026/06/22
Azione di inizializzazione di
Apache Atlas
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
componente facoltativo
1.17.0 1.17.0 1.17.0 1.17.0 1.17.0
Apache Hadoop
installato
3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
installato
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
componente facoltativo
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
componente facoltativo
0.15.0 0.15.0 0.15.0 0.15.0 0.15.0
Apache Iceberg
componente facoltativo
1.6.1 1.6.1 1.6.1 1.6.1 1.6.1
Azione di inizializzazione
Apache Kafka
3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
installato
0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installato
3.5.3 3.5.3 3.5.3 3.5.3 3.5.3
Azione di inizializzazione
Apache Sqoop
1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
installato
0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Connettore BigQuery
installato
0.34.1 0.34.1 0.34.1 0.34.1 0.34.1
connettore Cloud Storage
installato
3.0.17 3.0.17 3.0.17 3.0.17 3.0.17
Conscrypt
installato
2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Delta Lake
componente facoltativo
3.2.1 3.2.1 3.2.1 3.2.1 3.2.1
Docker
componente facoltativo
24.0 24.0 24.0 24.0 24.0
Azione di inizializzazione
Tonalità
4.11.0 4.11.0 4.11.0 4.11.0 4.11.0
Java
installato
11 11 11 11 11
Blocco note JupyterLab
componente facoltativo
3.6 3.6 3.6 3.6 3.6
Oozie 5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
installato
conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11 conda 23.11.0 con Python 3.11
R
installato
R 4.3 R 4.3 R 4.3 R 4.3 R 4.3
Ranger
componente facoltativo
2.4.0 2.4.0 2.4.0 2.4.0 2.4.0
Scala
installata
2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
componente facoltativo
9.2.1 9.2.1 9.2.1 9.2.1 9.2.1
Trino
componente facoltativo
432 432 432 432 432
Zeppelin Notebook
componente facoltativo
0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
componente facoltativo
3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Problemi noti e limitazioni della versione immagine 2.2:

Note:

  • Le immagini 2.2.x-*-arm supportano solo i componenti preinstallati e i seguenti componenti opzionali. Gli altri componenti facoltativi della versione 2.2 e tutte le azioni di inizializzazione non sono supportati:

    • Apache Hive WebHCat
    • Apache Pig (a partire da 2.2.75-ubuntu22-arm)
    • Docker
    • Zeppelin
    • Zookeeper (installato in cluster ad alta disponibilità; componente facoltativo in altri cluster)
  • Il codice sorgente delle librerie dell'immagine 2.2 con licenza reciproca e con licenze con limitazioni è disponibile nel percorso /usr/local/share/google/managed-spark/third-party-sources sulle VM del cluster Managed Service for Apache Spark.

  • È noto che le seguenti procedure Hudi non funzionano su una tabella Hudi supportata dal file system Cloud Storage:

    • run_clustering
    • run_compaction
  • Il calcolatore delle risorse predefinito per YARN è stato modificato da DefaultResourceCalculator a DominantResourceCalculator, che utilizza il concetto di risorsa dominante per determinare l'allocazione delle risorse, come l'allocazione di memoria e CPU. Questa modifica influisce su Autoscaler, che esegue lo scale in base all'utilizzo dominante delle risorse del cluster.

  • Versione di Apache Iceberg: nelle immagini 2.2, Apache Iceberg è disponibile nelle versioni 1.6.1 e 1.10. La versione predefinita è 1.6.1. Per specificare la versione di Iceberg su qualsiasi cluster 2.2, imposta la proprietà del cluster dataproc:dataproc.iceberg.version su 1.10 (o 1.6) durante la creazione del cluster.

  • Le versioni delle immagini 2.2.85 e successive non hanno canali Conda preconfigurati. I pacchetti non possono essere installati utilizzando Conda, a meno che i canali non vengano configurati manualmente durante l'inizializzazione del cluster. Inoltre, i cluster di versioni dell'immagine 2.2 con canali Conda preconfigurati, incluse le versioni dell'immagine 2.2.84 e precedenti, non potranno essere utilizzati dopo il 25 agosto 2026.

    • Potresti dover eliminare e sostituire i cluster esistenti. Dopo il 25 agosto 2026, i cluster esistenti creati con immagini con canali Conda preconfigurati, anche se i job del cluster non utilizzano Conda per installare i pacchetti, devono essere eliminati e sostituiti con nuovi cluster creati o ricreati con immagini che non hanno canali Conda preconfigurati.