Versões de imagem de lançamento 2.1.x

Componente 2.1.119-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/09/04
2.1.118-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/08/19
2.1.117-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/30
2.1.116-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/22
2.1.115-debian11/
-ubuntu20/
-ubuntu20-arm/
-rocky8
2026/06/22
Apache Atlas
ação de inicialização
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
componente opcional
1.15.4 1.15.4 1.15.4 1.15.4 1.15.4
Apache Hadoop
instalado
3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
instalado
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
componente opcional
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
componente opcional
0.12.3 0.12.3 0.12.3 0.12.3 0.12.3
Apache Kafka
ação de inicialização
3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
instalado
0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
instalado
3.3.2 3.3.2 3.3.2 3.3.2 3.3.2
Apache Sqoop
ação de inicialização
1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
instalado
0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Conector do BigQuery
instalado
0.27.1 0.27.1 0.27.1 0.27.1 0.27.1
Cloud Storage Connector
instalado
hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32 hadoop3-2.2.32
Conscrypt
instalado
2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Docker
componente opcional
20.10 20.10 20.10 20.10 20.10
Hue
ação de inicialização
4.10.0 4.10.0 4.10.0 4.10.0 4.10.0
Java
instalado
11 11 11 11 11
Notebook JupyterLab
componente opcional
3.4 3.4 3.4 3.4 3.4
Oozie
ação de inicialização
5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
instalado
conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10 conda 22.9.0 com Python 3.10
R
instalado
R 4.1 R 4.1 R 4.1 R 4.1 R 4.1
Ranger
componente opcional
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Scala
instalado
2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
componente opcional
9.0.0 9.0.0 9.0.0 9.0.0 9.0.0
Trino
componente opcional
376 376 376 376 376
Notebook Zeppelin
componente opcional
0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
componente opcional
3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Observações:

  1. O 2.1.x-*-arm images é compatível apenas com os componentes instalados e os seguintes componentes opcionais. Os outros 2.1 componentes opcionais e todas as ações de inicialização não são compatíveis:
    • Apache Hive WebHCat
    • Apache Pig (a partir de 2.1.107-ubuntu20-arm)
    • Docker
    • Zeppelin: compatível apenas com imagens 2.1.77+-ubuntu20-arm.
    • Zookeeper (instalado em clusters de alta disponibilidade; componente opcional em clusters que não são de alta disponibilidade)
  2. As instalações do Apache Hive em clusters do Serviço Gerenciado para Apache Spark incluem o HCatalog, mas não incluem o Hive WebHCat. Consulte o Componente opcional do Hive WebHCat para instalar o Hive WebHCat em um cluster.
  3. O componente opcional Presto está disponível como componente opcional Trino nas versões de imagem 2.1 e posteriores.
  4. Os componentes HBase e Druid não são compatíveis com as versões de imagem 2.1 e mais recentes.
  5. O código-fonte das bibliotecas de imagens 2.1 licenciadas sob licenças recíprocas e restritas está disponível no caminho de arquivo /usr/local/share/google/managed-spark/third-party-sources nas VMs de cluster do Serviço Gerenciado para Apache Spark.

  6. As versões de imagem 2.1.117, 2.1.119 e mais recentes não têm canais Conda pré-configurados. Não é possível instalar pacotes usando o Conda, a menos que os canais sejam configurados manualmente durante a inicialização do cluster. Além disso, os clusters da versão da imagem 2.1 que têm canais Conda pré-configurados, incluindo 2.1.118 e versões de imagem anteriores, mas excluindo 2.1.117, não poderão ser usados após 25 de agosto de 2026.

    • Talvez seja necessário excluir e substituir os clusters atuais. Após 25 de agosto de 2026, os clusters criados com imagens que têm canais do Conda pré-configurados, mesmo que os jobs do cluster não usem o Conda para instalar pacotes, precisarão ser excluídos e substituídos por novos clusters criados ou recriados com imagens que não têm canais do Conda pré-configurados.