全部產品
Search
文件中心

E-MapReduce:EMR-5.17.x版本說明

更新時間:Sep 15, 2024

本文介紹5.17.x版本的發布日期、更新內容和發行版本資訊。

發布日期

版本

日期

EMR-5.17.2

2024年08月29日

EMR-5.17.1

2024年06月21日

EMR-5.17.0

2024年04月23日

更新內容

EMR-5.17.2

服務

變更點

JindoCache

  • 升級至6.5.1版本。

  • 提升DHT(Distributed Hash Table)的讀寫效能。

Spark

  • 修複了無法刪除分區目錄的問題。

  • 修複了Hive包依賴問題,確保用戶端操作不中斷與metaStoreClient的串連。

Trino

  • 修複了擴容過程中可能導致部分已修改配置意外恢複的問題。

  • 支援查詢高安全OSS-HDFS上的資料。

  • 修複啟用DLF-AUTH後服務異常的問題。

Presto

支援查詢高安全OSS-HDFS上的資料。

HDFS

解決了無法修改NameNode和DataNode記憶體的問題。

HBaseHDFS

YARN

  • ResourceManager支援批量發送timeline事件,提升了處理能力。

  • 修複了ResourceManager中容器和資源處理的邏輯問題。

Zookeeper

  • 解決了無法修改節點群組記憶體配置的問題。

  • 支援重構日誌設定檔。

Impala

修複了彈性擴容時修改客戶配置的問題。

Ranger

支援新版JindoSDK核心,有效降低了CPU使用率。

Knox

修複了僅有一個Master-Extend時組件URL訪問失效的問題。

Kafka

修複了Kafka Connect叢集啟動的問題。

StarRocks

修複了擴容後看不到新增BE的問題。

Doris

升級至2.1.4版本。

Paimon

升級至0.9-ali-7版本。

EMRHOOK

支援解析MaxCompute表的血緣資料。

EMR-5.17.1

服務

變更點

Spark

支援部署Master-Extend節點群組。

Hive

Kyuubi

Paimon

將Flink依賴從VVR版本替換為社區版,並支援DLF Catalog。

Knox

使用JDK 8進行打包。

Flink

已恢複在EMR-5.17.0中移除的DLF配置和依賴項。

EMR-5.17.0

服務

變更點

Spark

Spark3升級至3.4.2版本。

Celeborn

升級至0.4.0版本。

Doris

升級至2.1.0版本。

StarRocks

  • StarRocks2升級至2.5.18版本。

  • StarRocks3升級至3.2.4版本。

DeltaLake

升級至3.0.0版本。

Iceberg

升級至1.5.0版本。

Zookeeper

升級至3.8.4版本。

JindoCache

升級至6.2.5版本。

Flink

升級至1.17.2版本。

發行版本資訊

DataLake叢集

服務

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

Hive

3.1.3

Spark2

2.4.8

Spark3

3.4.2

Tez

0.10.2

Trino

422

DeltaLake

3.0.0

Hudi

0.14.0

Iceberg

1.5.0

Flume

1.11.0

Kyuubi

1.7.3

YARN

3.2.1

Impala

4.3.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

DLF-Auth

2.0.2

Presto

0.283

Zookeeper

3.8.4

Sqoop

1.4.7

Knox

1.5.0

Celeborn

0.4.0

JindoCache

  • EMR-5.17.2:6.5.1

  • EMR-5.17.1和EMR-5.17.0:6.2.5

Paimon

  • EMR-5.17.2:0.9-ali-7

  • EMR-5.17.1和EMR-5.17.0:0.7-ali-1

OLAP叢集

服務

版本

StarRocks2

2.5.18

StarRocks3

3.2.4

Doris

  • EMR-5.17.2:2.1.0

  • EMR-5.17.1和EMR-5.17.0:2.1.4

ClickHouse

23.3.13.6

Zookeeper

3.8.4

DataFlow叢集

服務

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

YARN

3.2.1

OpenLDAP

2.4.46

Zookeeper

3.8.4

Knox

1.5.0

Flink

1.17.2

Kafka

2.13_3.6.1

Kafka-Manager

3.0.0.6

Paimon

  • EMR-5.17.2:0.9-ali-7

  • EMR-5.17.1和EMR-5.17.0:0.7-ali-1

DataServing叢集

服務

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

Zookeeper

3.8.4

Knox

1.5.0

HBase

2.4.9

JindoCache

  • EMR-5.17.2:6.5.1

  • EMR-5.17.1和EMR-5.17.0:6.2.5

Phoenix

5.1.2

自訂叢集

服務

版本

Hadoop-Common

3.2.1

HDFS

3.2.1

OSS-HDFS

1.0.0

Hive

3.1.3

Spark2

2.4.8

Spark3

3.4.2

Tez

0.10.2

Trino

422

DeltaLake

3.0.0

Hudi

0.14.0

Iceberg

1.5.0

Flume

1.11.0

Kyuubi

1.7.3

YARN

3.2.1

Impala

4.3.0

OpenLDAP

2.4.46

Ranger

2.3.0

Ranger-plugin

1.0.0

DLF-Auth

2.0.2

Presto

0.283

StarRocks2

2.5.18

StarRocks3

3.2.4

Zookeeper

3.8.4

Sqoop

1.4.7

Knox

1.5.0

Celeborn

0.4.0

Flink

1.17.2

HBase

2.4.9

JindoCache

  • EMR-5.17.2:6.5.1

  • EMR-5.17.1和EMR-5.17.0:6.2.5

Kudu

1.16.0

Paimon

  • EMR-5.17.2:0.9-ali-7

  • EMR-5.17.1和EMR-5.17.0:0.7-ali-1

Phoenix

5.1.2