全部產品
Search

搜尋本產品

    E-MapReduce：EMR-5.17.x版本說明

    文件中心

    E-MapReduce：EMR-5.17.x版本說明

    更新時間：Dec 20, 2024

    本文介紹5.17.x版本的發布日期、更新內容和發行版本資訊。

    發布日期

    版本

    日期

    EMR-5.17.4

    2024年12月18日

    EMR-5.17.3

    2024年11月29日

    EMR-5.17.2

    2024年08月29日

    EMR-5.17.1

    2024年06月21日

    EMR-5.17.0

    2024年04月23日

    更新內容

    EMR-5.17.4

    服務

    變更點

    JindoCache

    升級至6.5.3版本。

    StarRocks2

    升級至2.5.22版本。

    StarRocks3

    升級至3.2.11版本。

    EMR-5.17.3

    服務

    變更點

    JindoSDK

    升級JindoSDK以解決死結問題。

    EMR-5.17.2

    服務

    變更點

    JindoCache

    • 升級至6.5.1版本。

    • 提升DHT（Distributed Hash Table）的讀寫效能。

    Spark

    • 修複了無法刪除分區目錄的問題。

    • 修複了Hive包依賴問題，確保用戶端操作不中斷與metaStoreClient的串連。

    Trino

    • 修複了擴容過程中可能導致部分已修改配置意外恢複的問題。

    • 支援查詢高安全OSS-HDFS上的資料。

    • 修複啟用DLF-AUTH後服務異常的問題。

    Presto

    支援查詢高安全OSS-HDFS上的資料。

    HDFS

    解決了無法修改NameNode和DataNode記憶體的問題。

    HBaseHDFS

    YARN

    • ResourceManager支援批量發送timeline事件，提升了處理能力。

    • 修複了ResourceManager中容器和資源處理的邏輯問題。

    Zookeeper

    • 解決了無法修改節點群組記憶體配置的問題。

    • 支援重構日誌設定檔。

    Impala

    修複了彈性擴容時修改客戶配置的問題。

    Ranger

    支援新版JindoSDK核心，有效降低了CPU使用率。

    Knox

    修複了僅有一個Master-Extend時組件URL訪問失效的問題。

    Kafka

    修複了Kafka Connect叢集啟動的問題。

    StarRocks

    修複了擴容後看不到新增BE的問題。

    Doris

    升級至2.1.4版本。

    Paimon

    升級至0.9-ali-7版本。

    EMRHOOK

    支援解析MaxCompute表的血緣資料。

    EMR-5.17.1

    服務

    變更點

    Spark

    支援部署Master-Extend節點群組。

    Hive

    Kyuubi

    Paimon

    將Flink依賴從VVR版本替換為社區版，並支援DLF Catalog。

    Knox

    使用JDK 8進行打包。

    Flink

    已恢複在EMR-5.17.0中移除的DLF配置和依賴項。

    EMR-5.17.0

    服務

    變更點

    Spark

    Spark3升級至3.4.2版本。

    Celeborn

    升級至0.4.0版本。

    Doris

    升級至2.1.0版本。

    StarRocks

    • StarRocks2升級至2.5.18版本。

    • StarRocks3升級至3.2.4版本。

    DeltaLake

    升級至3.0.0版本。

    Iceberg

    升級至1.5.0版本。

    Zookeeper

    升級至3.8.4版本。

    JindoCache

    升級至6.2.5版本。

    Flink

    升級至1.17.2版本。

    發行版本資訊

    DataLake叢集

    服務

    版本

    Hadoop-Common

    3.2.1

    HDFS

    3.2.1

    OSS-HDFS

    1.0.0

    Hive

    3.1.3

    Spark2

    2.4.8

    Spark3

    3.4.2

    Tez

    0.10.2

    Trino

    422

    DeltaLake

    3.0.0

    Hudi

    0.14.0

    Iceberg

    1.5.0

    Flume

    1.11.0

    Kyuubi

    1.7.3

    YARN

    3.2.1

    Impala

    4.3.0

    OpenLDAP

    2.4.46

    Ranger

    2.3.0

    Ranger-plugin

    1.0.0

    DLF-Auth

    2.0.2

    Presto

    0.283

    Zookeeper

    3.8.4

    Sqoop

    1.4.7

    Knox

    1.5.0

    Celeborn

    0.4.0

    JindoCache

    • EMR-5.17.4：6.5.3

    • EMR-5.17.3和EMR-5.17.2：6.5.1

    • EMR-5.17.1和EMR-5.17.0：6.2.5

    Paimon

    • EMR-5.17.2至EMR-5.17.4：0.9-ali-7

    • EMR-5.17.1和EMR-5.17.0：0.7-ali-1

    OLAP叢集

    服務

    版本

    StarRocks2

    • EMR-5.17.4：2.5.22

    • EMR-5.17.1至EMR-5.17.3：2.5.18

    StarRocks3

    • EMR-5.17.4：3.2.11

    • EMR-5.17.1至EMR-5.17.3：3.2.4

    Doris

    • EMR-5.17.2至EMR-5.17.4：2.1.4

    • EMR-5.17.1和EMR-5.17.0：2.1.0

    ClickHouse

    23.3.13.6

    Zookeeper

    3.8.4

    DataFlow叢集

    服務

    版本

    Hadoop-Common

    3.2.1

    HDFS

    3.2.1

    OSS-HDFS

    1.0.0

    YARN

    3.2.1

    OpenLDAP

    2.4.46

    Zookeeper

    3.8.4

    Knox

    1.5.0

    Flink

    1.17.2

    Kafka

    2.13_3.6.1

    Kafka-Manager

    3.0.0.6

    Paimon

    • EMR-5.17.2至EMR-5.17.4：0.9-ali-7

    • EMR-5.17.1和EMR-5.17.0：0.7-ali-1

    DataServing叢集

    服務

    版本

    Hadoop-Common

    3.2.1

    HDFS

    3.2.1

    OSS-HDFS

    1.0.0

    OpenLDAP

    2.4.46

    Ranger

    2.3.0

    Ranger-plugin

    1.0.0

    Zookeeper

    3.8.4

    Knox

    1.5.0

    HBase

    2.4.9

    JindoCache

    • EMR-5.17.4：6.5.3

    • EMR-5.17.3和EMR-5.17.2：6.5.1

    • EMR-5.17.1和EMR-5.17.0：6.2.5

    Phoenix

    5.1.2

    自訂叢集

    服務

    版本

    Hadoop-Common

    3.2.1

    HDFS

    3.2.1

    OSS-HDFS

    1.0.0

    Hive

    3.1.3

    Spark2

    2.4.8

    Spark3

    3.4.2

    Tez

    0.10.2

    Trino

    422

    DeltaLake

    3.0.0

    Hudi

    0.14.0

    Iceberg

    1.5.0

    Flume

    1.11.0

    Kyuubi

    1.7.3

    YARN

    3.2.1

    Impala

    4.3.0

    OpenLDAP

    2.4.46

    Ranger

    2.3.0

    Ranger-plugin

    1.0.0

    DLF-Auth

    2.0.2

    Presto

    0.283

    StarRocks2

    • EMR-5.17.4：2.5.22

    • EMR-5.17.1至EMR-5.17.3：2.5.18

    StarRocks3

    • EMR-5.17.4：3.2.11

    • EMR-5.17.1至EMR-5.17.3：3.2.4

    Zookeeper

    3.8.4

    Sqoop

    1.4.7

    Knox

    1.5.0

    Celeborn

    0.4.0

    Flink

    1.17.2

    HBase

    2.4.9

    JindoCache

    • EMR-5.17.4：6.5.3

    • EMR-5.17.3和EMR-5.17.2：6.5.1

    • EMR-5.17.1和EMR-5.17.0：6.2.5

    Kudu

    1.16.0

    Paimon

    • EMR-5.17.2至EMR-5.17.4：0.9-ali-7

    • EMR-5.17.1和EMR-5.17.0：0.7-ali-1

    Phoenix

    5.1.2