全部產品
Search

搜尋本產品

    E-MapReduce：EMR-3.51.x版本說明

    文件中心

    E-MapReduce：EMR-3.51.x版本說明

    更新時間：Dec 20, 2024

    本文介紹EMR-3.51.x版本的發布日期、更新內容和發行版本資訊。

    發布日期

    版本

    日期

    EMR-3.51.4

    2024年12月18日

    EMR-3.51.3

    2024年11月29日

    EMR-3.51.2

    2024年08月29日

    EMR-3.51.1

    2024年06月21日

    EMR-3.51.0

    2024年04月23日

    更新內容

    EMR-3.51.4

    服務

    變更點

    JindoCache

    升級至6.5.3版本。

    StarRocks2

    升級至2.5.22版本。

    StarRocks3

    升級至3.2.11版本。

    EMR-3.51.3

    服務

    變更點

    JindoSDK

    升級JindoSDK以解決死結問題。

    EMR-3.51.2

    服務

    變更點

    JindoCache

    • 升級至6.5.1版本。

    • 提升DHT（Distributed Hash Table）的讀寫效能。

    Spark

    • 修複了無法刪除分區目錄的問題。

    • 修複了Hive包依賴問題，確保用戶端操作不中斷與metaStoreClient的串連。

    Trino

    • 修複了擴容過程中可能導致部分已修改配置意外恢複的問題。

    • 支援查詢高安全OSS-HDFS上的資料。

    • 修複啟用DLF-AUTH後服務異常的問題。

    Presto

    支援查詢高安全OSS-HDFS上的資料。

    HDFS

    解決了無法修改NameNode和DataNode記憶體的問題。

    HBaseHDFS

    YARN

    • ResourceManager支援批量發送timeline事件，提升了處理能力。

    • 修複了ResourceManager中容器和資源處理的邏輯問題。

    Zookeeper

    • 解決了無法修改節點群組記憶體配置的問題。

    • 支援重構日誌設定檔。

    Impala

    修複了彈性擴容時修改客戶配置的問題。

    Ranger

    支援新版JindoSDK核心，有效降低了CPU使用率。

    Knox

    修複了僅有一個Master-Extend時組件URL訪問失效的問題。

    Kafka

    修複了Kafka Connect叢集啟動的問題。

    StarRocks

    修複了擴容後看不到新增BE的問題。

    Doris

    升級至2.1.4版本。

    Paimon

    升級至0.9-ali-7版本。

    EMRHOOK

    支援解析MaxCompute表的血緣資料。

    EMR-3.51.1

    服務

    變更點

    Spark

    支援部署Master-Extend節點群組。

    Hive

    Kyuubi

    Paimon

    將Flink依賴從VVR版本替換為社區版，並支援DLF Catalog。

    Knox

    使用JDK 8進行打包。

    Flink

    已恢複在EMR-3.51.0中移除的DLF配置和依賴項。

    EMR-3.51.0

    服務

    變更點

    Spark

    Spark3升級至3.4.2版本。

    Celeborn

    升級至0.4.0版本。

    Doris

    升級至2.1.0版本。

    StarRocks

    • StarRocks2升級至2.5.18版本。

    • StarRocks3升級至3.2.4版本。

    DeltaLake

    升級至3.0.0版本。

    Iceberg

    升級至1.5.0版本。

    Zookeeper

    升級至3.8.4版本。

    JindoCache

    升級至6.2.5版本。

    Flink

    升級至1.17.2版本。

    發行版本資訊

    DataLake叢集

    服務

    版本

    Hadoop-Common

    2.8.5

    HDFS

    2.8.5

    OSS-HDFS

    1.0.0

    Hive

    2.3.9

    Spark2

    2.4.8

    Spark3

    3.4.2

    YARN

    2.8.5

    Trino

    422

    DeltaLake

    3.0.0

    Hudi

    0.14.0

    Iceberg

    1.5.0

    Flume

    1.11.0

    Kyuubi

    1.7.3

    Tez

    0.10.2

    OpenLDAP

    2.4.46

    Ranger

    2.3.0

    Ranger-plugin

    1.0.0

    Sqoop

    1.4.7

    DLF-Auth

    2.0.2

    Presto

    0.283

    Zookeeper

    3.8.4

    Knox

    1.5.0

    Celeborn

    0.4.0

    JindoCache

    • EMR-3.51.4：6.5.3

    • EMR-3.51.3和EMR-3.51.2：6.5.1

    • EMR-3.51.1和EMR-3.51.0：6.2.5

    Paimon

    • EMR-3.51.2：0.9-ali-7

    • EMR-3.51.1和EMR-3.51.0：0.7-ali-1

    OLAP叢集

    服務

    版本

    StarRocks2

    • EMR-3.51.4：2.5.22

    • EMR-3.51.1至EMR-3.51.3：2.5.18

    StarRocks3

    • EMR-3.51.4：3.2.11

    • EMR-3.51.1至EMR-3.51.3：3.2.4

    Doris

    • EMR-5.17.2至EMR-3.51.4：2.1.4

    • EMR-5.17.1和EMR-3.51.0：2.1.0

    ClickHouse

    23.8.2.7

    Zookeeper

    3.8.4

    DataFlow叢集

    服務

    版本

    Hadoop-Common

    2.8.5

    HDFS

    2.8.5

    OSS-HDFS

    1.0.0

    YARN

    2.8.5

    OpenLDAP

    2.4.46

    Ranger

    2.3.0

    Ranger-plugin

    1.0.0

    Zookeeper

    3.8.4

    Knox

    1.5.0

    Flink

    1.17.2

    Kafka

    2.12_2.4.1

    Kafka-Manager

    3.0.0.6

    Paimon

    • EMR-3.51.2：0.9-ali-7

    • EMR-3.51.1和EMR-3.51.0：0.7-ali-1

    DataServing叢集

    服務

    版本

    Hadoop-Common

    2.8.5

    HDFS

    2.8.5

    OSS-HDFS

    1.0.0

    OpenLDAP

    2.4.46

    Ranger

    2.3.0

    Ranger-plugin

    1.0.0

    Zookeeper

    3.8.4

    Knox

    1.5.0

    HBase

    1.7.1

    JindoCache

    • EMR-3.51.4：6.5.3

    • EMR-3.51.3和EMR-3.51.2：6.5.1

    • EMR-3.51.1和EMR-3.51.0：6.2.5

    Phoenix

    4.16.1

    自訂叢集

    服務

    版本

    Hadoop-Common

    2.8.5

    HDFS

    2.8.5

    OSS-HDFS

    1.0.0

    Hive

    2.3.9

    Spark2

    2.4.8

    Spark3

    3.4.2

    YARN

    2.8.5

    Trino

    422

    DeltaLake

    3.0.0

    Hudi

    0.14.0

    Iceberg

    1.5.0

    Flume

    1.11.0

    Kyuubi

    1.7.3

    Tez

    0.10.2

    OpenLDAP

    2.4.46

    Ranger

    2.3.0

    Ranger-plugin

    1.0.0

    Sqoop

    1.4.7

    DLF-Auth

    2.0.2

    Presto

    0.283

    StarRocks2

    • EMR-3.51.4：2.5.22

    • EMR-3.51.1至EMR-3.51.3：2.5.18

    StarRocks3

    • EMR-3.51.4：3.2.11

    • EMR-3.51.1至EMR-3.51.3：3.2.4

    Zookeeper

    3.8.4

    Knox

    1.5.0

    Celeborn

    0.4.0

    Flink

    1.17.2

    HBase

    1.7.1

    JindoCache

    • EMR-3.51.4：6.5.3

    • EMR-3.51.3和EMR-3.51.2：6.5.1

    • EMR-3.51.1和EMR-3.51.0：6.2.5

    Kudu

    1.16.0

    Paimon

    • EMR-3.51.2至EMR-3.51.4：0.9-ali-7

    • EMR-3.51.1和EMR-3.51.0：0.7-ali-1

    Phoenix

    4.16.1