全部产品
Search
文档中心

开源大数据平台E-MapReduce:EMR-3.43.x版本说明

更新时间:Apr 27, 2023

本文介绍EMR-3.43.x版本的发布日期、更新内容和发行版本信息。

发布日期

版本

日期

EMR-3.43.1

2022年11月08日

EMR-3.43.0

2022年10月14日

更新内容

EMR-3.43.1

服务

变更点

Kerberos

支持在EMR上对接外部KDC。

Kafka

支持新增启动命令配置项,允许用户自定义设置服务的启动参数。

JindoData

  • 升级至4.6.0版本。

  • 支持改写OSS-HDFS访问路径。

Flink

升级至1.13_vvr_4.0.15版本。

RSS

升级至0.1.4版本。

EMR-3.43.0

服务

变更点

Spark

  • 升级至3.3版本。

  • 支持开启Kerberos身份认证。

Hudi

  • 升级至0.12.0版本。

  • 支持Spark 3.3版本。

  • 支持使用云上MetaStore托管元数据并开启加速功能,详情请参见Hudi MetaStore使用说明

Flink

  • 支持开启Kerberos身份认证。

  • 支持与数据湖构建(DLF)自动连接。

Iceberg

  • 升级至0.14.0版本。

  • 支持Spark 3.3版本。

  • 支持开启Kerberos身份认证。

JindoData

  • 升级至4.5.1版本。

  • 支持免明文AccessKey访问阿里云资源。

Hadoop-Common和HDFS

  • 支持开启Kerberos身份认证。

  • 修复安全漏洞CVE-2022-25168。

Knox

接入Ranger,支持通过访问链接与端口页签访问Ranger UI。

HBase

  • 升级至1.7.1版本。

  • 支持开启Kerberos身份认证。

  • 支持分组配置。

RSS

  • 升级至0.1.2版本。

  • 支持开启Kerberos身份认证。

Doris

  • 升级至1.1.2版本。

  • 支持开启Kerberos身份认证。

StarRocks

  • 升级至2.2.6版本。

  • 支持开启Kerberos身份认证。

Kafka

  • 升级至2.13_3.2.1版本。

  • 支持开启Kerberos身份认证。

DeltaLake

  • 升级至2.1.0版本。

  • 支持Spark 3.3版本。

  • 支持开启Kerberos身份认证。

Kudu

新增组件。版本为1.14.0。

Impala

  • 支持DLF创建视图。

  • 支持开启Kerberos身份认证。

YARN、Imapla、Ranger、Hive、Kyuubi、Tez、Kafka、Zookeeper、DLF-Auth、Phoenix、Sqoop、Presto

支持开启Kerberos身份认证。

发行版本信息

DataLake集群

服务

版本

HDFS

2.8.5

YARN

2.8.5

Hive

2.3.9

Spark2

2.4.8

Spark3

3.3.0

Tez

0.10.1

Presto

389

DeltaLake

2.1.0

Hudi

0.12.0

Iceberg

0.14.0

JindoData

EMR-3.43.1版本:4.6.0

EMR-3.43.0版本:4.5.1

Kyuubi

1.5.2

RSS

EMR-3.43.1版本:0.1.4

EMR-3.43.0版本:0.1.1

Knox

1.5.0

Kudu

1.14.0

Impala

3.4.0

OpenLDAP

2.4.44

Ranger

1.2.0

Sqoop

1.4.7

DLF-Auth

2.0.0

Zookeeper

3.6.3

Flume

1.9.0

OLAP集群

服务

版本

Zookeeper

3.6.3

ClickHouse

21.8.15.7

Doris

1.1.2

StarRocks

2.2.6

DataFlow集群

服务

版本

HDFS

2.8.5

YARN

2.8.5

Knox

1.5.0

OpenLDAP

2.4.44

Zookeeper

3.6.3

Flink

EMR-3.43.1版本:1.13_vvr_4.0.15

EMR-3.43.0版本:1.13_vvr_4.0.13

Kafka

2.12_2.4.1

Kafka-Manager

2.0.0.2

DataServing集群

服务

版本

HDFS

2.8.5

JindoData

EMR-3.43.1版本:4.6.0

EMR-3.43.0版本:4.5.1

Zookeeper

3.6.3

HBase

1.7.1

Phoenix

4.16.1

自定义集群

服务

版本

HDFS

2.8.5

YARN

2.8.5

Hive

2.3.9

Spark2

2.4.8

Spark3

3.3.0

Tez

0.10.1

Presto

389

DeltaLake

2.1.0

Hudi

0.12.0

Iceberg

0.14.0

Impala

3.4.0

OpenLDAP

2.4.44

Ranger

1.2.0

DLF-Auth

2.0.0

Zookeeper

3.6.3

Flink

EMR-3.43.1版本:1.13_vvr_4.0.15

EMR-3.43.0版本:1.13_vvr_4.0.13

Flume

1.9.0

HBase

1.7.1

Knox

1.5.0

JindoData

EMR-3.43.1版本:4.6.0

EMR-3.43.0版本:4.5.1

Kudu

1.14.0

Kyuubi

1.5.2

Phoenix

4.16.1

RSS

EMR-3.43.1版本:0.1.4

EMR-3.43.0版本:0.1.1

Sqoop

1.4.7

StarRocks

2.2.6