开源大数据平台E-MapReduce：EMR-4.6.x版本说明

服务

变更点

SmartData

升级至3.2.0版本。

详情请参见SmartData 3.2.x版本简介。

Spark

• 升级至2.4.7版本。

• 升级jQuery至3.5.1版本。

• 兼容Hive方式自动更新表和分区大小。

• 支持Spark元数据和作业运行信息输出至DataWorks。

Hive

• HCatalog支持Data Lake Formation。

• 支持Hive元数据和作业运行信息输出至DataWorks。

Metastore

• 新增Hive Statistics功能。

• HCatalog支持Data Lake Formation。

• 优化STSToken的获取方式。

HDFS

• 升级jQuery至3.5.1版本。

• 升级至3.2.1版本。

YARN

• 升级至3.2.1版本。

• 升级jQuery至3.5.1版本。

• 调整Fair Scheduler配置。

• 优化了Timeline Server。

Zeppelin

升级至0.9.0版本。

OpenLDAP

• 增加审计功能。

• 默认开启SSL端口（10636）。

• 支持一键开启Presto。

Hue

支持Presto。

EMRHook

• 新增软件服务。

• hive-hook：支持Hive元数据和作业运行信息输出至DataWorks。

• spark-hook：支持Spark元数据和作业运行信息输出至DataWorks。