本文介紹EMR-3.51.x版本的發布日期、更新內容和發行版本資訊。
發布日期
版本 | 日期 |
EMR-3.51.2 | 2024年08月29日 |
EMR-3.51.1 | 2024年06月21日 |
EMR-3.51.0 | 2024年04月23日 |
更新內容
EMR-3.51.2
服務 | 變更點 |
JindoCache |
|
Spark |
|
Trino |
|
Presto | 支援查詢高安全OSS-HDFS上的資料。 |
HDFS | 解決了無法修改NameNode和DataNode記憶體的問題。 |
HBaseHDFS | |
YARN |
|
Zookeeper |
|
Impala | 修複了彈性擴容時修改客戶配置的問題。 |
Ranger | 支援新版JindoSDK核心，有效降低了CPU使用率。 |
Knox | 修複僅了有一個Master-Extend時組件URL訪問失效的問題。 |
Kafka | 修複了Kafka Connect叢集啟動的問題。 |
StarRocks | 修複了擴容後看不到新增BE的問題。 |
Doris | 升級至2.1.4版本。 |
Paimon | 升級至0.9-ali-7版本。 |
EMRHOOK | 支援解析MaxCompute表的血緣資料。 |
EMR-3.51.1
服務 | 變更點 |
Spark | 支援部署Master-Extend節點群組。 |
Hive | |
Kyuubi | |
Paimon | 將Flink依賴從VVR版本替換為社區版，並支援DLF Catalog。 |
Knox | 使用JDK 8進行打包。 |
Flink | 已恢複在EMR-3.51.0中移除的DLF配置和依賴項。 |
EMR-3.51.0
服務 | 變更點 |
Spark | Spark3升級至3.4.2版本。 |
Celeborn | 升級至0.4.0版本。 |
Doris | 升級至2.1.0版本。 |
StarRocks |
|
DeltaLake | 升級至3.0.0版本。 |
Iceberg | 升級至1.5.0版本。 |
Zookeeper | 升級至3.8.4版本。 |
JindoCache | 升級至6.2.5版本。 |
Flink | 升級至1.17.2版本。 |
發行版本資訊
DataLake叢集
服務 | 版本 |
Hadoop-Common | 2.8.5 |
HDFS | 2.8.5 |
OSS-HDFS | 1.0.0 |
Hive | 2.3.9 |
Spark2 | 2.4.8 |
Spark3 | 3.4.2 |
YARN | 2.8.5 |
Trino | 422 |
DeltaLake | 3.0.0 |
Hudi | 0.14.0 |
Iceberg | 1.5.0 |
Flume | 1.11.0 |
Kyuubi | 1.7.3 |
Tez | 0.10.2 |
OpenLDAP | 2.4.46 |
Ranger | 2.3.0 |
Ranger-plugin | 1.0.0 |
Sqoop | 1.4.7 |
DLF-Auth | 2.0.2 |
Presto | 0.283 |
Zookeeper | 3.8.4 |
Knox | 1.5.0 |
Celeborn | 0.4.0 |
JindoCache | 6.2.5 |
Paimon |
|
OLAP叢集
服務 | 版本 |
StarRocks2 | 2.5.18 |
StarRocks3 | 3.2.4 |
Doris |
|
ClickHouse | 23.8.2.7 |
Zookeeper | 3.8.4 |
DataFlow叢集
服務 | 版本 |
Hadoop-Common | 2.8.5 |
HDFS | 2.8.5 |
OSS-HDFS | 1.0.0 |
YARN | 2.8.5 |
OpenLDAP | 2.4.46 |
Ranger | 2.3.0 |
Zookeeper | 3.8.4 |
Knox | 1.5.0 |
Flink | 1.17.2 |
Kafka | 2.12_2.4.1 |
Kafka-Manager | 3.0.0.6 |
Paimon |
|
DataServing叢集
服務 | 版本 |
Hadoop-Common | 2.8.5 |
HDFS | 2.8.5 |
OSS-HDFS | 1.0.0 |
OpenLDAP | 2.4.46 |
Ranger | 2.3.0 |
Ranger-plugin | 1.0.0 |
Zookeeper | 3.8.4 |
Knox | 1.5.0 |
HBase | 1.7.1 |
JindoCache |
|
Phoenix | 4.16.1 |
自訂叢集
服務 | 版本 |
Hadoop-Common | 2.8.5 |
HDFS | 2.8.5 |
OSS-HDFS | 1.0.0 |
Hive | 2.3.9 |
Spark2 | 2.4.8 |
Spark3 | 3.4.2 |
YARN | 2.8.5 |
Trino | 422 |
DeltaLake | 3.0.0 |
Hudi | 0.14.0 |
Iceberg | 1.5.0 |
Flume | 1.11.0 |
Kyuubi | 1.7.3 |
Tez | 0.10.2 |
OpenLDAP | 2.4.46 |
Ranger | 2.3.0 |
Ranger-plugin | 1.0.0 |
Sqoop | 1.4.7 |
DLF-Auth | 2.0.2 |
Presto | 0.283 |
StarRocks2 | 2.5.18 |
StarRocks3 | 3.2.4 |
Zookeeper | 3.8.4 |
Knox | 1.5.0 |
Celeborn | 0.4.0 |
Flink | 1.17.2 |
HBase | 1.7.1 |
JindoCache |
|
Kudu | 1.16.0 |
Paimon |
|
Phoenix | 4.16.1 |