本文介紹5.17.x版本的發布日期、更新內容和發行版本信息。
發布日期
版本 | 日期 |
EMR-5.17.4 | 2024年12月18日 |
EMR-5.17.3 | 2024年11月29日 |
EMR-5.17.2 | 2024年08月29日 |
EMR-5.17.1 | 2024年06月21日 |
EMR-5.17.0 | 2024年04月23日 |
更新內容
EMR-5.17.4
服務 | 變更點 |
JindoCache | 升級至6.5.3版本。 |
StarRocks2 | 升級至2.5.22版本。 |
StarRocks3 | 升級至3.2.11版本。 |
EMR-5.17.3
服務 | 變更點 |
JindoSDK | 升級JindoSDK以解決死鎖問題。 |
EMR-5.17.2
服務 | 變更點 |
JindoCache |
|
Spark |
|
Trino |
|
Presto | 支持查詢高安全OSS-HDFS上的數據。 |
HDFS | 解決了無法修改NameNode和DataNode內存的問題。 |
HBaseHDFS | |
YARN |
|
Zookeeper |
|
Impala | 修復了彈性擴容時修改客戶配置的問題。 |
Ranger | 支持新版JindoSDK內核,有效降低了CPU使用率。 |
Knox | 修復了僅有一個Master-Extend時組件URL訪問失效的問題。 |
Kafka | 修復了Kafka Connect集群啟動的問題。 |
StarRocks | 修復了擴容后看不到新增BE的問題。 |
Doris | 升級至2.1.4版本。 |
Paimon | 升級至0.9-ali-7版本。 |
EMRHOOK | 支持解析MaxCompute表的血緣數據。 |
EMR-5.17.1
服務 | 變更點 |
Spark | 支持部署Master-Extend節點組。 |
Hive | |
Kyuubi | |
Paimon | 將Flink依賴從VVR版本替換為社區版,并支持DLF Catalog。 |
Knox | 使用JDK 8進行打包。 |
Flink | 已恢復在EMR-5.17.0中移除的DLF配置和依賴項。 |
EMR-5.17.0
服務 | 變更點 |
Spark | Spark3升級至3.4.2版本。 |
Celeborn | 升級至0.4.0版本。 |
Doris | 升級至2.1.0版本。 |
StarRocks |
|
DeltaLake | 升級至3.0.0版本。 |
Iceberg | 升級至1.5.0版本。 |
Zookeeper | 升級至3.8.4版本。 |
JindoCache | 升級至6.2.5版本。 |
Flink | 升級至1.17.2版本。 |
發行版本信息
DataLake集群
服務 | 版本 |
Hadoop-Common | 3.2.1 |
HDFS | 3.2.1 |
OSS-HDFS | 1.0.0 |
Hive | 3.1.3 |
Spark2 | 2.4.8 |
Spark3 | 3.4.2 |
Tez | 0.10.2 |
Trino | 422 |
DeltaLake | 3.0.0 |
Hudi | 0.14.0 |
Iceberg | 1.5.0 |
Flume | 1.11.0 |
Kyuubi | 1.7.3 |
YARN | 3.2.1 |
Impala | 4.3.0 |
OpenLDAP | 2.4.46 |
Ranger | 2.3.0 |
Ranger-plugin | 1.0.0 |
DLF-Auth | 2.0.2 |
Presto | 0.283 |
Zookeeper | 3.8.4 |
Sqoop | 1.4.7 |
Knox | 1.5.0 |
Celeborn | 0.4.0 |
JindoCache |
|
Paimon |
|
OLAP集群
服務 | 版本 |
StarRocks2 |
|
StarRocks3 |
|
Doris |
|
ClickHouse | 23.3.13.6 |
Zookeeper | 3.8.4 |
DataFlow集群
服務 | 版本 |
Hadoop-Common | 3.2.1 |
HDFS | 3.2.1 |
OSS-HDFS | 1.0.0 |
YARN | 3.2.1 |
OpenLDAP | 2.4.46 |
Zookeeper | 3.8.4 |
Knox | 1.5.0 |
Flink | 1.17.2 |
Kafka | 2.13_3.6.1 |
Kafka-Manager | 3.0.0.6 |
Paimon |
|
DataServing集群
服務 | 版本 |
Hadoop-Common | 3.2.1 |
HDFS | 3.2.1 |
OSS-HDFS | 1.0.0 |
OpenLDAP | 2.4.46 |
Ranger | 2.3.0 |
Ranger-plugin | 1.0.0 |
Zookeeper | 3.8.4 |
Knox | 1.5.0 |
HBase | 2.4.9 |
JindoCache |
|
Phoenix | 5.1.2 |
自定義集群
服務 | 版本 |
Hadoop-Common | 3.2.1 |
HDFS | 3.2.1 |
OSS-HDFS | 1.0.0 |
Hive | 3.1.3 |
Spark2 | 2.4.8 |
Spark3 | 3.4.2 |
Tez | 0.10.2 |
Trino | 422 |
DeltaLake | 3.0.0 |
Hudi | 0.14.0 |
Iceberg | 1.5.0 |
Flume | 1.11.0 |
Kyuubi | 1.7.3 |
YARN | 3.2.1 |
Impala | 4.3.0 |
OpenLDAP | 2.4.46 |
Ranger | 2.3.0 |
Ranger-plugin | 1.0.0 |
DLF-Auth | 2.0.2 |
Presto | 0.283 |
StarRocks2 |
|
StarRocks3 |
|
Zookeeper | 3.8.4 |
Sqoop | 1.4.7 |
Knox | 1.5.0 |
Celeborn | 0.4.0 |
Flink | 1.17.2 |
HBase | 2.4.9 |
JindoCache |
|
Kudu | 1.16.0 |
Paimon |
|
Phoenix | 5.1.2 |