本文介绍EMR-4.6.x发行版本的发布日期和更新内容等信息。

发布日期

EMR-4.6.0 2021年1月15日

更新内容

服务 变更点
SmartData 升级至3.2.0版本。

详情请参见SmartData 3.2.x版本简介

Spark
  • 升级至2.4.7版本。
  • 升级jQuery至3.5.1版本。
  • 兼容Hive方式自动更新表和分区大小。
  • 支持Spark元数据和作业运行信息输出至DataWorks。
Hive
  • HCatalog支持Data Lake Formation。
  • 支持Hive元数据和作业运行信息输出至DataWorks。
Metastore
  • 新增Hive Statistics功能。
  • HCatalog支持Data Lake Formation。
  • 优化STSToken的获取方式。
HDFS
  • 升级jQuery至3.5.1版本。
  • 升级至3.2.1版本。
YARN
  • 升级至3.2.1版本。
  • 升级jQuery至3.5.1版本。
  • 调整Fair Scheduler配置。
  • 优化了Timeline Server。
Zeppelin 升级至0.9.0版本。
OpenLDAP
  • 增加审计功能。
  • 默认开启SSL端口(10636)。
  • 支持一键开启Presto。
Hue 支持Presto。
EMRHook
  • 新增软件服务。
  • hive-hook:支持Hive元数据和作业运行信息输出至DataWorks。
  • spark-hook:支持Spark元数据和作业运行信息输出至DataWorks。

发行版本信息

服务 版本
HDFS 3.2.1
YARN 3.2.1
Hive 3.1.2
Spark 2.4.7
Knox 1.1.0
Tez 0.9.2
Ganglia 3.7.2
Sqoop 1.4.7
SmartData 3.2.0
Bigboot 3.2.0
Hudi 0.6.0
OpenLDAP 2.4.44
Hue 4.4.0
HBase 2.1.9
Zookeeper 3.5.6
Presto 338
Impala 3.4.0
Zeppelin 0.9.0
Flume 1.9.0
Livy 0.6.0
Superset 0.36.0
Ranger 2.1.0
Flink 1.10-vvr-1.0.2
Storm 1.2.2
ESS 1.0.0
Kudu 1.11.1
Oozie 5.1.0
服务 版本
ESS 1.0.0
Zookeeper 3.5.6
Ganglia 3.7.2
Kafka 2.4.1
Kafka-Manager 1.3.3.16
OpenLDAP 2.4.44
Knox 1.1.0
Ranger 2.1.0