全部产品
Search
文档中心

开源大数据平台E-MapReduce:EMR-4.6.x版本说明

更新时间:Apr 27, 2023

本文介绍EMR-4.6.x发行版本的发布日期和更新内容等信息。

发布日期

EMR-4.6.0 2021年1月15日

更新内容

服务

变更点

SmartData

升级至3.2.0版本。

详情请参见SmartData 3.2.x版本简介

Spark

  • 升级至2.4.7版本。

  • 升级jQuery至3.5.1版本。

  • 兼容Hive方式自动更新表和分区大小。

  • 支持Spark元数据和作业运行信息输出至DataWorks。

Hive

  • HCatalog支持Data Lake Formation。

  • 支持Hive元数据和作业运行信息输出至DataWorks。

Metastore

  • 新增Hive Statistics功能。

  • HCatalog支持Data Lake Formation。

  • 优化STSToken的获取方式。

HDFS

  • 升级jQuery至3.5.1版本。

  • 升级至3.2.1版本。

YARN

  • 升级至3.2.1版本。

  • 升级jQuery至3.5.1版本。

  • 调整Fair Scheduler配置。

  • 优化了Timeline Server。

Zeppelin

升级至0.9.0版本。

OpenLDAP

  • 增加审计功能。

  • 默认开启SSL端口(10636)。

  • 支持一键开启Presto。

Hue

支持Presto。

EMRHook

  • 新增软件服务。

  • hive-hook:支持Hive元数据和作业运行信息输出至DataWorks。

  • spark-hook:支持Spark元数据和作业运行信息输出至DataWorks。

发行版本信息

Hadoop集群

服务

版本

HDFS

3.2.1

YARN

3.2.1

Hive

3.1.2

Spark

2.4.7

Knox

1.1.0

Tez

0.9.2

Ganglia

3.7.2

Sqoop

1.4.7

SmartData

3.2.0

Bigboot

3.2.0

Hudi

0.6.0

OpenLDAP

2.4.44

Hue

4.4.0

HBase

2.1.9

Zookeeper

3.5.6

Presto

338

Impala

3.4.0

Zeppelin

0.9.0

Flume

1.9.0

Livy

0.6.0

Superset

0.36.0

Ranger

2.1.0

Flink

1.10-vvr-1.0.2

Storm

1.2.2

ESS

1.0.0

Kudu

1.11.1

Oozie

5.1.0

Shuffle Service集群

服务

版本

ESS

1.0.0

Kafka集群

服务

版本

Zookeeper

3.5.6

Ganglia

3.7.2

Kafka

2.4.1

Kafka-Manager

1.3.3.16

OpenLDAP

2.4.44

Knox

1.1.0

Ranger

2.1.0