开源大数据平台 E-MapReduce - 查看集群日报与分析
May 15 2023
开源大数据平台 E-MapReduce适用客户
所有用户
新增功能/规格
EMR Doctor集群日报功能 1、新增YARN引擎分析,多维展示集群资源分配和使用情况,辅助提升资源利用率 1)YARN内存资源使用分析,分析用户每天YARN内存资源使用的高峰期和低谷期 2)YARN任务运行分析,分析不同时段任务运行的数量分布,找出繁忙和空闲时间 3)新增YARN基础信息展示 4)新增队列使用分析及用户使用分析 2、增加集群计算分析内容 1)增加任务长尾检测 2)数据倾斜诊断到Stage更细粒度的分析 3)任务明细增加作业IO和Shuffle信息 3、集群存储分析优化内存使用和分析时间相关内容。