文档中心
E-MapReduce
产品简介
什么是 E-MapReduce
产品发行版本说明
产品发行版本总览
版本说明
E-MapReduce 3.23.0发行版本说明
E-MapReduce 3.22.0发行版本说明
E-MapReduce 3.22.0之前发行版本说明
产品优势
产品架构
使用场景
产品定价
费用组成
包年包月（单位：美元/月/核，不包含ECS价格）
按量计费（单位：美元/小时/核，不包含 ECS 价格）
到期与欠费
续费流程
快速入门
步骤一：选型配置
步骤二：准备工作
步骤三：创建集群
步骤四：创建并运行作业
集群规划与配置
集群规划
角色授权
用户管理
实例类型
组件角色部署
Gateway 实例
ECS 实例说明
存储说明
本地盘机型支持
经典网络与VPC互访
E-MapReduce 集群容灾能力
集群配置
创建集群
集群列表与详情
扩容集群
释放集群
集群续费管理
SSH 登录集群
服务列表
集群脚本
访问链接与端口
安全组
创建 Gateway
集群资源管理
配置弹性伸缩
弹性伸缩概述
按时间伸缩规则配置
弹性伸缩抢占式实例
弹性伸缩记录
配置专有网络
基于MetaService免AccessKey访问阿里云资源
元数据管理
Hive 元数据管理
Kafka 元数据管理
变更配置
升级节点配置
磁盘扩容
切换支付类型
移除异常节点
多机器组
第三方软件
引导操作
软件配置
组件参数配置
监控与报警
报警管理
集群报警管理
数据开发
项目管理
作业编辑
临时查询
工作流编辑
集群模板
云监控事件编码
作业
作业的可执行操作
作业日期设置
Shell作业配置
Hive作业配置
Hive SQL作业配置
Spark作业配置
Spark SQL作业配置
Spark Shell作业配置
Spark Streaming作业配置
Hadoop MapReduce作业配置
Sqoop作业配置
Pig作业配置
Flink作业配置
Streaming SQL作业配置
开源组件介绍
Hue 使用说明
Oozie 使用说明
Zeppelin 使用说明
ZooKeeper 使用说明
Kafka使用说明
Kafka 快速入门
Kafka 跨集群访问
Kafka Ranger 使用说明
Kafka SSL使用说明
Kafka 常见问题
Kafka Manager使用说明
Druid 使用说明
Druid 简介
快速入门
数据格式描述文件
Kafka Indexing Service
SLS Indexing Service
Superset
常见问题
Presto
产品简介
概述
快速入门
系统组成
基本概念
命令行工具
使用 JDBC
使用 ApacheDS 进行认证
数据类型
常用连接器
JMX 连接器
Kafka 连接器
系统连接器
SQL 语句
SQL 语句一览
ALTER SCHEMA
ALTER TABLE
CALL
COMMIT
CREATE SCHEMA
CREATE TABLE
CREATE TABLE AS
CREATE VIEW
DEALLOCATE PREPARE
DELETE
DESCRIBE
DESCRIBE INPUT
DESCRIBE OUTPUT
DROP SCHEMA
DROP TABLE
DROP VIEW
EXECUTE
EXPLAIN
EXPLAIN ANALYZE
GRANT
INSERT
PREPARE
RESET SESSION
REVOKE
ROLLBACK
SET SESSION
SHOW CATALOGS
SHOW COLUMNS
SHOW CREATE TABLE
SHOW CREATE VIEW
SHOW FUNCTIONS
SHOW GRANTS
SHOW PARTITIONS
SHOW SCHEMAS
SHOW SESSION
SHOW TABLES
START TRANSACTION
USE
VALUES
SELECT
WITH 子句
GROUP BY 子句
HAVING 子句
集合运算
ORDER BY 子句
LIMIT 子句
TABLESAMPLE
UNNEST
Joins
子查询
常用函数和操作符
Decimal 函数
二进制函数
位运算函数
字符函数
数学函数与运算符
日期时间处理函数
条件表达式
正则表达式
比较函数和运算符
聚合函数
转换函数
逻辑运算符
Flume
Flume 使用说明
Flume 配置说明
使用 LogHub Source 将非 E-MapReduce 集群的数据同步至 E-MapReduce 集群的 HDFS
Kudu
E-MapReduce Kudu使用说明
Sqoop 使用说明
Knox 使用说明
TensorFlow 使用说明
组件授权
HDFS授权
YARN授权
Hive授权
HBase授权
Kafka授权
RANGER
Ranger 简介
HDFS 配置
Hive 配置
HBase 配置
Hive 数据脱敏
Kafka 配置
Spark 配置
Kerberos认证
Kerberos 简介
兼容 MIT Kerberos 认证
RAM认证
LDAP 认证
执行计划认证
跨域互信
开发指南
Python 使用说明
准备
开发准备
OSS 参考使用说明
示例项目使用说明
Spark
准备工作
参数说明
简单操作 OSS 文件
Spark + OSS
Spark + MaxCompute
Spark + MQ
Spark + TableStore
Spark + LogService
开发入门
实时 Spark Streaming 消费示例
离线 Spark 消费示例
Spark + MNS
Spark + HBase
Spark + Kafka
Spark + MySql
Spark-Submit 参数设置说明
Spark Streaming SQL
前言
关键字
流式查询
流式查询配置说明
作业模板
作业模板（新）
DDL概述
SCAN语句
STREAM语句
建表语句
DML概述
INSERT INTO
查询概述
SELECT 语句
WHERE 语句
GROUP BY 语句
JOIN 语句
UNION ALL 语句
窗口函数
窗口函数概述
滚动窗口
滑动窗口
数据源
数据源支持概述
HBase 数据表使用说明
JDBC 数据表使用说明
Kafka 数据表使用说明
Loghub 数据表使用说明
TableStore 数据表使用说明
Druid 数据表使用说明
Redis 数据表使用说明
内建函数
DELAY
Hadoop
参数说明
MapReduce 开发手册
Hive 开发手册
Pig 开发手册
Hadoop Streaming
Hive + TableStore
MR+TableStore
HBase 开发手册
HBase 备份
E-MapReduce 集群运维指南
产品内核增强
JindoFS 基础使用
JindoFS 使用说明（E-MapReduce-3.20.0~3.22.0版本）
JindoFS 使用说明（E-MapReduce-3.22.0及以上版本）
JindoFS 块存储模式
JindoFS 外部客户端
JindoFS 缓存模式
JindoFS 生态
迁移Hadoop文件系统数据至JindoFS
使用MapReduce处理JindoFS上的数据
使用Hive查询JindoFS上的数据
使用Spark处理JindoFS上的数据
使用Flink处理JindoFS上的数据
使用Impala/Presto查询JindoFS上的数据
使用JindoFS作为HBase的底层存储
基于JindoFS存储YARN MR/SPARK作业日志
将Kafka数据导入JindoFS
最佳实践
使用 E-MapReduce 采集 Kafka 客户端 Metrics 数据
使用 E-MapReduce 处理离线作业
使用 E-MapReduce 提交 Storm 作业处理 Kafka 数据
在 E-MapReduce 中使用 ES-Hadoop
在 E-MapReduce中使用 Mongo-Hadoop
在 E-MapReduce 上使用 Intel Analytics Zoo 进行深度学习
SparkSQL 自适应执行
E-MapReduce 数据迁移方案
在阿里云 E-MapReduce 上使用 Data Science 集群进行深度学习
通过Flink作业处理OSS数据
使用 E-MapReduce Hive 关联云 HBase
使用 E-MapReduce 进行 MySQL Binlog 日志准实时传输
Gateway 节点运行 Flume 进行数据同步
OSS 数据权限隔离
在 E-MapReduce 上使用 Sqoop 工具与数据库同步数据进行网络配置
通过Spark Streaming作业处理Kafka数据
通过Kafka Connect进行数据迁移
使用YARN CGroups功能对CPU进行控制测试
API 参考
API概览
调用说明
请求结构
签名机制
公共参数
返回结果
集群
CreateClusterV2
CreateClusterTemplate
CreateClusterWithTemplate
DeleteClusterTemplate
DescribeClusterTemplate
DescribeClusterV2
DescribeEmrMainVersion
DescribeClusterBasicInfo
ListClusterHost
ListClusters
ListClusterTemplates
ListClusterServiceQuickLink
ListClusterHostGroup
ListEmrAvailableConfig
ListEmrAvailableResource
ListEmrMainVersion
ModifyClusterTemplate
ModifyClusterName
ReleaseCluster
ResizeClusterV2
集群服务
ListClusterInstalledService
ListClusterSupportService
ModifyResourcePoolSchedulerType
ModifyResourceQueue
ModifyClusterServiceConfig
CreateResourcePool
CreateResourceQueue
DeleteResourcePool
DeleteResourceQueue
RefreshClusterResourcePool
RunClusterServiceAction
DescribeClusterOperationHostTaskLog
ListClusterOperationHostTask
ListClusterOperationHost
ModifyResourcePool
ListClusterServiceConfigHistory
DescribeClusterServiceConfig
DescribeClusterResourcePoolSchedulerType
ListResourcePool
ListClusterServiceComponentHealthInfo
ListClusterHostComponent
ListClusterOperation
ListClusterService
DescribeClusterService
AddClusterService
DescribeClusterServiceConfigTag
数据开发
CloneFlow
CloneFlowJob
CreateFlowCategory
CreateFlowForWeb
CreateFlowJob
CreateFlowProject
CreateFlowProjectClusterSetting
CreateFlowProjectUser
DeleteFlow
DeleteFlowCategory
DeleteFlowJob
DeleteFlowProject
DeleteFlowProjectClusterSetting
DeleteFlowProjectUser
DescribeFlow
DescribeFlowCategory
DescribeFlowCategoryTree
DescribeFlowInstance
DescribeFlowJob
DescribeFlowNodeInstance
DescribeFlowNodeInstanceContainerLog
DescribeFlowNodeInstanceLauncherLog
DescribeFlowProject
DescribeFlowProjectClusterSetting
KillFlowJob
ListFlow
ListFlowCluster
ListFlowClusterAll
ListFlowClusterAllHosts
ListFlowClusterHost
ListFlowInstance
ListFlowJob
ListFlowJobHistory
ListFlowNodeInstance
ListFlowNodeInstanceContainerStatus
ListFlowNodeSqlResult
ListFlowProject
ListFlowProjectClusterSetting
ListFlowProjectUser
ModifyFlow
ListFlowCategory
ModifyFlowProjectClusterSetting
ModifyFlowCategory
ModifyFlowForWeb
ModifyFlowProject
ModifyFlowJob
RerunFlow
ResumeFlow
SubmitFlow
SubmitFlowJob
SuspendFlow
数据类型
ClusterInfo
EcsInstance
EcsOrder
BootstrapAction
ExecutionPlanInfo
ExecutionPlanInstance
JobInfo
JobInstance
JobInstanceWorker
SoftwareInfo
FailReason
枚举类型
SDK 参考
E-MapReduce SDK 发布说明
创建 AccessKey
Java SDK
SDK 下载
快速开始
示例项目
Python SDK
安装SDK
样例代码
常见问题
E-MapReduce 基本问题
集群创建相关
产品使用相关
作业异常诊断
如何将HiveServer2的认证方式设置为LDAP
如何使用阿里云E-MapReduce HDFS的Balancer功能
执行计划使用
技术运维问题
RDS数据导入时，时间字段显示延时8小时
如何修改Spark服务的spark-env配置
常见错误排除
附录
集群服务管理页面
E-MapReduce版本相关
错误代码表
状态表
集群端口配置
E-MapReduce常用文件路径
通用参考
文档使用指引
文档及使用对象
开源文档说明
内容开源规定
编辑开源文档
使用阿里云管理控制台
地域和可用区
产品使用限制
主账号安全实践
创建AccessKey
备案
词汇表
all-products-head
搜索本产品
搜索本产品
全部产品
E-MapReduce
E-MapReduce
全部产品
产品简介
下载PDF
什么是 E-MapReduce
产品发行版本说明
产品优势
产品架构
使用场景
更多
更少
产品定价
下载PDF
费用组成
包年包月（单位：美元/月/核，不包含ECS价格）
按量计费（单位：美元/小时/核，不包含 ECS 价格）
到期与欠费
续费流程
更多
更少
快速入门
下载PDF
步骤一：选型配置
步骤二：准备工作
步骤三：创建集群
步骤四：创建并运行作业
更多
更少
集群规划与配置
下载PDF
集群规划
集群配置
变更配置
第三方软件
更多
更少
监控与报警
下载PDF
报警管理
更多
更少
数据开发
下载PDF
项目管理
作业编辑
临时查询
工作流编辑
集群模板
云监控事件编码
作业
更多
更少
开源组件介绍
下载PDF
Hue 使用说明
Oozie 使用说明
Zeppelin 使用说明
ZooKeeper 使用说明
Kafka使用说明
Druid 使用说明
Presto
Flume
Kudu
Sqoop 使用说明
Knox 使用说明
TensorFlow 使用说明
组件授权
Kerberos认证
更多
更少
开发指南
下载PDF
Python 使用说明
准备
Spark
Spark Streaming SQL
Hadoop
HBase 开发手册
HBase 备份
E-MapReduce 集群运维指南
更多
更少
产品内核增强
下载PDF
JindoFS 基础使用
JindoFS 生态
更多
更少
最佳实践
下载PDF
使用 E-MapReduce 采集 Kafka 客户端 Metrics 数据
使用 E-MapReduce 处理离线作业
使用 E-MapReduce 提交 Storm 作业处理 Kafka 数据
在 E-MapReduce 中使用 ES-Hadoop
在 E-MapReduce中使用 Mongo-Hadoop
在 E-MapReduce 上使用 Intel Analytics Zoo 进行深度学习
SparkSQL 自适应执行
E-MapReduce 数据迁移方案
在阿里云 E-MapReduce 上使用 Data Science 集群进行深度学习
通过Flink作业处理OSS数据
使用 E-MapReduce Hive 关联云 HBase
使用 E-MapReduce 进行 MySQL Binlog 日志准实时传输
Gateway 节点运行 Flume 进行数据同步
OSS 数据权限隔离
在 E-MapReduce 上使用 Sqoop 工具与数据库同步数据进行网络配置
通过Spark Streaming作业处理Kafka数据
通过Kafka Connect进行数据迁移
使用YARN CGroups功能对CPU进行控制测试
更多
更少
API 参考
下载PDF
API概览
调用说明
集群
集群服务
数据开发
数据类型
枚举类型
更多
更少
SDK 参考
下载PDF
E-MapReduce SDK 发布说明
创建 AccessKey
Java SDK
Python SDK
更多
更少
常见问题
下载PDF
E-MapReduce 基本问题
集群创建相关
产品使用相关
作业异常诊断
如何将HiveServer2的认证方式设置为LDAP
如何使用阿里云E-MapReduce HDFS的Balancer功能
执行计划使用
技术运维问题
RDS数据导入时，时间字段显示延时8小时
如何修改Spark服务的spark-env配置
更多
更少
常见错误排除
下载PDF
附录
更多
更少
免费试用
免费试用