Spark Shell作业配置

本文介绍如何配置Spark Shell类型的作业。

1. 通过主账号登录阿里云 E-MapReduce 控制台。
2. 单击上方的数据开发页签。
3. 在项目列表页面，单击对应项目所在行的作业编辑。
4. 在页面左侧，在需要操作的文件夹上单击右键，选择新建作业。
   说明 您还可以通过在文件夹上单击右键，进行新建子文件夹、重命名文件夹和删除文件夹操作。
5. 输入作业名称和作业描述，选择Spark Shell作业类型。
   表示创建的作业是一个Spark Shell作业。
6. 单击确定。
7. 在作业内容中，输入Spark Shell命令后续的参数。

   示例如下：

   val count = sc.parallelize(1 to 100).filter { _ =>
     val x = math.random
     val y = math.random
     x*x + y*y < 1
   }.count()println(s"Pi is roughly ${4.0 * count / 100}")

8. 单击保存，作业配置即定义完成。