阿里云对象存储OSS(Object Storage Service)是阿里云提供的海量、安全、低成本、高持久的云存储服务。本文介绍在数据管理DMS中录入对象存储OSS的方法。

前提条件

操作步骤

  1. 登录数据管理DMS 5.0
    说明 如果您需要切换到旧版数据管理DMS,单击页面右下角返回旧版,进入数据管理DMS平台。具体操作,请参见数据管理DMS 5.0切换至旧版
  2. 在页面左上角,单击新增实例/批量录入
  3. 新增实例对话框中,单击文件存储
  4. 单击OSS
  5. 录入对象存储OSS的信息。
    类别 配置项 说明
    基本信息 数据来源 选择数据来源。此处已默认选中文件寄存
    文件类型 选择文件类型,此处已默认选择OSS
    实例地区 选择OSS所在的地域,在目标Bucket详情页查看。
    录入方式 目前只支持通过连接串地址录入,即外网访问的方式录入。
    连接串地址 输入OSS的外网Endpoint,选择实例地区后自动输入。
    说明 查看OSS的外网Endpoint,请参见访问域名和数据中心
    Bucket 输入OSS的Bucket名称。
    说明 您在创建Bucket时输入的Bucket名称。
    AccessKey ID 输入云账号AccessKey中用于标识用户的AccessKey ID。
    说明 获取AccessKey的方法,请参见获取AccessKey
    AccessKey Secret 输入云账号AccessKey中用于验证用户的密钥AccessKey Secret。
    说明 获取AccessKey的方法,请参见获取AccessKey
    管控模式 OSS当前只支持自由操作模式。
    高级信息 环境类型 选择OSS的环境类型。
    说明 详细信息,请参见实例环境类型说明
    实例名称 自定义实例的名称。
    实例DBA 实例DBA下拉列表中,选择一个DBA角色,用于后期权限申请等流程。
    查询超时时间(s) 保持默认。
    导出超时时间(s) 保持默认。
  6. 单击左下角的测试连接
  7. 测试连接成功后,在成功对话框中,单击确认
    说明 如果测试连接失败,请按照报错提示检查您录入的实例信息。
  8. 单击提交
    至此对象存储OSS已经成功录入到DMS中。OSS支持的功能如下:
    • 管理实例:在DMS首页的左侧实例列表或数据资产 > 实例管理中,查看并管理您的实例。
    • 查看数据:在DMS首页的左侧实例列表中,双击OSS的Bucket名称,查看OSS中的文件夹和文件。
    • 离线集成:离线集成中的数据输出任务节点已支持OSS,具体请参见创建数据流
    • 任务编排:任务编排中的跨库Spark SQL任务节点已支持OSS,具体请参见配置跨库Spark SQL节点