DataWorks 支持配置 Apache Gravitino 数据源,用于对接 Gravitino 统一元数据管理服务,实现对多种异构数据源元数据的统一采集与纳管。作为一类元数据类数据源,配置完成后可在数据地图中进行元数据采集与治理。本文将为您介绍该数据源的具体配置步骤。
功能介绍
Apache Gravitino 是一个开源的统一元数据管理框架,支持纳管 Hive、Iceberg、JDBC 等多种异构数据源的元数据。通过 Gravitino,企业可以在不改变现有数据存储架构的前提下,实现跨引擎、跨系统的元数据统一管理。
DataWorks 推出 Apache Gravitino 数据源,旨在将 Gravitino 所纳管的元数据接入 DataWorks 数据地图,实现对 Gravitino Catalog 中各类数据资产的元数据采集、发现与治理,帮助您构建统一的数据资产视图。
使用限制
网络连通:仅支持使用Serverless资源组。
适用场景:当前 Apache Gravitino 数据源仅适用于元数据采集与治理,不支持用于数据集成同步任务。
网络要求:DataWorks 资源组需要能够访问 Gravitino 服务的 Endpoint 地址,请确保网络连通性。
操作步骤
1. 进入数据源页面
登录DataWorks控制台,切换至目标地域后,单击左侧导航栏的工作空间,单击目标工作空间右侧的操作栏中的管理按钮进入管理界面。
进入工作空间管理中心页面后,单击左侧导航栏的数据源,进入数据源页面。
2. 新建 Apache Gravitino 数据源
在数据源页面,单击新增数据源。
在弹出的对话框中,单击元数据标签页,搜索并选择Apache Gravitino。
3. 配置参数
根据界面提示配置以下核心字段:
字段 | 说明 |
数据源名称 | 自定义数据源名称,如 |
数据源描述 | 输入数据源的描述信息,便于标识用途。 |
配置模式 | 选择数据源的配置模式。当前支持选择模式,即通过界面表单填写配置项。 |
Endpoint | 输入 Gravitino 服务地址。如 |
4. 连通性测试
数据源信息配置完成后,需要经过连通性测试,以保证数据源和资源组网络连通正常。
如果显示可连通,则表示配置无误。
如果显示无法连通,系统会弹出诊断工具辅助排查。常见原因包括 Endpoint 配置错误、网络不通(IP 白名单未配置)或 NAT 网关缺失等。
标准模式下,请务必保证开发环境和生产环境均为可连通,否则在后续元数据采集等使用中将出错。