DataWorks 支援配置 Apache Gravitino 資料來源,用於對接 Gravitino 統一中繼資料管理服務,實現對多種異構資料來源中繼資料的統一採集與納管。作為一類別中繼資料類資料來源,配置完成後可在資料地圖中進行中繼資料採集與治理。本文將為您介紹該資料來源的具體配置步驟。
功能介紹
Apache Gravitino 是一個開源的統一中繼資料管理架構,支援納管 Hive、Iceberg、JDBC 等多種異構資料來源的中繼資料。通過 Gravitino,企業可以在不改變現有資料存放區架構的前提下,實現跨引擎、跨系統的中繼資料統一管理。
DataWorks 推出 Apache Gravitino 資料來源,旨在將 Gravitino 所納管的中繼資料接入 DataWorks 資料地圖,實現對 Gravitino Catalog 中各類資料資產的中繼資料採集、發現與治理,協助您構建統一的資料資產視圖。
使用限制
網路連通:僅支援使用Serverless資源群組。
適用情境:當前 Apache Gravitino 資料來源僅適用於中繼資料採集與治理,不支援用於Data Integration同步任務。
網路要求:DataWorks 資源群組需要能夠訪問 Gravitino 服務的 Endpoint 地址,請確保網路連通性。
操作步驟
1. 進入資料來源頁面
登入DataWorks控制台,切換至目標地區後,單擊左側導覽列的工作空間,單擊目標工作空間右側的操作欄中的管理按鈕進入管理介面。
進入工作空間管理中心頁面後,單擊左側導覽列的數據源,進入資料來源頁面。
2. 建立 Apache Gravitino 資料來源
在數據源頁面,單擊新增數據源。
在彈出的對話方塊中,單擊中繼資料標籤頁,搜尋並選擇Apache Gravitino。
3. 配置參數
根據介面提示配置以下核心欄位:
欄位 | 說明 |
數據源名稱 | 自訂資料來源名稱,如 |
資料來源描述 | 輸入資料來源的描述資訊,便於標識用途。 |
配置模式 | 選擇資料來源的配置模式。當前支援選擇模式,即通過介面表單填寫配置項。 |
Endpoint | 輸入 Gravitino 服務地址。如 |
4. 連通性測試
資料來源資訊配置完成後,需要經過連通性測試,以保證資料來源和資源群組網路連通正常。
如果顯示可連通,則表示配置無誤。
如果顯示無法連通,系統會彈出診斷工具輔助排查。常見原因包括 Endpoint 配置錯誤、網路不通(IP 白名單未配置)或 NAT Gateway缺失等。
標準模式下,請務必保證開發環境和生產環境均為可連通,否則在後續中繼資料採集等使用中將出錯。