中繼資料中心負責從各業務系統中抽取、加工、集中儲存和管理中繼資料,以支援資料治理,並加強組織內部資料的組織、檢索和分析能力。
前提條件
預設支援關係型資料庫的中繼資料採集,如需採集其他資料來源類型,請增購對應功能。
V5.3版本之前,部分資料來源需要先在元倉租戶中完成中繼資料中心初始化配置才可採集,包括AnalyticDB for MySQL 3.0、PolarDB-X(原DRDS)、SAP HANA、Hologres;V5.3及之後版本,無需進行中繼資料中心初始化配置,可直接開始配置採集任務。
僅元倉租戶的引擎為MaxCompute、Hadoop或星環TDH 9.3.x時,可進行中繼資料中心初始化配置。
許可權說明
僅超級管理員、系統管理員和具有中繼資料功能查看許可權的全域自訂角色支援查看中繼資料相關的菜單。
中繼資料介紹
中繼資料是描述資料特徵的資訊,它提供了關於資料的內容、來源、格式和結構等詳細描述,有時被稱為“資料的資料”。中繼資料的作用在於使資料更易於理解、管理和使用,它協助使用者識別和定位特定資料集,支援資料的組織和檢索,同時,中繼資料還促進了資料的一致性和可交換性,為資料治理合規性和資料品質管理提供了基礎。通過中繼資料,組織可以有效地監控和分析其資料資產,以實現更好的決策支援和業務洞察。
中繼資料分類
中繼資料根據用途分為技術中繼資料(Technical Metadata)、業務中繼資料(Business Metadata)和管理中繼資料(Management Metadata)。
技術中繼資料是儲存關於資料倉儲系統技術細節的資料,並用於開發和管理資料倉儲。在Dataphin中,技術中繼資料即為技術資產,顯示資料板塊、主題域、專案、儲存類型、儲存格式、生命週期等資訊。
業務中繼資料從業務角度描述了資料倉儲中的資料,它提供了介於使用者和實際系統之間的語義層,使得不懂電腦技術的業務人員也能夠讀懂資料倉儲中的資料。
管理中繼資料是對所涉及的技術中繼資料、業務中繼資料採用科學有效機制進行梳理、整合及管理,並對相關業務、開發等使用者提供中繼資料服務,以滿足不同使用者的業務需求情境,為企業的業務系統和資料分析的開發、維護等過程提供支援。
中繼資料入口
在Dataphin首頁的頂部功能表列,選擇治理 > 中繼資料。
在中繼資料頁面,左側導覽列為您展示各個功能的入口。
一級菜單
二級菜單
說明
中繼資料採集
採集概覽
中繼資料支援豐富的採集源類型,如傳統資料庫MySQL、Oracle,巨量資料儲存Hive、Hologres等,可一覽不同資料來源類型已建立的採集任務、已建立的資料來源、採集物件類型和支援的版本。
採集任務
通過採集適配器串連到指定的資料來源,將來源資料庫中的對象中繼資料資訊採集至Dataphin,通過內建解析器進行解析後儲存並進行統一呈現。
採集執行個體
是採集任務根據定時調度時間或手動運行任務產生的執行個體任務。
中繼資料管理
業務系統中繼資料
以列表形式為您展示採集到的中繼資料資訊,您可以從不同視角出發查詢資料。
通用配置
業務系統
配置從指定來源採集的中繼資料歸屬的業務系統,後續可用於資產清單及目錄的對象篩選、業務系統血緣關係展示等情境。
資料探查
配置可開啟自動探查的資料表範圍,管控資料探查記錄保留時間長度、全域最多同時啟動並執行探查任務數量、探查任務執行逾時時間及set參數,從而更合理地運用資源。