資料品質規則配置流程

更新時間:
Copy as MD

本文為您介紹資料品質監控規則的配置流程及生效邏輯,以及規則列表的相關操作。

規則配置流程

您可基於表配置單個表的資料品質監控規則,也可基於模板,大量設定多個表的資料品質監控規則,具體如下。

  • 基於表配置資料品質監控規則(單個配置監控規則)

    具體配置操作,詳情請參見配置規則:按表(單表)

  • 基於模板配置資料品質監控規則(大量設定監控規則)

    按模板配置品質規則的主要流程如下:

    1. 選擇規則模板並配置校正方式

      內建模板分為表級和欄位級的模板規則,選擇模板後,以待校正的為對象,定義該表資料品質校正規則的校正方式。通過資料品質規則定義對該表資料的具體校正方式,從而確定表資料是否符合預期。

    2. 大量新增需要規則校正的表或欄位

      選擇待批量校正的表或欄位,將規則模板應用到目標表或欄位上。

    3. 建立或關聯品質監控

      以校正的表的具體數據範圍為對象(如分區表的具體分區),通過品質規則關聯品質監控的方式,定義對象資料需要進行哪些品質規則校正。

    具體配置操作,詳情請參見配置規則:按模板(批量)

    說明

    支援大量設定多個表品質規則。

進入規則列表

  1. 進入資料品質頁面。

    登入DataWorks控制台,切換至目標地區後,單擊左側導覽列的數據治理 > 數據品質,在下拉框中選擇對應工作空間後單擊進入數據品質

  2. 在左側導覽列選擇質量資產 > 規則列表,進入資料品質監控規則列表頁面。

查看規則列表

序號

功能

描述

資料庫選擇

您可以根據需要先選擇待查看規則列表所在的資料庫。

②③

過濾項

您可以通過篩選條件過濾需要查詢的品質規則。

您可以根據表名規則模版配置來源質量維度重要程度啟用狀態關聯範圍關聯調度等條件進行精確篩選。

品質規則列表

為您展示ID/規則名稱質量維度表名關聯範圍規則模版監控閾值質檢任務數據範圍重要程度啟用狀態關聯調度等品質規則詳細資料,同時您可以在操作列對規則進行修訂告警訂閱刪除或查看操作日誌等操作。

  • 告警訂閱:單擊後可快速訂閱規則的校正結果。支援通過郵件通知郵件和簡訊通知DingTalk群機器人DingTalk群機器人@ALL飛書群機器人企業微信機器人自定義Webhook電話等方式發送警示資訊。

  • 操作日誌:可查看資料品質規則動作記錄。

大量操作

您可以批量選擇規則,進行關聯調度訂閱管理、批量啟用、批量停用和批量刪除等操作。