全部產品
Search
文件中心

Dataphin:大量匯入匯出資料標準

更新時間:Mar 06, 2025

支援通過Excel大量匯入或匯出資料標準,提升配置效率。本文為您介紹如何大量設定資料標準。

使用限制

單個標準集下可建立的標準個數不超過1000個。

許可權說明

  • 超級管理員、資料標準管理員可以在所有標準集下大量匯入資料標準。

  • 標準集維護人員及標準整合員可以在已加入的標準集下大量匯入資料標準。

  • 所有成員均可以匯出具有查看許可權的資料標準。

大量匯入標準

說明

大量匯入不支援匯入智能映射配置和監控配置。

  1. 在Dataphin首頁,在頂部功能表列選擇治理 > 資料標準

  2. 單擊左側導覽列的資料標準,在標準列表頁面的全部資料標準地區中,單擊大量匯入匯出,選擇大量匯入標準

  3. 大量匯入資料標準對話方塊中,配置相關參數。

    參數

    描述

    標準模板

    請選擇需要匯入的資料標準引用的標準模板。不同標準模板填寫規範不同,如需基於多個模板匯入,請分次上傳。

    模板類型

    支援新增更新兩種匯入模板。

    • 新增類型模板:僅包含需要配置的標準資訊表頭;您也可以預配置部分資訊產生模板的預填內容,降低填寫成本。

    • 更新類型模板:需要設定匯出的標準範圍,匯出檔案將包含所有已選中待更新的資料標準配置資訊,您只需要修改需要修訂的資訊,再重新匯入即可,無需全部重新設定。

    說明
    • 選擇的模板類型僅影響模板檔案的產生,不影響匯入校正。匯入時將根據標準ID是否為空白決定是新增還是更新。

    • 僅支援更新有編輯許可權且為可編輯狀態的標準,匯出的更新模板將對選中的資料標準範圍進行過濾。

    • 新增資料標準時,系統不會自動建立落標監控規則,您可以在編輯標準時,選中對應的落標監控配置。

    STEP 1 下載配置模板--新增

    所屬標準集標準負責人生效時間

    支援提前配置所屬標準集標準負責人生效時間資訊並產生模板的預填內容,降低填寫成本。

    • 所屬標準集:支援選擇當前帳號有建立資料標準許可權的標準集。如果暫未確定歸屬的標準集,您也可以在設定檔中手動填寫每個標準歸屬的標準集ID。單次可選擇的標準集個數不超過20個,若選擇的標準集過多,可能會超出Excel下拉選項字元限制而無法展示下拉選項,此時您需要自行輸入。

    • 標準負責人:支援選擇當前租戶下正常使用的使用者。若選擇的使用者名稱過多,可能會超出Excel下拉選項字元限制而無法展示下拉選項,此時您需要自行輸入。

    • 生效時間:支援設定標準的生效時間。

      • 永久:生效時間列值為空白(表示永久生效)。

      • 自訂:在指定的時間段內生效。超過指定的時間段,標準會變為已失效狀態,如果需要繼續使用該標準,您可以修改生效時間後重新發布。

    配置模板

    根據所選的標準模板產生需要配置的資訊列,點擊產生模板,產生.xlsx格式的模板檔案。

    說明
    • 若沒有模板,可點擊檔案名稱或下載image表徵圖下載.xlsx檔案;若已有模板,可直接執行上傳設定檔並匯入。

    • 僅支援在具有建立資料標準許可權的標準集下大量匯入,請填寫具有對應許可權的標準集ID,避免許可權校正不通過而匯入失敗。

    STEP 1 下載配置模板--更新

    所屬標準集標準狀態

    如需產生更新類型的模板,可通過所屬標準集標準狀態篩選需要匯出更新標準範圍。

    • 所屬標準集:單次選擇的標準集個數不超過20個。若選擇的標準集過多,產生模板後可能導致可選項為空白。

    • 標準狀態:支援選擇匯入資料標準的狀態。可選擇已生效待生效修訂中草稿已失效狀態的資料標準。

    配置模板

    根據所選的標準範圍、標準狀態產生,點擊產生模板,產生.xlsx格式的模板檔案。

    說明
    • 若沒有模板,可點擊檔案名稱或下載image表徵圖下載.xlsx檔案;若已有模板,可直接執行上傳設定檔並匯入。

    • 僅支援在有建立資料標準許可權的標準集下大量匯入,請填寫有對應許可權的標準集ID,避免許可權校正不通過而匯入失敗。

    STEP 2 上傳設定檔

    上傳檔案

    • 填寫模板時,請按照標準集的屬性欄位定義填寫,匯入處理程序中將基於屬性定義進行唯一性、規範性校正。

    • 僅能選擇單個工作表的.xlsx類型的檔案,最多支援10000行,即10000個標準(不包括標題)。

    • 檔案大小不超過20M。

    • 標題列:展示列名稱、屬性說明,必填屬性,用紅色*標識。

    • 標準ID:不可刪除,用於唯一識別標準的對象。可為空白,為空白則視為新增標準處理。

    • 所屬標準集ID:僅支援在有建立資料標準許可權的標準集下大量匯入,請填寫有對應許可權的標準集ID(可以在標準集列表查詢),避免因許可權校正不通過而匯入失敗。

    • 若屬性欄位類型為日期時間型,支援yyyy/MM/dd、yyyyMMdd、yyyy-MM-dd、hh:mm和hh:mm:ss五種格式。

    • 若某個屬性配置為範圍值,則填寫方式如下:

      • 若設定的是枚舉值輸入,則以英文半形逗號作為分隔字元解析輸入的內容,配置格式為:F,M。

      • 若設定的是引用碼錶,需要填寫碼錶編碼。配置格式為:date001。

      • 若設定的是區間值,起始值和結束值用英文半形逗號分隔,設定了雙邊,配置格式為:>=a,<b。設定了單邊,配置格式為:<=b。

      • 若設定的是資料類型,輸入值需在枚舉範圍內,帶有長度或精度的,配置格式為:CHAR(20),VARCHAR(20),DECIMAL[38, 18]。

    • 開始生效時間和結束生效時間為空白,則有效期間視為永久。

    • 如果存在標準屬性引用了Dataphin系統屬性,資料板塊和專案請填寫對象英文名,使用者和使用者組請填寫對象名稱;多個屬性值之間用半形逗號分隔。

    • 如果某個屬性的填寫方式為暫不指定類型的範圍值,需要先指定範圍實值型別,再填寫具體的屬性值。

    • 如果本次匯入選擇的標準模板配置了基於規則自動產生標準編碼,您需要配置編碼匯入方式,支援以設定檔為準匯入或基於編碼規則重建。

    • 請填寫資料分級的名稱,便於業務人員瞭解相關資訊。例如:機密資料。

    • 請填寫資料分類的路徑,可在資料安全中快捷查詢該資料分類。例如:/個人資訊/個人基本資料/姓名。

    STEP 3 匯入配置

    衝突處理

    • 校正欄位:標準名稱(標準集內唯一,不區分大小寫)。該欄位是唯一識別標準的欄位,如果該欄位重複,將按照配置的重複處理策略進行匯入。

    • 重複處理策略:針對匯入的標準名稱和已有標準的名稱重複時的處理策略。支援重複則跳過重複則覆蓋更新兩種處理方式。

      • 重複則跳過:如果匯入的標準名稱和已有標準的名稱重複,則跳過記錄不處理。

      • 重複則覆蓋更新:如果匯入的標準名稱和已有標準的名稱重複,匯入成功後原有記錄會被刪除。

        說明
        • 衝突檢測僅針對標準ID為空白的記錄生效。如果根據ID找不到對應的標準,則視為校正不通過,匯入異常。

        • 標準名稱在所屬標準集下唯一,如果匯入的標準名稱和已存在的標準名稱重複,或者單次匯入中有多條記錄的標準名稱重複,會按照處理策略跳過記錄不處理,或者以新記錄覆蓋原有對象。

    標準編碼值

    當選擇的標準模板編碼配置為基於規則自動產生時,需要配置編碼值的匯入策略。可以選擇以設定檔為準匯入基於編碼規則重建(忽略匯入檔案中的編碼值配置)2種匯入方式。

    • 以設定檔為準匯入:請填寫編碼值。

    • 基於編碼規則重建:當模板類型為新增時,匯入標準流程中,編碼值將按照規則重建;當模板類型為更新時,匯入標準流程中,更新標準不修改編碼值。

  4. 單擊開始匯入,在匯入結果對話方塊可執行以下操作。

    參數

    描述

    匯入結果

    可查看匯入進度執行時間匯入成功數

    異常記錄

    • 如果匯入處理程序中出現解析或校正失敗等異常情況,則為您展示匯入異常的記錄,包括記錄在原始檔案中對應的行號標準名稱標準編碼異常提示

    • 異常記錄頁簽中,可單擊下載異常記錄,將對應的原始記錄下載成Excel檔案。

    跳過記錄

    • 如果在匯入處理程序中出現名稱相同的標準,則會為您展示匯入跳過的記錄,包括記錄在原始檔案中對應的行號標準名稱標準編碼負責人

    • 跳過記錄頁簽中,可單擊下載跳過記錄,將對應的原始記錄下載成Excel檔案。

    執行日誌

    可查看匯入處理程序的執行日誌並複製。

    匯入完成後,若您想快速查看匯入結果,可關閉匯入配置彈框,關閉彈框不會終止匯入任務的執行。您可以在標準列表,單擊大量操作記錄,在大量匯入頁簽查看歷史匯入記錄,詳情請參見大量操作記錄

大量匯出標準

說明
  • 匯出的檔案格式為.xlsx,每個標準屬性為1列,每個標準模板為1個獨立檔案。

  • 僅支援匯出有查看許可權的資料標準,不支援匯出監控配置、關聯資訊等。

  • 如果匯出的資料標準內容較多,檔案產生需要等待一段時間,您可以在大量匯出頁簽查看歷史匯出記錄,詳情請參見大量匯出

資料標準的大量匯出入口不同,所配置的資訊有所差異。

入口

差異描述

從全部標準列表或標準模板列表進入

無預設填充,需配置標準集、標準模板等資訊。

從資料標準列表的單個標準集進入

標準範圍預設填充當前標準集,您也可重新選擇標準集。

從標準集的操作列進入

標準範圍預設填充當前標準集,您也可重新選擇標準集。

  1. 標準列表頁面,單擊大量匯入匯出,選擇大量匯出標準

  2. 大量匯出資料標準對話方塊,支援按照標準範圍、標準狀態和標準模板篩選匯出標準。

    參數

    描述

    所屬標準集

    請選擇資料標準歸屬的標準集,支援選擇全部標準、指定範圍。

    • 全部標準:相當於選中當前帳號有查看許可權的所有標準集。

    • 指定範圍:選擇需要匯出的標準集,支援選擇不超過20個標準集。

    標準模板

    請選擇匯出標準的模板,支援多選,不超過100個。

    標準狀態

    請選擇需要匯出資料標準的狀態,支援多選,可選擇已生效待生效發布中修訂中草稿已失效全部狀態的標準。

  3. 單擊確定,完成資料標準的匯出,稍後可在標準大量操作記錄-大量匯出記錄中下載產生的匯出檔案。

大量操作記錄

您可在大量操作記錄彈框查看標準大量匯入匯出記錄以及其他動作記錄。

大量匯入操作記錄

  1. 標準列表頁面,單擊大量匯入匯出按鈕,選擇大量操作記錄

    說明

    僅保留最近15天且最多保留1000條匯入記錄。

  2. 資料標準大量操作記錄彈框中,您可以查看資料標準的匯入記錄,包括序號、標準模板、建立人、狀態、建立時間、結束時間資訊。同時,您可以單擊操作列下的查看image.png表徵圖和查看匯入配置image.png表徵圖,查看該條匯入記錄的匯入詳情和匯入配置資訊。

    image

大量匯出操作記錄

  1. 標準列表頁面,單擊大量匯入匯出按鈕,選擇大量操作記錄

    說明

    支援下載匯出成功的檔案且匯出的檔案將保留7天。

  2. 資料標準大量操作記錄彈框中,您可以查看資料標準的匯出記錄,包括序號、建立人、匯出範圍、狀態、建立時間、結束時間資訊。同時,您可以單擊操作列下的下載image表徵圖,將標準下載至本地。

    image

其他動作記錄

  1. 標準列表頁面,單擊大量匯入匯出按鈕,選擇大量操作記錄

  2. 資料標準大量操作記錄彈框中,單擊其他動作,查看大量操作資料標準的記錄。

    image

    地區

    描述

    篩選區域

    您可根據我操作的操作人操作類型操作結果篩選操作記錄。

    列表區

    為您展示操作的類型、操作人、操作時間、操作對象數、操作結果資訊。同時,您可以單擊操作列下的查看表徵圖,查看操作執行結果詳情。

    • 操作對象數:每次操作所選中的資料標準數量。

    • 查看:可查看標準的操作結果詳情。

      • 成功記錄:為您展示資料標準名稱/標準集、標準編碼/ID資訊。

      • 異常記錄:為您展示資料標準名稱/標準集、標準編碼/ID、異常提示資訊。

      • 跳過記錄:為您展示資料標準名稱/標準集、標準編碼/ID、跳過原因資訊。

後續步驟

標準匯入後,您可在標準列表管理資料標準。詳情請參見標準列表