通過建立達夢(DM)資料來源能夠實現Dataphin讀取達夢(DM)的業務資料或向達夢(DM)寫入資料。本文為您介紹如何建立達夢(DM)資料來源。
背景資訊
達夢(DM)屬於OLTP類型資料庫,被整合在業務系統中。達夢(DM)資料庫吸收借鑒當前先進新技術思想與主流資料庫產品的優點,融合了分布式、彈性計算與雲端運算的優勢,具有靈活性、易用性、可靠性、高安全性等特點。如果您使用的是達夢(DM),在匯出Dataphin資料至達夢(DM),您需要先完成達夢(DM)資料來源的建立。
許可權說明
僅支援擁有建立資料來源許可權點的自訂全域角色和超級管理員、資料來源管理員、板塊架構師、專案系統管理員系統角色建立資料來源。
操作步驟
在Dataphin首頁的頂部功能表列中,選擇管理中心 > 資料來源管理。
在資料來源頁面,單擊+建立資料來源。
在建立資料來源頁面的關係型資料庫地區,選擇達夢(DM)。
如果您最近使用過達夢(DM),也可以在最近使用地區選取項目達夢(DM)。同時,您也可以在搜尋方塊中,輸入DM的關鍵詞,快速搜尋。
在建立DM資料來源頁面中,配置串連資料來源參數。
配置資料來源的基本資料。
參數
描述
資料來源名稱
命名規則如下:
只能包含中文、英文字母大小寫、數字、底線(_)或短劃線(-)。
長度不能超過64個字元。
資料來源編碼
配置資料來源編碼後,您可以在Flink_SQL任務中通過
資料來源編碼.表名稱或資料來源編碼.schema.表名稱的格式引用資料來源中的表;如果需要根據所處環境自動訪問對應環境的資料來源,請通過${資料來源編碼}.table或${資料來源編碼}.schema.table的變數格式訪問。更多資訊,請參見Dataphin資料來源表開發方式。重要資料來源編碼配置成功後不支援修改。
資料來源編碼配置成功後,才能在資產目錄和資產清單的對象詳情頁面進行資料預覽。
Flink SQL中,目前僅支援MySQL、Hologres、MaxCompute、Oracle、StarRocks、Hive、SelectDB資料來源。
資料來源描述
對資料來源的簡單描述。不得超過128個字元。
資料來源配置
選擇需要配置的資料來源:
如果業務資料來源區分生產資料來源和開發資料來源,則選擇生產+開發資料來源。
如果業務資料來源不區分生產資料來源和開發資料來源,則選擇生產資料來源。
標籤
您可根據標籤給資料來源進行分類打標,如何建立標籤,請參見管理資料來源標籤。
配置資料來源與Dataphin的串連參數。
若您的資料來源配置選擇生產+開發資料來源,則需配置生產+開發資料來源的串連資訊。如果您的資料來源配置為生產資料來源,僅需配置生產資料來源的串連資訊。
說明通常情況下,生產資料來源和開發資料來源需配置為非同一個資料來源,以實現開發資料來源與生產資料來源的環境隔離,降低開發資料來源對生產資料來源的影響。但Dataphin也支援配置成同一個資料來源,即相同參數值。
參數
描述
串連方式
支援單機和負載平衡方式進行串連。請根據您的DM資料來源部署方式進行選擇。
JDBC URL
填寫資料來源的JDBC URL地址。
單機:預設格式為
jdbc:dm://{伺服器位址}:{連接埠}/{資料庫名稱}。負載平衡:若您的達夢(DM)資料來源為叢集模式,支援填寫叢集模式地址。格式為
jdbc:dm://servicename?servicename=({伺服器位址}:{連接埠},{伺服器位址}:{連接埠})&LOGIN_MODE={登入模式編碼}。
Schema
Schema為必填項,在達夢(DM)資料庫中,一個使用者名稱下存在預設建立的使用者名稱同名Schema與手動建立的Schema。
使用者名稱、密碼
登入資料庫的使用者名稱和密碼。
SSL加密
若需要通過SSL進行加密串連,需要開啟SSL加密並上傳keystore認證和填寫keystore認證密碼。
配置資料來源的進階設定。
參數
描述
connectTimeout
資料庫的connectTimeout時間長度(單位:毫秒),預設900000毫秒(15分鐘)。
說明若您在JDBC URL中帶有connectTimeout配置,則connectTimeout為JDBC URL中配置的逾時時間。
Dataphin V3.11版本之前的建立資料來源,connectTimeout預設為
-1,表示無逾時限制。
socketTimeout
資料庫的socketTimeout時間長度(單位:毫秒),預設1800000毫秒(30分鐘)。
說明若您在JDBC URL中帶有socketTimeout配置,則socketTimeout為JDBC URL中配置的逾時時間。
Dataphin V3.11版本之前的建立資料來源,socketTimeout預設為
-1,表示無逾時限制。
串連重試次數
資料庫連接逾時,將自動重試串連直到完成設定的重試次數。若達最大重試次數仍未串連成功,則串連失敗。
說明預設重試次數為1次,支援配置0~10之間參數。
串連重試次數將預設應用於離線整合任務與全域品質(需開通資產品質功能模組),離線整合任務中支援單獨配置任務層級的重試次數。
選擇預設資源群組,該資源群組用於運行與當前資料來源相關任務,包括資料庫SQL、離線整庫遷移、資料預覽等。
進行測試連接或直接單擊確定進行儲存,完成達夢(DM)資料來源的建立。
單擊測試連接,系統將測試資料來源是否可以和Dataphin進行正常的連通。若直接單擊確定,系統將自動對所有已選中的叢集進行測試連接,但即使所選中的叢集均串連失敗,資料來源依然可以正常建立。