單表即時同步支援即時捕獲DataHub的資料,通過簡單的拖拽配置,即可配置一個即時同步任務。本文介紹在即時同步任務中,將DataHub輸入組件的配置方式。
功能介紹
即時同步任務啟動後會一直運行,等待源端DataHub有資料後進行讀取並寫入目的端。DataHub輸入組件有以下兩個功能:
即時讀取。
根據DataHub Shard個數並發讀取。
操作步驟
進入資料開發頁面。
登入DataWorks控制台,切換至目標地區後,單擊左側導覽列的,在下拉框中選擇對應工作空間後單擊進入資料開發。
滑鼠移至上方至
表徵圖,單擊。 您也可以展開商務程序,按右鍵目標商務程序,選擇。
在建立節點對話方塊中,選擇同步方式為單表(Topic)到單表(Topic)ETL,輸入名稱,並選擇路徑。
單擊確認。
在即時同步節點的編輯頁面,按一下滑鼠並拖拽至編輯面板。
單擊DataHub節點,在節點配置對話方塊中,配置各項參數。

參數
描述
資料來源
選擇已經配置好的DataHub資料來源,此處僅支援DataHub資料來源。
如果未配置資料來源,請單擊右側的建立資料來源,跳轉至頁面進行建立。詳情請參見配置DataHub資料來源。
Topic
選擇當前資料來源下需要同步的Topic。您可以單擊右側的資料預覽進行確認。
使用訂閱模式
如開啟訂閱模式,會自動建立訂閱ID,並使用該ID從DataHub訂閱資料,這可以提高穩定性和效能,請不要在DataHub上刪除正在使用的訂閱ID,否則會造成任務失敗。
輸出欄位
選擇需要同步的欄位。
單擊工具列中的
表徵圖。