Data Integration支援資料同步解決方案功能,您可以通過配置同步規則,一次性即時同步或離線同步資料至相應的資料來源中。同步解決方案支援整庫內批量同步多張表,也支援全量、增量資料一體化同步,先同步全量資料,再即時同步增量資料。
進入同步解決方案頁面
- 選擇工作空間所在地區後,單擊相應工作空間後的進入Data Integration。
- 在左側導覽列,單擊同步任務,進入解決方案工作清單頁面。您可以在該頁面建立同步解決方案,或查看已建立的方案及當前執行的狀態。建立同步解決方案時,您可以根據需要選擇對應的資料同步解決方案,詳情可參見下文的選擇同步方案。查看同步解決方案狀態時,包括以下狀態:
- 未運行:任務未開始執行。您可以單擊相應方案後的開始執行,執行當前方案。 說明 僅單擊未運行狀態後的任務配置,您可以編輯任務。其它狀態下的任務配置頁面,僅支援查看。
- 運行中:任務在運行中,無法終止。您需要等待任務執行結束。
- 異常:任務出錯,無法正常運行。此時您需要單擊相應任務後的執行詳情進行排查。
- 成功:任務成功運行。您可以單擊相應任務後的執行詳情,查看運行結果。
- 未運行:任務未開始執行。您可以單擊相應方案後的開始執行,執行當前方案。
選擇同步方案
- 在同步解決方案頁面的右上方單擊建立任務。
- 在建立任務頁面選擇資料同步的來源與去向後,選擇可用的同步方案。支援的來來源資料源與去向資料來源,可參見Data Integration側同步任務能力說明,當前支援的同步方案如下所示。
根據資料同步的目的資料來源類型進行分類,當前DataWorks資料同步支援以下幾種資料同步方案:- 同步資料至DataHub:當前支援的資料同步解決方案為一鍵即時同步至DataHub。
- 同步資料至Elasticsearch:當前支援的資料同步解決方案為一鍵即時同步至Elasticsearch。
- 同步資料至Hologres:當前支援的資料同步解決方案為一鍵即時同步至Hologres。
- 同步資料至AnalyticDB MySQL3.0:當前支援的資料同步解決方案為一鍵即時同步至AnalyticDB MySQL3.0。
- 同步資料至Kafka:當前支援的資料同步解決方案為一鍵即時同步至Kafka。
- 同步資料至MaxCompute:當前支援的資料同步解決方案為
- 一鍵即時同步至MaxCompute
- 整庫離線同步至MaxCompute(周期性全量)
- 整庫離線同步至MaxCompute(周期性增量)
- 整庫離線同步至MaxCompute(一次性全量)
- 整庫離線同步至MaxCompute(一次性增量)
- 整庫離線同步至MaxCompute(一次性全量周期增量)