全部產品
Search
文件中心

:資源規劃與配置

更新時間:Jun 19, 2024

當前使用DataWorks的即時資料同步任務同步資料時,僅支援使用獨享Data Integration資源群組。本文為您介紹使用即時資料同步任務同步資料時,需要使用的資源及相關配置。

背景資訊

  • 資源準備與規劃:

    使用即時資料同步任務同步資料時,當前僅支援使用獨享Data Integration資源群組。因此,在進行資料同步前,您需要購買獨享Data Integration資源群組,並將資源群組添加至DataWorks中,便於後續同步任務使用。

    獨享Data Integration資源群組的詳細介紹可參見獨享Data Integration資源群組

  • 網路聯通:

    獨享Data Integration資源群組本質上為一組資源執行個體,購買添加完成後的初始狀態下,與其他產品的網路並不聯通,因此您需要為獨享Data Integration資源群組綁定網路環境,為後續與資料來源進行資料同步做好網路聯通的準備。

購買獨享Data Integration資源群組

  1. 登入DataWorks控制台
  2. 選擇相應地區後,在左側導覽列,單擊資源群組列表
  3. 獨享資源群組頁面,單擊建立獨享資源群組
  4. 建立獨享資源群組對話方塊中,單擊訂單號後的購買,跳轉至購買頁面。
  5. 進入購買頁面後,請根據實際需要,選擇相應的地區獨享資源類型資源數量計費周期,單擊立即購買
    說明 此處的獨享資源類型選擇獨享Data Integration資源
  6. 確認訂單資訊無誤後,勾選《DataWorks獨享資源(訂用帳戶)服務合約》,單擊去支付

新增獨享Data Integration資源群組

  1. 資源群組列表 > 獨享資源群組頁面,單擊建立獨享資源群組
  2. 建立獨享資源群組對話方塊中,配置各項參數。
    參數描述
    資源群組類型資源的使用類型。獨享資源套件括獨享調度資源獨享Data Integration資源兩種類型,分別適用於通用任務調度和資料同步任務專用。
    資源群組名稱資源的名稱,租戶內唯一,請避免重複。
    說明 租戶即主帳號,一個租戶(主帳號)下可以有多個使用者(子帳號)。
    資源群組備忘對資源進行簡單描述。
    訂單號此處選擇購買的獨享資源訂單。如果沒有購買,請單擊購買,跳轉至售賣頁進行購買。
  3. 配置完成後,單擊確定
    說明 獨享資源在20分鐘內完成環境初始化,請耐心等待其狀態更新為運行中

網路設定

獨享資源部署在DataWorks託管的Virtual Private Cloud中,與其他網路環境不連通。使用獨享資源時,您需進行網路設定,為獨享資源綁定一個可與資料來源連通的VPC,通過此VPC實現與資料來源網路連通。

  1. 單擊相應資源後的網路設定
    說明 綁定VPC前,您需要進行RAM授權,讓DataWorks擁有訪問雲資源的許可權。
  2. 綁定Virtual Private Cloud
    1. 單擊專用網路綁定頁面左上方的新增綁定,在新增專用網路綁定對話方塊中,配置各項參數,不同網路環境下各參數的配置說明如下。
      參數說明如下:
      參數配置說明(資料來源與獨享資源在同一VPC)配置說明(資料來源與獨享資源不在同一VPC)
      專用網路如果您的資料來源在阿里雲VPC的網路環境中,建議配置為資料來源所在的VPC。如果您的資料來源與獨享資源不在同一VPC,例如,資料來源不在阿里雲VPC網路環境中,或需要將資料來源與獨享Data Integration資源分別部署在不同VPC網路中時,您可單擊建立專用網路,為獨享資料資源建立一個VPC。建立完成後這裡配置為建立的VPC。
      交換器專用網路配置為資料來源所在VPC時,建議選擇與資料來源綁定的交換器。專用網路配置為其他VPC,或沒有可用交換器時,可單擊建立交換器,為獨享資源群組單獨建立一個交換器。建立完成後這裡配置為建立的交換器。
      說明 此種情境下,後續還需配置交換器路由,保障獨享Data Integration資源與資料來源之間網路連通。
      安全性群組安全性群組指定了獨享資源執行個體需要允許或禁止哪些公網或內網的訪問。您可根據業務需求選擇已有的安全性群組,或單擊建立安全性群組為獨享資源執行個體建立安全性群組。建立安全性群組的詳細參數配置可參見添加安全性群組規則
    2. 單擊確定,完成綁定VPC操作。
  3. 可選:配置Host
    如果您的資料來源無法通過IP直接存取,例如,資料來源通過Host的網域名稱託管,通過Host網域名稱直接被外部存取時,您需要參考以下步驟配置Host,否則在添加資料來源時,使用資料來源的Host網域名稱進行連通性測試時會失敗。
    1. 單擊Host配置,在Host配置頁面左上方單擊新增,在新增網域名稱Host配置對話方塊中配置各項參數。參數說明如下。
      參數配置說明
      IP地址配置為資料來源的實際IP地址。
      Host網域名稱配置為資料來源對外提供訪問服務的Host網域名稱。如果有多個Host網域名稱時,可換行依次添加。
      說明 此處的網域名稱需包含數字、字母、連字號(-)、點(.),且必須以字母開頭,以字母或者數字結尾。
    2. 如果有多個IP地址需要添加,可繼續單擊新增繼續添加。
      說明
      • 新增的Host配置中,IP、網域名稱不能與之前配置的Host中的IP或網域名稱重複。
      • 一個Host配置中,IP與網域名稱為1對多的關係,即IP可以對應多個Host網域名稱,但是同一個Host網域名稱只能指向一個IP。
  4. 可選:配置DNS
    如果您的資料來源無法通過IP直接存取,例如,資料來源通過負載平衡網域名稱直接被外部存取,通過內部網域名稱解析伺服器將網域名稱解析至實際資料來源IP地址時,您需要參考以下步驟配置DNS,否則在添加資料來源時,使用資料來源的Host網域名稱進行連通性測試時會失敗。
    說明 如果同一個網域名稱同時配置了Host和DNS,系統會優先根據Host的訪問規則訪問資料來源。
    1. 單擊DNS配置,在DNS配置頁面左下角單擊添加,配置完成DNS各項參數後單擊儲存。參數說明如下。
      參數配置說明
      Domain非必配項。如果資料來源有統一的頂層網域,可在此處配置為資料來源對外提供訪問的網域名稱的頂層網域。

      例如,資料來源1對外的訪問網域名稱為domain1.example.com,資料來源2對外的訪問網域名稱為domain2.example.com,此處建議配置為example.com。

      說明 此處的網域名稱需包含數字、字母、連字號(-)、點(.),且必須以字母開頭,以字母或者數字結尾。
      NameServer配置為資料來源提供網域名稱解析的解析服務的IP地址。如果有多個網域名稱解析伺服器時,可換行依次添加。
    2. 如果您需要修改之前配置的DNS,您可單擊右下角的修改
完成獨享Data Integration資源的網路設定後,您還需添加獨享資源群組的EIP地址、專用網路的彈性網卡IP至資料庫的白名單。

後續步驟

資源規劃配置完成後,您可繼續配置資料來源,將來來源資料源與去向資料來源的網路、帳號許可權等準備工作完成,以便建立執行後續的即時資料同步任務。目前同步資料至AnalyticDB for MySQL的來來源資料源僅支援PolarDB及MySQL,您可以根據實際需求選擇合適的資料來源。資料來源的配置可參見配置資料來源(來源為PolarDB)配置資料來源(來源為MySQL)