全部產品
Search
文件中心

Dataphin:建立RocketMQ資料來源

更新時間:May 29, 2025

通過建立RocketMQ資料來源能夠實現Dataphin讀取RocketMQ的業務資料或向RocketMQ寫入資料。本文為您介紹如何建立RocketMQ資料來源。

背景資訊

RocketMQ即阿里雲訊息佇列RocketMQ版,是阿里雲基於Apache RocketMQ構建的低延遲、高並發、高可靠的分布式“訊息、事件、流”統一處理平台。如果您使用的是阿里雲訊息佇列RocketMQ版,在對接Dataphin進行資料開發時,您需要先完成RocketMQ資料來源的建立。更多阿里雲訊息佇列RocketMQ版資訊,請參見什麼是雲訊息佇列RocketMQ版

許可權說明

僅支援擁有建立資料來源許可權點的自訂全域角色和超級管理員資料來源管理員板塊架構師專案系統管理員系統角色建立資料來源。

操作步驟

  1. 在Dataphin首頁,單擊頂部功能表列管理中心 > 資料來源管理

  2. 資料來源頁面,單擊+建立資料來源

  3. 建立資料來源頁面的訊息佇列地區,選擇RocketMQ

    如果您最近使用過RocketMQ,也可以在最近使用地區選取項目RocketMQ。同時,您也可以在搜尋方塊中,輸入RocketMQ的關鍵詞,快速搜尋。

  4. 建立RocketMQ資料來源頁面中,配置串連資料來源參數。

    1. 配置資料來源的基本資料。

      參數

      描述

      資料來源名稱

      命名規則如下:

      • 只能包含中文、英文字母大小寫、數字、底線(_)或短劃線(-)。

      • 長度不能超過64字元。

      資料來源編碼

      配置資料來源編碼後,您可以在Flink_SQL任務中通過資料來源編碼.表名稱資料來源編碼.schema.表名稱的格式引用資料來源中的表;如果需要根據所處環境自動訪問對應環境的資料來源,請通過${資料來源編碼}.table${資料來源編碼}.schema.table的變數格式訪問。更多資訊,請參見Dataphin資料來源表開發方式

      重要
      • 資料來源編碼配置成功後不支援修改。

      • 資料來源編碼配置成功後,才能在資產目錄和資產清單的對象詳情頁面進行資料預覽。

      • Flink SQL中,目前僅支援MySQL、Hologres、MaxCompute、Oracle、StarRocks、Hive、SelectDB資料來源。

      資料來源描述

      對資料來源的簡單描述。不得超過128個字元。

      資料來源配置

      選擇需要配置的資料來源:

      • 如果業務資料來源區分生產資料來源和開發資料來源,則選擇生產+開發資料來源

      • 如果業務資料來源不區分生產資料來源和開發資料來源,則選擇生產資料來源

    2. 配置資料來源與Dataphin的串連參數。

      若您的資料來源配置選擇生產+開發資料來源,則需配置生產+開發資料來源的串連資訊。如果您的資料來源配置為生產資料來源,僅需配置生產資料來源的串連資訊。

      說明

      通常情況下,生產資料來源和開發資料來源需配置為非同一個資料來源,以實現開發資料來源與生產資料來源的環境隔離,降低開發資料來源對生產資料來源的影響。但Dataphin也支援配置成同一個資料來源,即相同參數值。

      參數

      描述

      Endpoint

      RocketMQ執行個體的Endpoint。您可以在訊息佇列RocketMQ版控制台執行個體詳情頁面,查看Endpoint。image..png建議您選擇TCP協議用戶端存取點下內網訪問對應的Endpoint。

      重要

      當RocketMQ執行個體與Dataphin執行個體在同一地區時,才可以使用內網訪問對應的Endpoint。

      Instance ID

      RocketMQ執行個體的ID。您可以在訊息佇列RocketMQ版控制台執行個體詳情頁面,查看執行個體ID。image..png

      Access IDAccess Key

      RocketMQ資料來源所在帳號的AccessKey ID和AccessKey Secret。如何擷取,請參見建立AccessKey

      重要

      建立RocketMQ資料來源時不支援測試資料來源是否可以和Dataphin進行正常的連通,因此需要您確保串連資訊的正確性。

  5. 單擊確定,完成RocketMQ資料來源的建立。