全部產品
Search
文件中心

E-MapReduce:管理中繼資料

更新時間:Dec 20, 2025

中繼資料管理功能主要展示當前執行個體的所有資料庫、資料表、分區及各種任務等資訊,同時支援建立資料庫和資料表,並定義其列及相關屬性。

前提條件

已建立StarRocks執行個體,詳情請參見建立執行個體

使用限制

  • 普通使用者無法查看資料庫大小、快取資料大小、表數目資訊。

  • 普通使用者無法查看完整工作清單。

查看中繼資料

  1. 進入StarRocks Manager頁面。

    1. 登入E-MapReduce控制台

    2. 在左側導覽列,選擇EMR Serverless > StarRocks

    3. 在頂部功能表列處,根據實際情況選擇地區。

    4. 單擊StarRocks Manager,或者單擊已建立執行個體操作列的串連執行個體

      串連StarRocks執行個體詳情,請參見通過EMR StarRocks Manager串連StarRocks執行個體

  2. 在左側導覽列,單擊中繼資料管理

  3. Catalog 列表頁面,單擊待查看的Catalog名稱。

    該頁面將展示當前Catalog下所有的資料庫資訊。

    重要

    審計日誌功能預設開啟,並會自動建立資料庫 _starrocks_audit_db_ 及資料表starrocks_audit_tbl。後續所有的審計日誌將會儲存於該表中。請勿刪除 _starrocks_audit_db_ 資料庫及starrocks_audit_tbl資料表,刪除後將導致Manager中SQL任務查詢功能無法正常使用。

  4. 單擊待查看的資料庫名稱,可以查看該資料庫下的表、視圖以及任務等詳細資料。

    頁簽

    說明

    展示當前資料庫下的所有表,單擊對應的表名稱,可以逐層查看相關的表資訊(包括表的大小、快取資料大小和類型)、分區資訊、節點分區情況和分區資訊。此外,還支援按表大小排序的功能,允許您按升序或降序顯示這些資訊。

    視圖

    展示當前資料庫下所有視圖的詳細資料。視圖是基於SQL查詢定義的虛擬表,不儲存實際資料。主要功能模組及其說明如下:

    • 視圖詳情:展示視圖的所有欄位及其屬性,包括欄位名稱、可空性、欄位類型和描述。

    • 基礎資訊:展示表資訊,包括資料目錄、資料庫名稱、類型、建立時間和最近修改時間等基本資料。

    • DDL:展示視圖的定義SQL(CREATE語句),協助您瞭解視圖的查詢邏輯及其依賴的底層表。

    • 資料預覽:提供視圖的資料預覽功能,展示前100條資料。資料預覽基於視圖的定義動態計算,即時反映底層物理表的資料狀態。

    物化視圖

    展示當前資料庫下所有物化視圖的詳細資料。物化視圖是基於SQL查詢定義的物理表,儲存了預計算的結果,用於加速複雜查詢。主要功能模組及其說明如下:

    • 基本資料:展示物化視圖的核心屬性,包括ID、名稱、資料庫等核心屬性,以及視圖的定義SQL,協助您瞭解其查詢邏輯和依賴的底層表。

    • 工作清單:展示與物化視圖相關的任務記錄,包括任務名稱、視圖名稱、資料庫名稱等資訊。

    • 監控大盤:提供物化視圖的運行狀態和效能監控,包括儲存量、分區數、錶行數等指標。

    • 資料預覽:提供物化視圖的資料預覽功能,展示前100條資料。

    任務

    展示當前資料庫下的所有任務。

    • Kafka匯入:展示Routine Load方式從Kafka匯入資料的任務資訊。

    • 其他匯入:展示除Kafka匯入外的其他資料匯入任務資訊。

      說明

      Stream Load是同步匯入任務,不會在該工作清單中展示。

    • 匯出:展示通過Export方式將資料匯出到外部儲存的任務資訊。

    • 表模式變更:展示通過Schema Change修改表結構的任務資訊。

    • 物化視圖建立:展示當前資料庫下所有與物化視圖建立相關的任務資訊。

建立 DLF Catalog

  1. 進入建立DLF Catalog對話方塊。

    您可以通過以下兩種方式進入建立 Catalog對話方塊:

    • 方式一:從中繼資料管理頁面

      中繼資料管理頁面,單擊建立 Catalog

    • 方式二:從StarRocks Manager頁面

      在EMR StarRocks Manager頁面的左側導覽列,選擇建立 > Catalog

  2. 新增資料目錄對話方塊,填寫以下資訊。

    參數

    說明

    資料目錄

    選擇DLF資料目錄

    資料目錄名稱

    輸入2-64個字元的目錄名稱(僅允許字母、數字、"-"、"."、"_")。

    DLF資料目錄

    從下拉式清單中選擇已建立的DLF資料目錄。如需建立 DLF 資料目錄,您可前往DLF 控制台建立。

    資料類型

    選擇Paimon或Iceberg。

    • Paimon:高效能資料湖情境

    • Iceberg:大規模資料分析情境

    使用者資訊

    系統自動顯示目前使用者和關聯的RAM使用者。

    如果沒有關聯的RAM使用者,建立DLF Catalog後將無法訪問DLF資料目錄。

  3. 確認配置資訊無誤,單擊確定按鈕完成DLF Catalog建立。

建立資料庫

  1. 進入建立資料庫對話方塊。

    您可以通過以下兩種方式進入建立資料庫對話方塊:

    • 方式一:從中繼資料管理頁面

      1. 中繼資料管理頁面,單擊待查看的Catalog名稱。

      2. 單擊建立

    • 方式二:從StarRocks Manager頁面

      在EMR StarRocks Manager頁面的左側導覽列,選擇建立 > 資料庫

  2. 建立資料庫對話方塊中,您可以調整相應的參數,然後單擊確定

    您可以在預覽地區查看建立資料庫的SQL內容。有關更多資訊,請參見CREATE DATABASE

建立資料表

  1. 進入建立資料表對話方塊。

    您可以通過以下兩種方式進入建立資料表對話方塊:

    • 方式一:從中繼資料管理頁面

      1. 中繼資料管理頁面,單擊待查看的Catalog名稱。

      2. 單擊目標資料庫。

      3. 頁簽,單擊建立

    • 方式二:從StarRocks Manager頁面

      在EMR StarRocks Manager頁面的左側導覽列,選擇建立 >

  2. 建立表對話方塊中,您可以設定基本資料、列(Columns)和屬性(Properties)等中繼資料內容,然後單擊確定

    您可以在預覽地區查看建立資料表的SQL內容。有關更多資訊,請參見CREATE TABLE

常見問題

  • Q1:建立DLF Catalog後無法訪問資料?

    A:請確認關聯的 RAM 使用者已在 DLF 控制台中被授予對應 DLF 資料目錄的讀寫權限。

  • Q2:DLF 資料目錄下拉式清單為空白,或新增的資料目錄不顯示?

    A:說明當前帳號下尚無可用的 DLF 資料目錄,或已有目錄未對當前 RAM 使用者授權。請前往 DLF 控制台建立資料目錄,並確保為目標 RAM 使用者添加相應權限原則。