全部產品
Search
文件中心

Data Lake Formation:資源概覽

更新時間:Jan 16, 2026

本文為您介紹在DLF中如何查看系統的資源概覽。通過資源概覽,您可以全面掌握當前資源的使用方式,從而更好地進行資源規劃和最佳化管理。

查看資源概覽

資料目錄層級

  1. 登入資料湖構建控制台

  2. 資料目錄列表頁面,單擊目標Catalog名稱,查看資料目錄詳細資料。

  3. 單擊資源概覽頁簽,您可查看當前資料目錄的指標監測,包括資源使用觀測(計費相關指標)、限額指標監控和資源請求指標明細。

資料表層級

  1. 資料目錄列表頁面,單擊目標Catalog名稱,單擊目標庫下對應的目標表(Paimon表)。

  2. 單擊資源概覽頁簽,可以查看當前Paimon表的指標監控,指標詳情

指標說明(資料目錄)

資源使用觀測

指標

描述

總儲存用量

展示當前儲存的最新值。

總儲存用量

展示所選時間段內總儲存量的變化。

近1天計算資源使用(CU * Hours)

統計所選結束時間前 24 小時內 Catalog 湖表最佳化的 CU * Hours 計算資源使用方式。

儲存用量明細

展示所選時間段各儲存類型的原始用量和計費用量。其中分為standard(標準儲存)、IA(低頻儲存)、 Archive(Archive Storage)和coldarchive(冷Archive Storage)。

湖表最佳化 CU * Hours 使用

表示所選時間段每 1 小時 Catalog 湖表最佳化的 CU * Hours 計算資源使用方式。

檔案請求數

表示所選時間段內每 1 小時內的檔案請求次數。寫請求包含了計費 PUT、POST、HEAD 請求,讀請求包含了計費 GET 請求。

限額指標監控

指標

描述

QPS

所選結束時間前 1 分鐘的平均每秒檔案請求數。

下載頻寬

所選結束時間前 1 分鐘的平均下載頻寬。

上傳頻寬

所選結束時間前 1 分鐘的平均上傳頻寬。

QPS趨勢

展示前 1 分鐘內的平均每秒檔案請求數。

頻寬趨勢

展示前 1 分鐘內的平均上傳頻寬和平均下載頻寬隨時間的變化趨勢。

資源請求指標明細

指標

描述

CU * Hours 分類用量趨勢

所選時間範圍內的各類任務 CU 用量。

CU * Hours 分類用量

所選時間範圍內的各類任務 CU 用量。

Catalog 讀流量

  • Total(總流量)

  • Compaction(資料合併任務產生的流量)

  • RequestLogs(系統請求日誌產生的流量)

  • DLF (系統內部管理流量,如生命週期管理,檔案清理)

Catalog 寫流量

Catalog 讀流量分類(檔案類型取樣)

  • Manifest(資訊清單檔)

  • Snapshot(快照檔案)

  • Schema(中繼資料檔案)

Catalog 寫流量分類(檔案類型取樣)

Catalog 讀請求

  • Compaction(資料合併任務產生的請求)

  • RequestLogs(系統請求日誌產生的請求)

  • DLF (系統內部管理請求,如生命週期管理,檔案清理)

Catalog 寫請求

Catalog 讀請求分類

  • Manifest(資訊清單檔)

  • Snapshot(快照檔案)

  • Schema(中繼資料檔案)

  • Bucket-(根據資料格式分類)

Catalog 寫請求分類

IO 請求數量

1 分鐘內的檔案請求數量。

GetObject 請求數量

1 分鐘內的 GetObject 請求數量。

GetObject 請求延遲

1 分鐘內的 GetObject 請求平均延遲。

Upload 請求數量

1 分鐘內的 Upload 請求數量。

Upload 請求延遲

1 分鐘內的 Upload 請求平均延遲。

Delete 請求數量

1 分鐘內的 Delete 請求數量。

Delete 請求延遲

1 分鐘內的 Delete 請求平均延遲。

ObjectMeta 請求數量

1 分鐘內的 ObjectMeta 請求數量。

ObjectMeta 請求延遲

1 分鐘內的 ObjectMeta 請求平均延遲。

ListObjects 請求數量

1 分鐘內的 ListObjects 請求數量。

ListObjects 請求延遲

1 分鐘內的 ListObjects 請求平均延遲。

中繼資料請求數量

1 分鐘內的中繼資料請求數量。

TableRead 請求數量

1 分鐘內的 TableRead 請求數量。

TableRead 請求延遲

1 分鐘內的 TableRead 請求平均延遲。

TableWrite 請求數量

1 分鐘內的 TableWrite 請求數量。

TableWrite 請求延遲

1 分鐘內的 TableWrite 請求平均延遲。

List 請求數量

1 分鐘內的 List 請求數量。

List 請求延遲

1 分鐘內的 List 請求平均延遲。

其他中繼資料請求數量

1 分鐘內的其他中繼資料請求數量。

其他中繼資料請求延遲

1 分鐘內的其他中繼資料請求平均延遲。

CU * Hours Top 表

對於多表操作、資料庫級操作等情況,會預設顯示為 default_id

說明

資料經抽樣彙總產生,數值僅供參考

讀流量 Top 表

寫流量 Top 表

讀請求 Top 表

寫請求 Top 表

指標說明(資料表)

說明
  • 資料擷取和處理存在延時,近3小時內的數值可能會出現波動,僅供參考。

  • 佔比資料經抽樣彙總產生,數值僅供參考。

指標

描述

Table CU * Hours(小時)

當前表的 CU 用量趨勢,僅統計獨立合并的表。

Table CU * Hours(每天)

當前表 CU * Hours 分類趨勢

當前表的各類任務 CU 用量,僅統計獨立合并的表。

當前表 CU * Hours 分類

當前表 / Catalog CU 總用量佔比趨勢

當前表在 Catalog 中的 CU 用量佔比,僅統計獨立合并表。

當前表 / Catalog CU 總用量佔比

Table 讀流量

各請求源在表層級的訪問佔比。

Table 寫流量

Table 讀流量分類(請求源取樣)

各請求源在表層級的訪問佔比。

Table 寫流量分類(請求源取樣)

Table 讀請求

各請求源在表層級的訪問佔比。

Table 寫請求

Table 讀請求分類(請求源取樣)

各請求源在表層級的訪問佔比。

Table 寫請求分類(請求源取樣)

Table 讀請求分類(檔案類型取樣)

各類檔案在表層級的訪問佔比。

Table 寫請求分類(檔案類型取樣)

Table/Catalog 讀請求佔比

當前表在 Catalog 上的訪問佔比。

Table/Catalog 寫請求佔比

GetObject 請求數量

GetObject 請求數量。

GetObject 請求延遲

GetObject 請求平均延遲。

Upload 請求數量

Upload 請求數量。

Upload 請求延遲

Upload 請求平均延遲。

Delete 請求數量

Delete 請求數量。

Delete 請求延遲

Delete 請求平均延遲。

ObjectMeta 請求數量

ObjectMeta 請求數量。

ObjectMeta 請求延遲

ObjectMeta 請求平均延遲。

ListObjects 請求數量

ListObjects 請求數量。

ListObjects 請求延遲

ListObjects 請求平均延遲。