数据湖构建：湖表优化功能监控

创建和管理报警规则

1. 登录云监控控制台。

2. 在左侧导航栏，选择报警服务 > 报警规则。

3. 单击创建报警规则，配置相关参数。

   参数	说明
   产品	数据湖构建（DLF）
   资源范围	选择实例，报警规则作用于Catalog。
   关联资源	单击添加实例，左上角选择目标地域，然后勾选需要监控的Catalog，单击确认。
   规则描述	单击添加规则 > 简单指标或组合指标，进入设置规则描述面板。

云监控指标说明

• Compaction延时_最新compact提交到最新非compact提交

  • 定义：最新的compact提交的时间与最新的非compact提交时间的时间差。

  • 语义：反映当前系统中未合并数据的时间跨度。

  • 适用场景：

    • 评估数据追赶进度。

    • 该值越大，说明最新的Compaction任务落后于写入进度的幅度越大。

  • 注意：该指标衡量的是 Compaction 任务相对于最新写入进度的落后程度（追赶差距），而非某条具体数据的等待时长。

• Compaction延时_最早非compact提交

  • 定义：根据最早未合并 Snapshot 的提交时间与当前系统时间计算出的时延。

  • 语义：反映 Compaction 任务在调度层面的滞后程度。即最老的一批已提交数据等待合并的时长。

  • 适用场景：

    • 监控调度系统的响应速度。

    • 排查 Compaction 资源是否不足。

  • 注意：在高频提交场景下，该指标数值可能偏小，因为它忽略了数据写入过程的耗时。

• Compaction延时_最早非compact文件

  • 定义：根据最早未合并 Snapshot 的提交时间与当前系统时间计算出的时延。

  • 语义：反映数据从物理落地到等待合并的端到端时效性。

  • 适用场景：

    • 需要严格监控数据新鲜度的场景。

    • 长窗口流式写入或大批量导入场景（Checkpoints 间隔较大）。

  • 注意：该指标包含了“上游写入数据及其 Checkpoint 的耗时”，通常大于“最早非 compact 提交”的延时，能更真实地反映最老数据的物理陈旧度。

  该指标可通过API获取表合并信息进行查看具体时间。

告警方案示例与推荐