全部产品
Search
文档中心

大数据开发治理平台 DataWorks:查看质量监控执行详情

更新时间:Jun 12, 2024

数据质量的运行记录模块展示质量监控任务运行时的规则校验结果。质量监控任务运行后,您可以在运行记录页面查看详情。

进入任务查询

  1. 登录DataWorks控制台,切换至目标地域后,单击左侧导航栏的数据建模与开发 > 数据质量,在下拉框中选择对应工作空间后单击进入数据质量

  2. 在左侧导航栏,单击质量运维 > 运行记录

    您可以在运行记录页面,根据数据源表名质量结果我的订阅等信息,筛选需要查看的质量监控任务。

查看质量监控任务

规则视角

点击右上角视角,切换到规则视角

image

名称

描述

ID/规则名称

质量规则的ID和名称。

质量结果

数据校验的结果,包括通过橙色异常红色异常校验中校验失败

  • 通过:当数据质量规则校验结果满足质量规则时,数据校验符合预期。

  • 橙色异常:数据校验指标结果命中橙色质量异常阈值范围。通常是该质量异常阈值范围的定义为“数据校验存在异常,但不影响后续业务运行”。

  • 红色异常:数据校验指标结果命中红色质量异常阈值范围。通常是该质量异常阈值范围的定义为“数据校验不符合预期,会严重影响后续业务运行”。

  • 校验中:质量监控正在校验中。

  • 校验失败:校验任务运行失败。例如:监控的分区未产出,或用户用于监控的SQL运行失败。

问题处置

任务是否阻塞,状态包括告警阻塞

结束时间

数据校验结束的时间。

表名

数据校验的目标表名。

关联范围

质量规则是表级还是字段级

规则模板

质量规则所使用的规则模板

重要程度

规则的重要程度。

  • 强规则:比较重要的规则,如果出现红色异常,默认会阻塞质量监控关联的调度任务的执行。

  • 弱规则:普通规则,如果出现红色异常,默认不会阻塞质量监控关联的调度任务的执行。

监控阈值

规则的比较方式和阈值范围。

详情

单击规则后操作列的详情,您可以看到该质量规则的具体运行记录,您可以查看本次运行记录历史运行记录问题数据处理原始日志

  • 单击相应规则的历史运行记录,查看每次调度后的运行记录。

  • 您可以针对当前规则的运行情况填写处理意见。操作如下:

    1. 单击问题处理

    2. 问题处理对话框中,选择处理方式,并输入处理意见

    3. 单击确认

  • 单击相应规则后的原始日志,即可查看该条规则的日志信息。

规则

单击规则后操作列的规则,即可快速跳转至表质量详情页,查看质量规则任务关联的所有规则。

质量监控视角

点击右上角视角,切换到质量监控视角

任务查询

名称

描述

表名

根据自身需求选择,质量监控任务校验的目标表。

质量监控

质量监控任务名称。

质量结果

质量监控任务运行的结果,包括通过橙色异常红色异常校验中校验失败

  • 通过:当数据质量规则校验结果满足质量规则时,数据校验符合预期。

  • 橙色异常:数据校验指标结果命中橙色质量异常阈值范围。通常是该质量异常阈值范围的定义为“数据校验存在异常,但不影响后续业务运行”。

  • 红色异常:数据校验指标结果命中红色质量异常阈值范围。通常是该质量异常阈值范围的定义为“数据校验不符合预期,会严重影响后续业务运行”。

  • 校验中:质量监控正在校验中。

  • 校验失败:校验任务运行失败。例如:监控的分区未产出,或用户用于监控的SQL运行失败。

问题处置

质量监控任务是否阻塞,状态包括告警阻塞

开始时间

质量监控任务开始的时间。

数据范围

质量监控任务校验的目标表的目标分区。

触发方式

质量监控任务的触发方式,包括生产调度触发手动触发

业务日期

数据范围指定的分区对应的业务时间。

详情

单击表名后操作列的详情,您可以质量规则任务关联的所有校验规则,选中规则,即可查看本次运行记录历史运行记录问题数据处理原始日志,你可以:

  • 单击相应规则的历史运行记录,查看每次调度后的运行记录。

  • 您可以针对当前规则的运行情况填写处理意见。操作如下:

    1. 单击相应规则后的问题处理

    2. 问题处理对话框中,选择处理方式,并输入处理意见

    3. 单击确认

  • 单击相应规则后的原始日志,即可查看该条规则的日志信息。

规则

单击表名后操作列的规则,即可快速跳转至表质量详情页,查看质量规则任务关联的所有规则。

查看血缘

单击表名后操作列的查看血缘,即可快速跳转至数据地图,查看该表的血缘信息。