质量大屏
在数据质量中心,提供数据质量大屏以便用户对当前整个项目/项目组内的数据质量情况有所了解。数据质量大屏分为项目总览和项目组总览,主要却别是展示的数据范围是项目还是项目组级别,在页面上没有太多区别。这里,以项目总览视角进行介绍。
功能模块分为监控概览、表质量平均分、监控配置情况和调度监控执行情况,分别展示当前项目下核心表数据质量规则覆盖和异常告警情况、表质量平均分、线上调度和配置的规则总量、表覆盖量和任务调度的监控量等内容。当前大屏支持数据源类型有Hive、Greenplum、MySQL、Oracle、Vertica、SQLServer、达梦、DB2、TDSQL、GaussDB、OceanBase-MySQL、doris、Hive(外置)等。
监控概览
用户可查看当前覆盖/未覆盖数据质量监控规则(DQC)的表数量,且点击未配置DQC的核心表数量可进行相关表的查看。


模块也包括预警、异常相关的查看,能直观地进行实时质量监控。

表质量平均分
当前表质量平均分支持展示近7天、近30天以及自定义时间范围内的统计。
当数据源类型为Hive时,支持根据表负责人、不同的表分层、不同的主题域(主题域支持下钻到二级主题域)统计表质量平均分。
| 表质量平均分计算逻辑:如一个表挂了多个监控任务,每个监控执行结束后整体重新计算一次,今日执行过的多个监控任务的最后一次执行的实例规则一起计算。 |
监控配置情况
监控配置情况支持根据数据源类型、监控负责人、表负责人、表分层对监控总量、线上调度监控配置规则总量/强规则量/弱规则量、表覆盖量进行展示。

| 参数信息 | 说明 |
|---|---|
| 监控总量 | 稽核系统中创建的所有监控规则的总数量 |
| 线上调度监控 | 指被配置到线上任务(已调度)的稽核监控的数量。 |
| 表覆盖量 | 指被配置到线上调度任务的稽核监控覆盖的表数量。 |
| 监控配置情况:监控总量 、线上调度监控 、表覆盖量,计算时包含独立调度的监控以及挂在离线开发上调度的监控。 |
监控配置情况中,监控总量,强/弱规则总量,不同校验规则类型总量,支持下钻查看对应类型规则的明细数据。 点击监控总量指标卡,可跳转至质量监控页面查看已筛选的监控任务。


点击"强弱规则",弱规则环形图,可跳转至规则列表页面查看已筛选的弱规则。


点击"校验类型",准确性校验环形图,可跳转至规则列表页面查看已筛选的准确性校验类型规则。


调度监控执行情况
通过表负责人、表分层、时间筛选或者监控负责人等筛选条件,快速定位符合条件的已调度异常监控量、异常规则总量等内容。
| 参数信息 | 说明 |
|---|---|
| 已调度监控量 | 指在所选时间范围内稽核监控已被线上任务调度的数量。 |
| 异常规则总量 | 指运行结果为异常的稽核监控的数量(在所选时间范围内),按每个监控的最近一个实例来统计,不计重跑、补数据和监控任务试跑。 |
| 失败监控量 | 指稽核监控运行失败的监控数量(在所选时间范围内),按每个监控的最近一个实例来统计,不计重跑、补数据和监控任务试跑。 |
| 异常规则总量 | 指运行结果为异常的稽核监控中的异常规则数量,按每个监控的最近一个实例来统计,不计重跑、补数据和监控任务试跑。 |
| 强/弱规则量 | 指导致监控任务失败的异常规则数量。/仅触发警告但监控任务仍成功的异常规则数量。 |
| 调度监控执行情况:已调度监控量 、异常规则总量,计算时包含独立调度的监控以及挂在离线开发上调度的监控。 |
以上内容对您是否有帮助?