版本:3.14.2

新增功能

1.跨表级模板规则支持与基准值计算表行数波动率

  • 功能介绍:
    • 新增系统规则模板,支持跨表级模板比对表行数波动率校验表行数与比对表表行数的波动率,是否在阈值内;同时,该类规则支持添加比对表的筛选条件,例如分区筛选和非分区筛选,因此该功能可用于比较同一张表不同分区的表行数波动率。
  • 功能详细使用步骤:
    • 功能入口: 更新合辑(2025年) - 图1

2.新建模板规则时,支持选择与基准值差值为“绝对值”还是“原始差值”

  • 功能介绍:
    • 新建模板规则时,计算规则为“与基准值差值”时,期望范围里增加下拉框,可以由”绝对值“切换为”原始差值“。
  • 功能详细使用步骤:
    • 功能入口: 更新合辑(2025年) - 图2
功能优化

1.数据比对、形态探查支持Doris数据源

2.质量监控任务执行趋势支持按日期筛选

  • 功能入口: 更新合辑(2025年) - 图3

3.质量监控引用详情适配离线开发回收站功能

  • 功能介绍:
    • 如果质量监控任务引用的任务在回收站中,则在引用详情中提示任务已移入回收站。

版本:3.14.1

新增功能

1.表级模板规则支持同比波动率,新建规则模板基准值支持N天前同期值

  • 功能介绍:
    • 新增系统规则模板,支持表级模板比对1天/7天/30天前同比波动率;同时也支持用户新建规则模板支持N天前同期值,适用于小时调度的监控任务比对N天前同期值,例如昨日10点的数据与一周前10点的数据进行比对。
  • 功能详细使用步骤:
    • 功能入口: 更新合辑(2025年) - 图4

2.质量监控任务独立调度支持crontab调度

  • 功能介绍:
    • 质量监控任务支持crontab调度和Quartz Cron调度,用户可以设置监控任务在特定时间段内不调度。
  • 功能详细使用步骤:
    • 功能入口: 更新合辑(2025年) - 图5
功能优化

1.数据比对功能权限接入安全中心

  • 功能介绍:
    • 操作权限包括运行、编辑和删除,支持为不同角色用户对项目下的数据比对任务设置不同的权限。

2.数据比对设置规则时支持按照字段名称对源表字段进行搜索

版本:3.14.0

新增功能

1.规则模板支持批量配置监控规则

  • 功能介绍:
    • 表级模板与字段级模板支持批量配置监控规则,用户可以基于某一规则模板,批量选择表/字段,完成质量规则的创建。
  • 功能详细使用步骤:
    • 功能入口: 更新合辑(2025年) - 图6 点击进入批量新建规则页面,依次进行规则配置、选择字段/表,并完成规则验证,即可完成批量操作。 更新合辑(2025年) - 图7

2.数据比对支持SQL模式

  • 功能介绍:
    • 数据比对原先支持选择两张已持久化到数据库中的表进行比对,此次新增SQL模式,即比对的对象支持两段SQl产出的虚拟数据集,如果需要对比多个日期分区,以及进行一些过滤、聚合、Join等,或是更改表结构的数据变动(如增加字段、更改字段类型等)用 SQL 模式对比将会更方便。
  • 功能详细使用步骤:
    • 功能入口: 更新合辑(2025年) - 图8
功能优化

1.模板规则支持添加过滤条件

  • 功能介绍:
    • 字段级/表级别模板规则支持添加过滤条件。
  • 功能详细使用步骤:
    • 功能入口: 更新合辑(2025年) - 图9

版本:3.13.0

新增功能

1.新增质量规则表

  • 功能介绍:
    • 原先规则列表和规则模板归入“规则管理”一级菜单,新增“规则对象表”二级菜单,支持从表的视角查看所关联的所有质量监控、质量规则和质量报告。

2.质量规则支持复制

  • 功能介绍:
    • 质量监控详情页的规则列表中,支持复制规则到当前监控任务中,帮助用户提高质量监控创建效率。
BUG修复

1.修复了告警组中的外部用户无法接收告警通知的问题。