数据质量全方位定量监控

DQAS根据提前配置好的详尽的业务规则,对数据进行精准量化监控,实时反映数据的质量状况, 将采集的数据形象化、直观化、具体化展现出来,为数据治理提供有力的依据。

[ 功能特色 ]

  • 对数据进行定量监控,数据质量概况一目了然
  • 首创指数标准Q值进行客观量化评定
  • 自定义检测规则,对数据进行全方位多角度监测
  • 脏数据监控,即对不符合规则标准的问题数据做监控

数据质量报告与脏数据

面向业务的数据质量报告为DQAS定期测量的成果,包括对数据质量(完备性、完整性、一致性、有效性和及时性)的总 结报告检测出不满足数据质量阈值的“脏数据”,根据报告形成周期向数据质量负责人定期通报数据状况以及改进建议。

[ 功能特色 ]

  • 精准直观地反映业务部门数据的质量状况
  • 可自定义设置数据质量报告的周期
  • 数据治理负责人可直接导出脏数据进行整改
  • 数据质量的提升通过Q值反映出来,形成数据治理的闭环

零编码自定义业务规则

通过快速评估结果和对数据质量的要求,基于EDQAF质量评估框架用户可以自 由配置一系列的数据质量测量规则,DQAS将根据这些规则自动化测量和监控数据。业务规则构建包括质量维度、测量类型、元规则模板、阈值、权重。

[ 功能特色 ]

  • 采用EDQAF可视化组件配置,简单易操作
  • 用户无需编码即可实现多角度的测量规则设计
  • 可试运行,随机检测数据得出问题数据
  • 规则日常管理自由灵活,工作高效而轻松

快速评估工具

快速评估是一种用于发现和描述数据集的重要特征的特定数据分析, 评估结果将提供数据内容的概况。利用快速评估功能,可以对关注字段的统计特征进行快速地定量评估,为数据质量检测规则的配置提供参考。

[ 功能特色 ]

  • 可灵活创建、管理评估队列
  • 评估结果直观,数据概况一目了然
  • 检测异常的评估项可进行一键重新评估
  • 根据数据量大小,支持全面评估或抽样评估

异常实时告警通知

DQAS拥有全面系统的消息推送机制,将数据质量运行异常、数据评估异常、 数据源连接失效、数据质量检测完成通知、数据更新率检测结果异常通知等消息实时推送给相关用户。

[ 功能特色 ]

  • 用户可根据个人需求订阅接收消息的类型
  • 可配置消息的接收方式(系统消息或邮件)
  • 可按消息类型、内容、时间等快速检索
  • 可对重要消息进行归档,方便查阅

全面完善的数据源支持

支持对多种常见数据库类型的连接,包括mysql、SqlServer、Oracle等, 接入数据源后可进行数据库配置和管理,支持在线一键同步数据,支持多数据源同步监控。

多引擎数据质量监测

数据质量监控是一项对计算能力要求很高的任务,DQAS为满足高性能要求 提供多引擎执行数据质量的检测,可以将检测作业分发到不同的引擎上执行,执行完毕后将结果发回主机汇总,有效保证系统的运行效率。