执行实例与结果
用户可在运维管理-执行实例与结果页面,查看质量检测任务运行情况。
用户可以按数据源、数据库、执行时间、是否订阅筛选质量检测任务,并可以通过表名、执行任务 ID、表负责人等信息进行任务查询。
注意:
运维列表中根据表名 + 执行时间 + 执行方式唯一确定一条检测任务,如果相同表进行多次检测,会展示最近一次检测情况。
字段 | 详情 |
表名 执行 ID | 表名 质量检测任务 ID |
表负责人 | 质量检测表的负责人 |
执行时间 | 质量检测任务触发执行时间 |
执行方式 | 质量检测任务触发方式,包含试运行、周期检测和调度检测(关联生产调度任务)。 |
执行引擎 | 质量检测任务执行引擎,目前支持 Hive、Spark、DLC、TCHouse-P 和 Doris。 |
执行详情 | 如质量任务执行方式为周期检测,将显示设置的周期检测信息(时间范围、执行频次); 如为调度触发,则显示关联调度任务 ID。 |
检测状态 | 质量检测任务运行状态,分为检测中、正常、异常(规则组中任意一条被触发就算检测任务异常)、下发中、链路失败(因系统执行机不稳定等问题导致无法正常执行,与数据本身质量无关)。 |
异常规则 | 异常规则个数/总规则数 |
操作 | 支持跳转数据监控查看该表规则配置; 支持跳转数据运营查看该表详情中查看血缘信息,进行问题排查; 支持处理&告警,手工发送异常提醒。 |
查看规则执行情况
运维管理列表支持展开、查看每条规则触发情况:
查看规则执行结果
用户选择并单击列表左侧的下拉标识,可查看规则检测任务详情(二级列表)。
字段 | 详情 |
规则名称 | 所配置的规则名称 |
规则类型 | 系统模板/自定义模板/自定义 SQL |
数据对象 | 表级规则(table)或表字段信息(字段类型) |
检测范围 | 实际检测范围(全表或设置的分区) |
规则详情 | 规则配置信息,包含触发模板、触发条件、触发等级。 |
检测结果 | 分为3种状态:检测通过、触发规则、检测失败(其他原因导致检测任务执行失败,非数据本身质量问题)。 |
触发结果 | 分为3种状态:无发送告警、发送告警成功,阻断任务成功(订阅的告警接收人会在配置的渠道收到告警信息)。 |
计算结果对比 | 检测的结果数据/配置的阈值,发生异常的结果数据会有不同颜色高亮显示,多条检测结果以逗号进行分隔。 |
操作 | 支持查看规则任务执行结果&日志和执行历史 |
查看结果&日志
单击二级任务列表操作列的结果&日志,可查看检测任务具体信息,并支持导出问题详情、跳转数据运营表详情中的产出与变更查看生产任务。
导出单规则执行结果
进入结果与日志 > 结果页面,进入导出数据界面,单击导出。
查看生产任务
进入 结果与日志 > 结果页面,单击查看生产任务。
查看执行日志
支持查看执行日志,单击日志查看近30条任务执行记录:
批量导出执行结果
步骤一:提交导出任务
用户可以勾选执行实例,提交导出任务。
步骤二:下载导出数据
导出任务提交后,待任务运行完毕(导出状态:导出中 > 导出成功),即可下载数据。
说明:
文件生成逻辑:每条质量规则生成1个文件。