数据质量校验流程图
2022-03-01 22:10:37 2 举报
本图为数据质量校验业务流程图,将泳道图与流程图相结合,按功能划分业务逻辑,从左至右逻辑递进,每个功能涉及多个系统则以泳道图呈现,各系统间交互流程较清晰,系统内部处理逻辑较明了。
作者其他创作
大纲/内容
表达式引擎拆分计算逻辑
获取质检规则计算逻辑
取数
返回响应
质检系统
入库
图例说明
因子拆分
质检规则生成
因子埋点
数据库
业务逻辑
条件分支
执行业务逻辑
执行
指标具体值Hive表
XXXX
质量指标埋点
指标因子MySQL表
规则库
指标定义
开始
处理校验结果
数据质量指标计算
质量指标计算
否
Http请求
XXXX
解析规则
数据质量项目
SDK埋历史数据
规则生成并保存
配置质检规则
传入指标计算逻辑
执行步骤
拉取对应系统因子表
因子具体值MySQL表
质检规格校验
因子值获取
保存校验结果
指标具体值计算
数据系统
拉取数据系统可配因子
阻断/告警
是
结束
0 条评论
下一页