Untitled Diagram
2016-03-18 10:09:56 1 举报
由于您没有提供具体的图表信息,我无法为您生成准确的描述。但是,我可以为您提供一个通用的描述模板,您可以根据实际的图表内容进行修改: ”这是一张未命名的图表,展示了(图表的主题或目的)。图表中包含了(图表的主要元素或数据),并且通过(图表的类型,如柱状图、饼图等)进行了可视化呈现。从图表中我们可以看出(图表的主要发现或趋势)。这张图表为我们提供了宝贵的信息,帮助我们更好地理解(图表主题或目的)的情况。” 请提供具体的图表信息,我将很乐意为您提供更详细的描述。
作者其他创作
大纲/内容
配置脚本跑数据
※ ETL任务的出错率、执行时间变化趋势监控
※ 日志验证方案
收集脚本配置
※ 关于延迟的保证
关键KPI监控配置
读配置文件、配置数据扫描数据导入后跑测试方案
数据引入 + ETL管理统一平台,包含测试方案配置
数据完整性
需求接入全流程
可上线结论:xxx
每日例行监控报告
配 置
数据正确性
选择测试方案
测试方案
RD自测 + 需求方对接确认
线上采集量
配置接入数据表结构等
每日例行数据值变化监控、同环比对比
小时
※ 关键业务指标KPI监控报警
⑤ ETL任务执行耗时变化
确认邮件抄全组统一管理(从需求邮件开始)
metastore的SLA,提供数据传完的判断接口
数据接入全流程
测试报告:xx方案
上线测试报告
(延迟受传输方式客观存在)
①②③...
首次上线报告
测试结果
※ mysql验证方案
天
邮件确认全过程抄全组统一管理
例行报告
① 数据量
HDFS量
每10分钟,小于1000条的sample check
目前主要在群里提出问题 + 讨论解决
导入数据
ETL任务每日执行结果收集 & 执行时间变化
④ ETL任务按天的出错率
⑥ KPI昨日比、周同比等
② 线下数据验证
配置ETL
(ETL脚本执行前能判断数据已传完)
问题记录改进点
周会统计问题记录问题池
分级别
抽 样
问题记录积累改进
ETL需求接入流程改进
数据名
总量CHECK
需求接入流程改进点
③ 日志量与线上采集量
0 条评论
下一页