AESC
2022-12-15 19:41:30 2 举报
aesc方案
作者其他创作
大纲/内容
biz_step_all
biz_single_cycle(单电芯循环)
stage_detail_all
Stage2: 每天0:30开始同步blob中的增量数据,按照日期等分区写入原始表,之后做3个事情:1.更新电芯电芯日期表2.同步原始增量数据到增量明细表3.同步原始增量数据到全量表,清除电芯超过一年的数据
Blob
Stage1: 每天0点开始把前一天消费的增量数据从aesc服务器同步到blob,以日期作为目录进行隔离
增量工步数据
original_detail_hours
stg_detail_increment
④单电芯循环测试数据
③循环层数据
Stage3: 从全量明细表抽取增量电芯的明细数据,写入stage_detail_all表中,并计算工步和循环数据
原始明细数据
②工步层数据
Stage5:将四张表的数据同步到blob
全量循环数据
数据接入
电芯日期表
stg_barcode_dt
增量明细数据
①明细数据
AESC服务器(kafka consumer)
全量明细数据
biz_step_cycle
电芯增量明细数据
Stage4:根据特定逻辑计算单电芯循环测试的数据,将结果数据落入循环测试表中
biz_detail_all_partition
0 条评论
回复 删除
下一页