数仓流程图
2017-03-14 19:37:52 0 举报
登录查看完整内容
为你推荐
查看更多
数仓流程图是一个用于描述数据仓库中数据的处理和转换过程的图形化表示。它通常包括以下几个步骤:数据采集、数据清洗、数据集成、数据存储和数据分析。在数据采集阶段,数据从各种来源(如数据库、文件等)被抽取出来;在数据清洗阶段,对采集到的数据进行去重、填充缺失值等操作以保证数据的质量;在数据集成阶段,将来自不同来源的数据进行整合以满足业务需求;在数据存储阶段,将处理后的数据存储到数据仓库中以便于后续查询和分析;最后,在数据分析阶段,通过对数据仓库中的数据进行挖掘和分析,为企业决策提供支持。
作者其他创作
大纲/内容
ods表
adm表(antdwtmn)
刷新任务-2(依赖任务1)
还需要添加转换成时间戳逻辑
线上表
刷新任务-4(依赖任务3)
copy任务-3(每天凌晨3点)
同步任务-1(每天0:00轮询check任务)
每天凌晨2:00
tmn上传文件
adm同步表(alipaydw_us)
这里有个坑:名单数据为空时会报错
同步任务-5(依赖任务4)
adm表(alipaydw_us)
sftp
0 条评论
回复 删除
下一页