数仓分层流程图
2022-04-11 16:12:01 40 举报
Dana交通事故案例数据治理流程图
作者其他创作
大纲/内容
数据流向
DWT
DWS
数仓DW
1.Data Warehouse Service 数据服务层2.在DWT的基础上,整合汇总成一个主题的数据服务层3.汇总结果通常是形成专题表,用于OLAP、数据分发等
DWD
1.Application Data Service 数据应用层2.供数据分析和挖掘使用3.【数据报表】通常存放在该层
ADS
ODS
1.Data Warehouse Detail 数据明细层2.一般作为业务层和数据仓库层的隔离层3.主要进行数据清洗和规划化操作:去空、账数据及表结构合并等
1.Operation Data Store 数据准备区,贴源层2.直接接入源数据的:业务库、埋点日志、消息队列等3.数据保持原貌不做处理
1.Data Warehouse Topic 数据主题层2.在DWD的基础上,进行聚合操作,算出相应的统计指标3.聚合之后会生成【主题层】
0 条评论
下一页