数据仓库数据流向分层示意图
2023-05-18 14:56:30 40 举报数据仓库数据流向分层示意图
作者其他创作
大纲/内容
DB
1.Application Data Service，数据应用层;2.存放在ES、Redis、PostgreSql等系统中，供数据分析和挖掘使用;3.数据报表通常放在该层
1.Operation Data Store数据准备层，贴源层；2.直接接入源数据的：业务库、埋点日志、消息队列等；3.ODS是数据仓库层的准备区。
APP
DWM
数仓DW
DWS
ADS
DWD
ODS
1.Data WareHouse Service，数据服务层;2.DWS的基础上，整合汇总成一个主题的数据服务层;3.汇总结果通常是宽表，用于OLAP、数据分发。
1.Data WareHouse Middle，数据中间层;2.在DWD基础上进行轻微地聚合操作，算出相应统计指标；3.聚合之后会生成中间表
1.Data WareHouse Details，数据细节层；2.业务层和数据仓库层的隔离层，保持和ODS层相同颗粒度;3.进行数据清洗和规范化操作：去空/脏数据、离群值等。
0 条评论
下一页
