数据仓库分层设计
2021-09-12 20:34:24 8 举报
数据仓库分层设计
作者其他创作
大纲/内容
DWD
数据汇总层
数据明细层
数据应用层
Kafka
设备基本维度
位置基本维度,如页面、导航、频道、栏目、来源等
日志文件
DWT
中间临时层,在DWD的基础上进行相关维度或指标的计算,便于DWS层表计算生成,保留时间周期较短
日志数据
数据中间层
媒资基本维度
ADS
ODS
业务库同步数据
业务库
时间基本维度
数据源
DIM
保持与ODS层相同的颗粒度,进行数据清洗与规范化操作,剔除异常数据,适当扩展相关维度信息
在DWD与DWS的基础上得到的个性化指标或主题相关宽表,用于OLAP、报表查询、数据分发等
轻度汇总层,在DWD或DWT的基础上进行相关维度的汇总,提高下游任务的计算效率
其他
机型基本维度
FTP
DWS
0 条评论
下一页