离线数仓模型建设
2021-12-16 18:19:45 0 举报
大数据离线数仓模型建设
作者其他创作
大纲/内容
DWS层
明细数据层:结构和粒度与ODS层保持一致,对ODS层数据进行清洗(去除空值、重复值、超过范围等脏数据)。
ODS层
服务数据层:以DWD为基础,进行轻度汇总,一般聚焦到以车、设备日维度粒度的数据。
ADS层
应用数据层:面向实际数据需求,以DWD或DWS层数据为基础,组成的各种统计报警,最终提供给应用系统使用。
DWD层
原始数据层:存放原始数据,直接加载原始日志、数据,数据保持原貌不做任务处理。
离线数仓模型
0 条评论
下一页