模型搭建
2020-03-11 23:36:37 28 举报AI智能生成
维度建模
作者其他创作
大纲/内容
数据调研
业务调研
需求分析
协作维度建模研讨
4步骤维度设计过程
选择业务流程
划分粒度
原子粒度
同一事实表不混用粒度
确认维度
维度退化
星型模型
雪花模型
确认事实
事务事实表
周期快照事实表
累计快照事实表
需求调研
数据探查
高层模型
详细维度模型
维度模型审查与验证
最终设计文档
数据域划分
构建总线矩阵
明确统计指标
建立物理模型
定义规范
构建一致性逻辑维度及维度属性
构建一致性度量及指标(原子指标、派生指标)
数据仓库初始化
贴源层设计
构建原始数据层(ODS)
采集数据按天分区
采用lzo方式压缩
parquet列式存储
明细模型设计
构建一致性维表(DIM)
构建一致性事实表(DWD)
可以进行数据压缩
汇总模型设计
构建公用汇总模型(DWS)
构建应用汇总模型(ADS)
建库、装载数据
代码开发
数据业务逻辑处理
部署运维
生成ETL任务
运行状态监控
0 条评论
下一页
