大数据架构
2024-10-17 09:26:18 0 举报大数据架构，大数据
作者其他创作
大纲/内容
DWD层（数据仓库明细层）
Dolphinschedule
Sqoop：离线传输
ODS层（原始数据层）
数据采集层
FlinkCDC：实时传输
数据计算层
HDFS文件存储
Clickhouse集群
数仓建模层
SparkSql数据查询
DMS层（数据集市/轻度汇总层）
SparkCore内存计算
数据存储层
SparkStreaming实时计算
离线数仓
Azkaban
YARN资源管理
任务调度层
实时数仓
资源管理层
Flink
Flink实时计算
Flume：实时传输
SparkMLlib数据挖掘
MapReduce离线计算
HBase非关系型数据库
0 条评论
下一页
