大数据数仓系统架构+自助式分析系统架构
2024-10-14 15:01:22 0 举报
数据平台,大数据架构,自助式分析师平台
作者其他创作
大纲/内容
Datax
认证登录
DWD
数据源层
数据分析
门店POS
实时即席查询ClickHouse
Hbase
数仓层
STG
数据采集层
MPP(GP、Vertica)
Mysql
实时数仓
zookeeper协调层
计算层
自助式分析平台
应用层
Bi
可视化
ODS
MaxWell
自助分析引擎
DWS
数据存储层
Excel/csv/txt
任务调度DolphinScheduler
统一资源调度框架YARN
大仓/生产
报表
pgsql/Mysql
内存计算框架Spark
hive
Flume
Log....
缓冲存储Kafka
原始数据
业务报表
ETL-数据采集
指标定义
数据应用
Spark
分布式文件系统HDFS
权限管控
鲜家/小程序
DIM
ADS
集群监控层
实时计算Flink
多维度分析
0 条评论
下一页