互联网大数据数仓架构
2020-07-31 14:22:00 2 举报互联网数仓架构
作者其他创作
大纲/内容
统计分析库
HA模式
client 2
KAFKA
Azkaban工作流
HiveSQL
.....
钉钉/短信/邮件告警
Granfama
增加
保障服务
sqoop
CDH部署
微服务
client 1
解析
Flink
中间层
大数据集群部署
加工
REDIS
ClickHouse
ES
manger bak
sparksql
node1
manger
HDFS
node2
Visualization
事件源
离线计算
flume
数仓元数据
分类
日志数据(服务后端日志/端上埋点日志)
计算层
脱敏
node3
业务数据
Hive
应用层
Mysql
实时计算
存储层
SparkSQL
清洗
Search
大数据统计/BI展示/用户标签系统/推荐系统
收藏
0 条评论
下一页
