大数据平台架构
2020-06-01 18:07:28 2 举报
大数据平台架构
作者其他创作
大纲/内容
Agent
(Zookeeper)
作业调度
数据平台监控系统同
数据流
SparkMLLib
YARN
实时计算
Nginx Log
离线计算
HDFS2分布式存储
冷备数据
实时榜单
数据实时采集
数据缓存重用: Kafka
实时监控预警
Http Agent
Broker
各终端日志
HBase
数据实时清洗(ETL)
报表
Data Service
其他 Log
Spark
用户画像库
Redis
Hive
数据应用层
MySQL
Biz Log
Storm
数据统一接入: Kafka
Elasticsearch
ESPer
Drools
Druid
MR
分布式协调服务
其他数据应用
0 条评论
下一页