大数据中心
2019-11-22 09:45:48 0 举报
数据中心架构图
作者其他创作
大纲/内容
查询
数据存储
业务系统
数据处理存储
消费
数据接口服务
Flink实时数分析
查询服务 统计服务
存储
业务服务
离线数据分析Flink
获取数据
应用前端
源数据采集整体体系架构
hdfs
应用接口服务
mongodb
授权
配置服务
采集系统
插入
数据查询
kudu
爬虫系统
hbase
负载均衡
监控
生产
4+16G * 3
数据传输中心kafka
redis
统计查询
HMaster NameNodeResourceManager
日志采集(Flume)
数据清洗
8+32G * 2
Hbase
调度中心
MySql
日志采集
业务系统后台
统计服务
大数据中心
数据存储API
查询服务
报表服务
kafka消息队列
数据处理
存储服务
微信/微博
业务数据接口服务
大数据对外服务架构设计
互联网网站
数据解析
mysql
app应用
分析统计服务
16+64G * 3
分析结果存储
4+8G *2
实时分析服务
APP
路由
数据打标签
分布式文件存储
RegionServer DataNodeNodeManager
消息队列(kafak)
2+16G * 2
PC
kafka borkerZk JouranlNode
离线分析服务
数据缓存
数据清洗、格式化
授权服务
上报
elasticsearch
对外服务体系
数据队列
基础数据服务
监控服务
其他服务
web应用
数据服务
业务系统接口
智能分析服务
存储中心
0 条评论
下一页