总体大数据技术架构--示例
2020-08-07 17:41:46 20 举报
大数据业务平台总体架构图
作者其他创作
大纲/内容
HTTP/HTTPS
SpringCloud
总体大数据架构体系
用户服务
HDFS
DDOS高防IP
API
REST
Docker
.
FlinkSql/Streaming
日志服务
结构化数据
去重
公共服务
智能数据平台
Ribbon
证书
开发平台
通信服务
WebSocket
筛选
运维保障
配置中心
Caffe
....
LogStash
jenkins
消息总栈
数据质量
kettle
Sqoop
RPC
开发IDE
实时数据
调度工具
智能调度
Hbase
接入服务
+
警告监控
上传服务
数据源
订单服务
RDS
WAF防火墙
Mahout
Map/Reduce
RDBMS
DataHub
运维自动化
机器学习
大数据统计&数据挖掘&行业报告&信用体系
GitLab
统计分析库
转换
商品服务
OSS
离线计算
Kubernetes
中间层
Zuul
实时计算
势态感知SAS
Flume
数据应用层
API网关
统计服务
加工
PostgreSql
Load
网络层
清洗
解析
UBl打分
多媒体转码
MySql集群
Feign
Hystrix
模型训练
Django
kafka
MQ
AI
模板引擎
...
Redis集群
CDN
增加
数据服务层
管理服务
报告服务
Mongo集群
通讯层
ES
业务数据,流水数据,日志数据
Dataworks
ZABBIX
TCP/UDP
业务服务
分类
Redis
Sklearn
元数据管理
Eurkea
认证
业务平台架构体系
负载均衡
存储层
非结构数据
计算层
SparkSql/RM
定时任务
Tensorflow
收藏
0 条评论
下一页