大数据应用总体技术架构
2021-06-09 16:46:25 8 举报
大数据架构
作者其他创作
大纲/内容
ETL输出
数据整合平台
搜索服务
Redis
分析应用系统
数据库实时同步(binlog)
调度监控
clickhouse
数据可视化引擎
数据应用层
ETL输入
网关/数据采集平台
数据服务工具
数据库
大数据消息中间件(Kafka)
搜索引擎存储ES
埋点/tbox数据
机器学习
离线计算
计算、搜索(Spark,es)
查询服务引擎
外部数据采集服务
质量管理
爬虫
数据订阅
工具平台
数据计算层
数据服务层
流计算服务
数据采集层
规则引擎(Drools)
推送服务
业务应用系统
门户
用户数据模型
流计算(Spark/Flink)
数据服务存储
非关系型数据库Hbase
挖掘分析平台
安全管理
批量数据抽取(DataX)
关系型数据库Mysql
0 条评论
下一页