大数据平台技术架构
2022-03-25 14:16:29 0 举报大数据技术架构图，覆盖主流hadoop生态圈技术栈
作者其他创作
大纲/内容
日志文件
mysql
HDFS(分布式文件系统）
神通
RPC（微服务通信协议）
Spark(分布式内存计算）
H5/VUE/Echarts（Web数据可视化）
统一访问接口（RESTAPI）
数据源
Zookeeper(分布式协调服务）
Hive(离线数据仓库）
Spark SQL(Spark标准SQL查询）
Spark Streaming(流式实时计算）
MySQL(关系型数据库）
...
mongodb
技术协议（HTTP/WebSocket）
Ambari(Hadoop集群管控系统）
数据分析
kettle/sqoop(数据交换）
Flume(日志采集系统）
批量数据采集
MapReduce(分布式离线计算）
HUE(UI系统）
数据服务
数据应用层
计算引擎
JPA(java对象映射标准框架）
Kubersphere(统一微服务和应用管理平台，统一运维）
Solar(全文检索引擎）
数据存储
关系型数据库
Hbase(分布式列数据库）
数据访问
数据协议（JSON）
Hive(Hadoop数据仓库工具）
非关系型数据库
采集层
统一资源管理框架YARN
0 条评论
下一页
