大数据架构图1
2020-10-20 10:03:19 1 举报
企业常用大数据架构图
作者其他创作
大纲/内容
实时监控（ambari、clouder manger、ganglia）
zookeeper分布式协作服务
kettle ETL
MapReduce分布式计算引擎
sqoop数据同步
Hadoop大数据平台
数据服务
hbase分布式列数据库
storm/spark streaming/flink实时流计算框架
离线计算服务
SQL on hadoop(hive hue、impala、spark SQL、drill、druid、presto、Tez....)
实时计算服务
spark基于内存计算引擎
kafka分布式消息队列
数据库
HDFS分布式文件系统
yarn资源调度系统
前端埋点
数据开放平台
flume日志收集
数据采集
数据存储&计算
数据源
datax
springboot/python restful数据服务
oozie/azkaban调度
数据展示
前端 js 数据可视化
phonix/kylin/tableau查询分析
sparkmlib机器学习
网络爬虫
0 条评论
回复 删除
下一页
