大数据生态架构
2021-01-26 03:12:16 2 举报
大数据生态架构
作者其他创作
大纲/内容
Azkaban任务调度
数据计算层
资源管理层
Spark Core内存计算
Flume日志收集
视频、ppt等(非结构化数据)
Kafuka消息队列
业务模型层
文件日志(半结构化数据)
业务模型、数据可视化、业务应用
HBase非关系型数据库
MapReduce离线计算
Flink
Spark Streaming实时计算
Storm实时计算
YARN资源管理
HDFS文件存储
Sqoop数据传递
Spark Mlib数据挖掘
任务调度层
数据来源层
数据传输层
Spark Sql数据查询
数据存储层
数据库(结构化数据)
Zookeeper数据平台配置与调度
Oozie任务调度
Hive数据查询
0 条评论
下一页