大数据技术生态体系
2023-04-27 09:19:00 0 举报
大数据技术生态体系
作者其他创作
大纲/内容
资源管理层
Spark Mlib数据挖掘
Kafka消息队列
YARN资源管理
MapReduce离线计算
业务模型层
数据传输层
Spark Sql数据查询
HBase非关系型数据库
Oozie任务调度
数据计算层
Azkaban任务调度
Flume日志收集
数据库( 结构化数据 )
Storm实时计算
HDFS文件存储
Spark Streaming实时计算
Hive数据查询
任务调度层
文件日志( 半结构化数据 )
数据来源层
Sqoop数据传递
视频、ppt等( 非结构化数据)
Spark Core内存计算
数据存储层
ZK数据平台配置和调度
业务模型、数据可视化、业务应用
Flink
0 条评论
下一页