大数据技术生态体系
2024-01-05 11:43:35 0 举报
以前梳理的梳理大数据生态使用，可以在这个基础上根据自身业务进行调整
作者其他创作
大纲/内容
Spark Core内存计算
Spark Streaming实时计算
HDFS文件存储
业务模型、数据可视化、业务应用
文件日志（半结构化数据）
HBase非关系型数据库
Spark Sql数据查询
任务调度层
Flink
视频、ppt等（非结构化数据）
MapReduce离线计算
zookeeper数据平台配置和调度
Storm实时计算
YARN资源管理
Azkaban任务调度
数据来源层
Kafka消息队列
Spark Mlib数据挖掘
Hive数据查询
Sqoop数据传递
业务模型层
Flume日志收集
数据库（结构化数据）
数据传输层
数据计算层
Oozie任务调度
资源管理层
数据存储层
0 条评论
回复 删除
下一页
