大数据系统流程
2021-05-19 09:05:19 0 举报Hadoop、spark等与大数据相关的工作流程
作者其他创作
大纲/内容
图计算系统
Bolt
Spout
存储在内存
读取
HDFS读取
迭代1
云端存储
数据采集终端
Spark Streaming
Spark
HDFS写入
视频质量检测
内存计算系统
大数据处理系统
数据查询分析计算系统
视频编码压缩
高清视频数据压缩
视频预处理
批处理系统
迭代2
DataSource
被推向外部系统的结果
Hadoop
读取内存
事件分析
接收器
数据流
一个个小批次
中心处理端
流式计算系统
0 条评论
下一页
