MapReduce流程图(九阴真经)
2020-11-18 20:14:48 0 举报MapReduce流程图
作者其他创作
大纲/内容
GroupingComparter
Combinner可选
1号区
0号区
FileOutputFormat
SequenceOutputFormat
reduce聚合处理业务
根据不同格式输出结果
Fetcher
run方法
IntputSplit
META
...
HashPartitioner分区器
文件系统
迭代器
KV
区内聚合运算(要求符合交换律和结合律)
MapOutputBuffer
ReducerTask
数据库
Merger
map方法处理业务逻辑
MapTask
RecordReader 读数据一行返回一对KV
收藏
收藏
0 条评论
下一页
