mapreduce实现wordcount
2019-08-22 10:48:48 0 举报
mapreduce实现wordcount
作者其他创作
大纲/内容
Map
shuffle
规约
新的<k2 v2>
<K1 V1>K1:偏移量V1:文本数组
InputFormatTextInutFormat
<k2 v2>
分区
hello 4word 3hadoop 6hdfs 1
读取文件
排序
普通文本文件
分组
OutPutFormatTextOutPutFormat
原文件
Reduce阶段
k3 v3
shuffle阶段
hello 1word 1hadoop 1hello 1word 1
结果输出
收藏
0 条评论
回复 删除
下一页
