3,MapReduce详解与源码剖析

  (TOC)

@
 3, MapReduce详解与源码剖析

  

1分阶段

  

? ? ? ? ?首先,接到hdf文件输入,在mapreduce中地图的任务开始之前,将文件按照指定的大小切割成若干个部分,每一部分称为一个分裂,默认是分裂的大小与块的大小相等,均为128年mb.split大小由minSize,最大容量,blocksize决定,以wordcount代码为例,以下主要是()方法
 3, mapreduce详解与源码剖析“> <br/>进入<代码> waitForCompletion(真正的)</代码>方法,进入<代码> submit() </代码>方法<br/> <img src=

  

2.1分区

  

看一下MapReduce自带的分区器HashPartitioner
 3, MapReduce详解与源码剖析“> <h2 class=3,MapReduce详解与源码剖析