zpjx 发表于 2016-12-11 07:11:50

hadoop什么时候开始执行reduce操作

hadoop MapReduce在reduce阶段分为三步，即：shuffle，sort，reduce。在mapred-site.xml中有个参数可以调整什么时候开始执行reduce操作，mapred.reduce.slowstart.completed.maps,默认值是0.95，即在mapper执行完95%时开始执行reduce操作，我们可以根据自己的需要调整，0.0到1.00之间。
页: [1]
查看完整版本: hadoop什么时候开始执行reduce操作