花费 47 ms
MapReduce实例(数据去重)

数据去重: 原理(理解):Mapreduce程序首先应该确认<k3,v3>,根据<k3,v3>确定<k2,v2>,原始数据中出现次数超过一次的数据在输 ...

Wed Feb 22 21:23:00 CST 2017 2 5570
MapReduce部分源码解读(一)

TextInputFormat 父类(TextInputFormat本身含义为把每一行解析成键值对) FileInputFor ...

Thu Feb 16 23:30:00 CST 2017 2 1783
MapReduce分组

分组:相同key的value进行分组 例子:如下输入输出,右边的第一列没有重复值,第二列取得是当第一列相同时第二例取最大值 分析:首先确定<k3,v3& ...

Wed Feb 22 03:17:00 CST 2017 0 1416
MapReduce的计数器

第一部分.Hadoop计数器简述 hadoop计数器: 可以让开发人员以全局的视角来审查程序的运行情况以及各项指标,及时做出错误诊断并进行相应处理。 内置计数器(MapRedu ...

Fri Feb 17 18:40:00 CST 2017 0 1348

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM