宏观上MapReduce可以分为以下三个阶段,如下图1所示。阶段1：input/map/partition/sort/spill阶段2：mapper端merge阶段3：reducer端merge/re ...

因为我们的应用中处理的记录都是固定长度的，就是说所有数据都是由固定长度的记录构成的。这里用recordSize表示一个记录的大小，记录在处理处理过程中要保持完整性，所以在设置Split大小时，开始的实 ...