原文:Hadoop案例(十一)MapReduce的API使用

一学生成绩 增强版 数据信息 View Code 数据解释 数据字段个数不固定:第一个是课程名称,总共四个课程,computer,math,english,algorithm,第二个是学生姓名,后面是每次考试的分数 统计需求 统计每门课程的参考人数和课程平均分 统计每门课程参考学生的平均分,并且按课程存入不同的结果文件,要求一门课程一个结果文件,并且按平均分从高到低排序,分数保留一位小数 求出每门 ...

2018-06-02 14:11 0 1052 推荐指数:

查看详情

hadoop入门--简单的MapReduce案例

目录[-] 分析MapReduce执行过程 Mapper任务的执行过程详解 Reducer任务的执行过程详解 键值对的编号 例子:求每年最高气温 对分析的验证 分析MapReduce执行过程 MapReduce运行 ...

Thu Jun 16 02:06:00 CST 2016 2 4993
Hadoop学习之路(二十七)MapReduceAPI使用(四)

第一题 下面是三种商品的销售数据 要求:根据以上数据,用 MapReduce 统计出如下数据: 1、每种商品的销售总金额,并降序排序 2、每种商品销售额最多的三周 第二题:MapReduce 题 现有如下数据文件需要处理: 格式:CSV 数据样例: user_a ...

Sun Mar 25 00:06:00 CST 2018 1 2076
Hadoop集群(第9期)_MapReduce初级案例

1、数据去重    "数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞杂的任务都会涉及数据去重。下面就进入这个实例的MapReduce程序设计。 1.1 实例描述   对数据文件中的数据进行去重。数据文件中 ...

Mon Jun 04 21:22:00 CST 2012 46 110812
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM