原文:Hadoop案例(十一)MapReduce的API使用

一學生成績 增強版 數據信息 View Code 數據解釋 數據字段個數不固定:第一個是課程名稱,總共四個課程,computer,math,english,algorithm,第二個是學生姓名,后面是每次考試的分數 統計需求 統計每門課程的參考人數和課程平均分 統計每門課程參考學生的平均分,並且按課程存入不同的結果文件,要求一門課程一個結果文件,並且按平均分從高到低排序,分數保留一位小數 求出每門 ...

2018-06-02 14:11 0 1052 推薦指數:

查看詳情

hadoop入門--簡單的MapReduce案例

目錄[-] 分析MapReduce執行過程 Mapper任務的執行過程詳解 Reducer任務的執行過程詳解 鍵值對的編號 例子:求每年最高氣溫 對分析的驗證 分析MapReduce執行過程 MapReduce運行 ...

Thu Jun 16 02:06:00 CST 2016 2 4993
Hadoop學習之路(二十七)MapReduceAPI使用(四)

第一題 下面是三種商品的銷售數據 要求:根據以上數據,用 MapReduce 統計出如下數據: 1、每種商品的銷售總金額,並降序排序 2、每種商品銷售額最多的三周 第二題:MapReduce 題 現有如下數據文件需要處理: 格式:CSV 數據樣例: user_a ...

Sun Mar 25 00:06:00 CST 2018 1 2076
Hadoop集群(第9期)_MapReduce初級案例

1、數據去重    "數據去重"主要是為了掌握和利用並行化思想來對數據進行有意義的篩選。統計大數據集上的數據種類個數、從網站日志中計算訪問地等這些看似龐雜的任務都會涉及數據去重。下面就進入這個實例的MapReduce程序設計。 1.1 實例描述   對數據文件中的數據進行去重。數據文件中 ...

Mon Jun 04 21:22:00 CST 2012 46 110812
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM