花费 16 ms
Hadoop Streaming框架使用(一)

Streaming简介 Streaming框架允许任何程序语言实现的程序在Hadoop MapReduce中使用,方便已有程序向Hadoop平台移植。因此可以说对于hadoop的扩展性意义重 ...

Mon Jan 16 19:47:00 CST 2012 1 32591
Hadoop Streaming框架使用(三)

  前两篇文章介绍了Hadoop Streaming框架的使用方法。由于篇幅所限,并没有介绍其中的高级使用方法,但是有一些用法还是相当常见的。今天对一些高级用法进行一个简单的说明,希望能给大家一些启发 ...

Tue Jan 17 07:20:00 CST 2012 6 17747
Hadoop 实现多个数据表的join操作

今天在使用hadoop时遇到一个需求,要将具有一定关系的若干个大表进行合并join,乍看起来比较困难。但是仔细分析了一下,还是可以比较好的解决问题的。况且在海量数据处理中,这是一个非常普遍常见的需求。 ...

Fri Mar 02 01:13:00 CST 2012 5 8125
Hadoop错误码速查

转自: http://blog.csdn.net/liuxincumt/archive/2010/12/15/6076903.aspx 经常遇到的exception是:PipeMapRe ...

Sat Jan 14 02:20:00 CST 2012 0 5037
Hadoop Streaming框架使用(二)

上一篇文章介绍了Streaming的各种参数,本文具体介绍使用方法。 提交hadoop任务示例: $HADOOP_HOME/bin/hadoop streaming \ -input /u ...

Mon Jan 16 20:49:00 CST 2012 0 3935

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM