An internal error occurred during: "Map/Reducelocation status updater".java.lang.NullPointerException


当我们运行wordcount代码时,出现报错,如下所示:

An internal error occurred during: "Map/Reducelocation status updater".java.lang.NullPointerException

 

原因:

代码中指定的输入输出文件夹,在hadoop的hdfs中并不存在。

解决方案:

在hdfs上创建输入输出文件夹,步骤如下所示:
1、进入hadoop下的bin目录
2、检查hdfs中是否已存在输出输入目录(output/input): hadoop fs -ls / 注意:后面的斜杠必须有,它表示你要检查的目录是hdfs的根目录。
3、创建输入目录:hadoop fs -mkdir /input
4、创建输出目录:hadoop fs -mkdir /output

 后序:运行wordcount代码时,需要指定输入目录及输出目录的,若我们按照此操作,该问题是不会出现的。问题出现时,需检讨我们的操作习惯。

 


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM