hadoop fs -put上传文件失败 报错信息：（test文件夹是已经成功建好的） Linux报的错误是datanode节点不存在，但是去slave机器上jps发现datanode运行的好好的。然后去网上查找资料，有博客说是因为没关闭防火墙，没有访问权限， 好嘛，又去关防 ...

做作业的过程中发现，把一节点停掉，dfsadmin和50070都无法马上感知到一个data node已经死掉 HDFS默认的超时时间为10分钟+30秒。这里暂且定义超时时间为timeout计算公式为：timeout = 2 * heartbeat.recheck.interval + 10 ...

...

问题： hadoop集群不管怎么启动在hadoop管理界面都看到只有一个datanode 原因： 我hadoop集群搭建了三台机器，一台master,2台slave,slave1,slave2。slave1中间出了问题，被我删除之后，又从slave2复制了一台重新命名为slave1(这是 ...

原因是clusterID不一致 删除tmp下的内容 从/home/hdp/hadoop/name/current/VERSION 获得clusterID 修改到 /home/hdp/hadoop/data/current/VERSION 修改保持一致，然后重启 ...

吐槽一下，苹果的质量管控越来越差了。 macOS Sierra有时突然或升级后会遇到wifi不停重连连不上问题，现象为不停地连接wifi。 网上有人说删除 /Library/Preferen ...

Hadoop的datanode无法启动 hdfs-site中配置的dfs.data.dir为/usr/local/hadoop/hdfs/data 用bin/hadoop start-all.sh启动Hdoop，用jps命令查看守护进程时，没有DataNode。 访问http ...

　　yarn集群的webui地址为:http://rm:8088 　　执行任务后，任务的开始时间和结束时间都是utc时间，查看很不方便。 　　查找相关资料发现hadoop有补丁包，补丁地址:https://issues.apache.org/jira/browse/YARN-1998 ...