Secondary NameNode:它究竟有什么作用？ 在Hadoop中，有一些命名不好的模块，Secondary NameNode是其中之一。从它的名字上看，它给人的感觉就像是NameNode的备份。但它实际上却不是。很多Hadoop的初学者都很疑惑，Secondary NameNode ...

1.概述 　　最近有朋友问我Secondary NameNode的作用，是不是NameNode的备份？是不是为了防止NameNode的单点问题？确实，刚接触Hadoop，从字面上看，很容易会把Secondary NameNode当作备份节点；其实，这是一个误区，我们不能从字面来理解，阅读官方文档 ...

NameNode工作机制 0）启动概述 Namenode启动时，首先将映像文件（fsimage）载入内存，并执行编辑日志（edits）中的各项操作。一旦在内存中成功建立文件系统元数据的映像，则创建一个新的fsimage文件和一个空的编辑日志。此时，namenode开始监听datanode请求 ...

方法一、使用namespaceID 1、在namenode节点上，将dfs.name.dir指定的目录中(这里是name目录)的内容情况，以此来模拟故障发生。 2、将集群关闭后，再重启我们看到namenode守护进程消失 ...

情景再现： 在修复hadoop集群某一个datanode无法启动的问题时，搜到有一个答案说要删除hdfs-site.xml中dfs.data.dir属性所配置的目录，再重新单独启动该datanode即可； 问题就出在这个误删除上，当时是在namenode的hadoop/hdfs/目录下，然后就 ...

0.0.0.0改为namenode的IP地址 3.重启hadoop，然后检查是否启动是 ...

昨天还好好的集群，今天早上来看又挂掉了，还好是家里的测试服务器集群。。。 首先，查看了Namenode的状态，发现两台Namenode只剩下一台了，赶紧到挂了的那台去查看了logs下的日志： 以上是hadoop-hadooptest-namenode ...

背景： 　　因业务要求进行了一次业务数据的全量采集，采集过程中集群namenode与journalNode通讯超时导致namenode挂掉。如下图 Error: starting log segment 11771414 failed for required journal ...