一、SecondaryNameNode概念： 光从字面上来理解，很容易让一些初学者先入为主：SecondaryNameNode(snn)就是NameNode(nn)的热备进程。其实不是。ssn是HDFS架构中的一个组成部分，但是经常由于名字而被人误解它真正的用途，其实它真正的用途 ...

1. NN 和 2NN 工作机制 NameNode 会产生在磁盘中备份元数据的FsImage; 每当元数据有更新或者添加数据时,修改内存中的元数据并追加到Edits中; SecondaryNameNode 专门用于合并 FsImage 和 Edits; 2. ...

NameNode&Secondary NameNode 工作机制 日志文件 目录结构： 查看fsimage文件和edits文件 chkpoint 检查 时间 参数 设置 hdfs-default.xml NameNode多目录配置 ...

NN与2NN工作机制 思考：NameNode中的元数据是存储在哪里的？ 假设存储在NameNode节点的硬盘中，因为经常需要随机访问和响应客户请求，必然效率太低，所以是存储在内存中 ...

环境： mac系统 + hadoop2.6.0-cdh5.7.0伪分布式 问题一： 在启动hdfs的secondarynamenode时，报错。 正常情况： 报错： 分析： /etc/hosts/中，我在破解idea中，加了一行 0.0.0.0 ...

1.概述 光从字面上来理解，很容易让一些初学者先入为主的认为：SecondaryNameNode(snn)就是NameNode(nn)的热备进程。其实不是。snn是HDFS架构中的一个组成部分，但是经常由于名字而被人误解它真正的用途，其实它真正的用途，是用来保存namenode中对HDFS ...

1.修改conf/core-site.xml 增加 fs.checkpoint.period表示多长时间记录一次hdfs的镜像。默认是1小时。 fs.checkpoint.size表 ...

　　Namenode当中的两个文件：edits和fsimage，fsimage文件包含了文件系统中的所有目录和文件inode的序列化信息。每个inode是一个文件或者目录的元数据的内部描述方式。因此该 ...