一.情况描述 启动hadoop后发现无法打开hdfs web界面， 打不开，于是jps发现少了一个namenode： 查看日志信息，发现如下报错： 二.解决方案 根据报错信息，发现是读取文件错误，后面即是文件路径名称，我这里是读取两个文件出错，然后删除日志中读取错误的文件 可以提前备份 我这里已经删除了 .md 可以不删 ，之后重启hdfs，可以发现namenode已启动 重新进入hdfs页面 ...
2022-01-04 00:55 0 1060 推荐指数：
不知道怎么回事，今天在启动集群时通过jps查看进程时始终有一个standby namenode进程无法启动。查看日志时报的是不能加载fsimage文件。日志截图如下： 日志报的很明显了是不能加载元数据信息，解决方案： 解决办法： 1、手动copy namenode ...
错误原文分析 文件操作超租期，实际上就是data stream操作过程中文件被删掉了。通常是因为Mapred多个task操作同一个文件，一个task完成后删掉文件导致。这个错误跟dfs.dat ...
使用spark2.4跟spark2.3 做替代公司现有的hive选项。 跑个别任务spark有以下错误 排查原因 发现是读取0 size 大小的文件时出错 并没有发 ...
我查看了网上的原因，把core.site.xml里的以下配置复制到了hdfs.site.xml里，三台机器都要复制，复制完以后在重新启动hadoop集群，嗯~~~启动了一个nn，还有一个nn没有起来，然后如果你也另一个namenode没有起来请看我另一篇文章吧！！！https ...
线程组基础信息都已经配置好，启动时报错，如下图： 排查原因：勾选了线程组调度器，并未设置参数 解决方案：取消勾选或者设置参数 ...
网上搜索各种方法，得知为由于Eclipse卡死或强制关闭之后会出现的情况 提供解决方法一： 查看log文件，发现有这样的信息： !MESSAGE The workspace exited with unsaved changes in the previous session ...
HDFS缓冲区 Fsimage 文件映射，Edits文件操作记录。 与ES的缓冲区不同，ES是维护数据的变更，而HDFS缓冲区是用于名结点维护文件系统元数据（目录树）的机制。 在HDFS集群中，NameNode结点相较于DataNode数量较少，往往几个Namenode支撑着几百个 ...
来自百度知道是不是eclipse版本太新引起的，我在更新之后也出现了这样的问题， 解决方法： 1，打开eclipse安装目录下的eclipse.ini文件； 2，打开的文本文件最后添加一行 --add-modules=ALL-SYSTEM 3，保存重新打开Eclipse。 解决方法： 1，打开 ...
