首先得好看有多少损坏的文件，其中需要使用Hadoop的fsck命令： 以下是官方解释 用法：hadoop fsck 路径 以上将会展示该路径下所有受损的文件 最后用 delete 可以清除掉所有受损的文件 ...
2018-11-30 17:16 0 4224 推荐指数：
在Hive命令行执行查询时，出现错误 Error: java.io.IOException: org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block ...
: org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block: BP-35642051-19 ...
检测缺失块 查看上面某一个文件的情况 解决方法 如果文件不重要，可以直接删除此文件；或删除后重新复制一份到集群中 如果不能删除，需要从上面命令中找到发生在哪台机器上，然后到此机器上查看日志。 参考 http ...
检测缺失块 查看某一个文件的情况 手动修复 自动修复 在DN节点执⾏directoryscan 删除所有损坏的块的数据文件，会导致数据彻底丢失 ...
： 在HDFS中，数据块默认的大小是128M，当我们往HDFS上上传一个300多M的文件的时候，那么 ...
登录到有无效块的机器后操作。 hdfs fsck / 后面的路径是指定检查哪个目录下有无效块，根据丢失文件目录可以细化，以提高检查速度 该命令会返回 FSCK started by hdfs (auth:SIMPLE) from /xxx.xxx.xxx for path ...
： 在Apache Hadoop中默认是64M，Cloudera Hadoop版本中默认是128M。 ps：顺 ...
