原文:记一次hbase陷入永久RIT

事情大概是这样的: 存储程序在往hbase里存储的时候报错,大概都是region的问题,count表也能看到有错误 然后百度用hbck修复,中间有人说了个先disable表,我把我所有的表都先disable了,于是乎,噩梦开始了,发现hbck修复一直报错,在等待region重新分配 我领导说,谁告诉你hbck修复要disable 当时我就傻眼了,然后我想enable,还是报错 按照网上说的删除zo ...

2019-09-10 10:41 1 362 推荐指数:

查看详情

HBase 永久RIT(Region-In-Transition)问题

2018-02-28 HBase 永久RIT(Region-In-Transition)问题:异常关机导致HBase表损坏和丢失,大量Regions 处于Offline状态,无法上线。 问题1:启动HBase时,HBase Regionserver Web UI,一直停留在 ...

Thu Mar 01 02:05:00 CST 2018 0 12393
一次HBase的NotServingRegionException问题

1. 问题 在hbase测试集群上,访问一些hbase表,均报类似下面的错误:region不可用 2. 排查问题 首先怀疑是HBase集群内正在进行Region的Split和不同机器之间的Region Balance,这时候Region是不可用的状态,但是Region切分和再均衡持续时间 ...

Fri Oct 30 05:41:00 CST 2020 0 720
Hbase合并Region的过程中出现永久RIT的解决

在合并Region的过程中出现永久RIT怎么办?笔者在生产环境中就遇到过这种情况,在批量合并Region的过程中,出现了永久MERGING_NEW的情况,虽然这种情况不会影响现有集群的正常的服务能力,但是如果集群有某个节点发生重启,那么可能此时该RegionServer上的Region是没法均衡 ...

Sat Mar 30 23:47:00 CST 2019 0 530
一次 HBase Master is initializing 问题处理

问题 hbase shell中建立建表出错 分析 org.apache.hadoop.hbase.PleaseHoldException: Master is initializing代表Master正在初始化中,出现这种错误的原因有很多,查看hbase web界面,发现如下提示 ...

Tue Nov 17 05:11:00 CST 2020 0 1526
一次Hbase数据迁移和遇到的问题

因为集群不互通,所以采用手动方式迁移 1、下载目标集群数据 2、远程复制数据,可以压缩一下 scp *** 3、上传数据到HDFS,一定要切换到hbase用户,不然会有错误 4、修复元数据等 遇到的问题 ...

Fri Aug 31 18:58:00 CST 2018 0 757
一次protobuf和hbase自带protobuf版本冲突的解决

使用protobuf生产模板代码,使用的版本是: hbase的版本是:1.2.1-cdh5.1.4.0 如果打印maven依赖树的话,可以看到hbase的protobuf版本是2.5.0 这种情况下打包不会报错,但是一旦运行就会出错: 那么应该咱么解决 ...

Wed Jul 03 02:38:00 CST 2019 0 1937
一次Hbase查询速度优化经历

项目背景:   在这次影像系统中,我们利用大数据平台做的是文件(图片、视频等)批次的增删改查,每个批次都包含多个文件,上传完成以后要添加文件索引(文件信息及批次信息),由于在Hbase存储的过程中,每个文件都对应一个文件rowKey,一个批次就会有很多个RoweKey,查询的下载的时候就必须 ...

Mon Jan 08 22:29:00 CST 2018 1 12779
Hbase RIT故障修复

业务场景: RocketMQ+Storm+Hbase 组件版本: RocketMQ:3.4.6 Storm:1.2.1 Hbase:1.2.1 1. 问题描述 4月15号早上发现业务系统前一天数据量明显偏低,查看系统发现storm入Hbase的TPS很低,甚至为0。 2. 问题定位 ...

Fri Jan 03 23:52:00 CST 2020 0 1630
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM