hbase_使用中遇到的问题（NotServingRegionException）

清疚 2022-05-25 08:05 220阅读 0赞

NotServingRegionException错误

系统运行一段时间后：

**刚开始重复报：**

table=harve\_visited\_user, attempt=35/35 failed=1ops, last exception: org.apache.hadoop.hbase.NotServingRegionException: org.apache.hadoop.hbase.NotServingRegionException: Region harve\_visited\_user,7fceca2e-f5a1-4392-8f79-7ef3162f3421,1487091257232.fd14bb2aa7e374ff1338594a118652b0. is not online on z1,60040,1488419186595

**后来报：**

5095: Exception occured when updating object data.: Failed 1 action:

NotServingRegionException: 1 time, ;

NotServingRegionException异常主要有两种原因：

1.region正在分裂时对数据的操作会抛此异常

2.region数据损坏时

如果使用shell命令操作hbase，获取harve\_visited\_user表记录数：

![20180510175020674][]

运行到267000行后报错：

![20180510175038260][]

ERROR: org.apache.hadoop.hbase.NotServingRegionException: Region harve\_visited\_user,

7fceca2e-f5a1-4392-8f79-7ef3162f3421,1487091257232.fd14bb2aa7e374ff1338594a118652b0. is not online on z1,60040,1488419186595

可以看见是rowkey为7fceca2e-f5a1-4392-8f79-7ef3162f3421的记录出了问题，很可能是今天公司运维在部线，导致机房突然断电，很可能此时正在操作7fceca2e-f5a1-4392-8f79-7ef3162f3421，导致记录不完整。

**这里应该是原因2：**  
[数据][Link 1]损坏导致当前数据存放的regin无法使用，使用hadoop fsck[检查][Link 2]是否有损坏块

使用hadoop fsck / 或者hadoop fsck /hbase/data检查数据健康状况：

![2018051017553349][]

可以看到，确实是harve\_visited\_user表丢了一块数据。

没有冗余备份,只能删除损坏的文件,使用命令: hadoop fsck -delete

刚开始玩hbase时胆子小，不敢使用上面的命令，加了一些路径，

![20180510175637636][]

执行完后再检查：

![20180510175659579][]

发现提示HEALTHY，健康。

重启hbase问题解决。

注：重启后如果还有问题，再检查看，同时参见PleaseHoldException异常的处理方案。

[20180510175020674]: /images/20220525/89a37cd7ef494ddc8beee207bf9478b1.png
[20180510175038260]: /images/20220525/dd8a614bd71343aba424207459f4e3b9.png
[Link 1]: http://cpro.baidu.com/cpro/ui/uijs.php?rs=1&u=http://www.aboutyun.com/thread-7738-1-1.html&p=baidu&c=news&n=10&t=tpclicked3_hc&q=92051019_cpr&k=%CA%FD%BE%DD&k0=%CA%FD%BE%DD%BF%E2&kdi0=8&k1=server&kdi1=1&k2=master&kdi2=1&k3=%CA%FD%BE%DD&kdi3=8&k4=%BC%EC%B2%E9&kdi4=32&sid=e3fb28f95ee8e92&ch=0&tu=u1692056&jk=e941660593f0bf92&cf=29&fv=14&stid=9&urlid=0&luki=4&seller_id=1&di=128
[Link 2]: http://cpro.baidu.com/cpro/ui/uijs.php?rs=1&u=http://www.aboutyun.com/thread-7738-1-1.html&p=baidu&c=news&n=10&t=tpclicked3_hc&q=92051019_cpr&k=%BC%EC%B2%E9&k0=%CA%FD%BE%DD%BF%E2&kdi0=8&k1=server&kdi1=1&k2=master&kdi2=1&k3=%CA%FD%BE%DD&kdi3=8&k4=%BC%EC%B2%E9&kdi4=32&sid=e3fb28f95ee8e92&ch=0&tu=u1692056&jk=e941660593f0bf92&cf=29&fv=14&stid=9&urlid=0&luki=5&seller_id=1&di=128
[2018051017553349]: /images/20220525/38e83f980e0145438c31890f6e8f1b72.png
[20180510175637636]: /images/20220525/442d05eea7a0403d9561fc6ff6fb2a5e.png
[20180510175659579]: /images/20220525/f60dc0878f5f40c89a9cb3478bb68d84.png