hbase hbck修复hbase使用说明

it2026-08-13  11

原文地址:

https://www.cnblogs.com/xjh713/p/6913042.html?utm_source=itdadao&utm_medium=referral

 

hbase hbck参数

-help                                ##查看命令帮助

-fix                                   ##用于修复region assignments错误;被 -fixAssignments替换-fixAssignments     

-fixMeta                           ##用于修复meta表的问题,前提是HDFS上面的region info信息有并且正确。

-fixHdfsHoles                  ##修复region holes(空洞,某个区间没有region)

-fixHdfsOrphans             ##修复Orphan region(hdfs上面没有.regioninfo的

-fixHdfsOverlaps             ##修复region overlaps(区间重叠)

-fixVersionFile                 ##修复缺失hbase.version文件的

-maxMerge <n>              ##n默认是5,当region有重叠是,需要合并region,一次合并的region数最大不超过这个

-sidelineBigOverlaps      ##当修复region overlaps问题时,允许跟其他region重叠次数最多的一些region不参与(修复后,可以把没有参与的数据通过bulk load加载到相应的region)     

-maxOverlapsToSideline <n>      ##n默认是2,当修复region overlaps问题时,一组里最多允许多少个region不参与     

-repair                          ##相当于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans -fixHdfsOverlaps -fixVersionFile -sidelineBigOverlaps     

-repairHoles                ##相当于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans     

 

解决情况

(1)缺失hbase.version文件               加上选项 -fixVersionFile 解决    

(2)如果一个region即不在META表中,又不在hdfs上面,但是在regionserver的online region集合中               加上选项 -fixAssignments 解决     

(3)如果一个region在META表中,并且在regionserver的online region集合中,但是在hdfs上面没有               加上选项 -fixAssignments -fixMeta 解决,( -fixAssignments告诉regionserver close region),( -fixMeta删除META表中region的记录)     

(4)如果一个region在META表中没有记录,没有被regionserver服务,但是在hdfs上面有               加上选项 -fixMeta -fixAssignments 解决,( -fixAssignments 用于assign region),( -fixMeta用于在META表中添加region的记录)     

(5)如果一个region在META表中没有记录,在hdfs上面有,被regionserver服务了              加上选项 -fixMeta 解决,在META表中添加这个region的记录,先undeploy region,后assign     

(6)如果一个region在META表中有记录,但是在hdfs上面没有,并且没有被regionserver服务              加上选项 -fixMeta 解决,删除META表中的记录     

(7)如果一个region在META表中有记录,在hdfs上面也有,table不是disabled的,但是这个region没有被服务               加上选项 -fixAssignments 解决,assign这个region     

(8)如果一个region在META表中有记录,在hdfs上面也有,table是disabled的,但是这个region被某个regionserver服务了               加上选项 -fixAssignments 解决,undeploy这个region     

(9)如果一个region在META表中有记录,在hdfs上面也有,table不是disabled的,但是这个region被多个regionserver服务了               加上选项 -fixAssignments 解决,通知所有regionserver close region,然后assign region     

(10)如果一个region在META表中,在hdfs上面也有,也应该被服务,但是META表中记录的regionserver和实际所在的regionserver不相符               加上选项 -fixAssignments 解决     

(11)region holes           需要加上 -fixHdfsHoles ,创建一个新的空region,填补空洞,但是不assign 这个 region,也不在META表中添加这个region的相关信息     

(12)region在hdfs上面没有.regioninfo文件           -fixHdfsOrphans 解决     

(13)region overlaps           需要加上 -fixHdfsOverlaps     

说明:      (1)修复region holes时,-fixHdfsHoles 选项只是创建了一个新的空region,填补上了这个区间,还需要加上-fixAssignments -fixMeta 来解决问题,( -fixAssignments 用于assign region),( -fixMeta用于在META表中添加region的记录),所以有了组合拳 -repairHoles 修复region holes,相当于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans     

(2) -fixAssignments,用于修复region没有assign、不应该assign、assign了多次的问题     

(3)-fixMeta,如果hdfs上面没有,那么从META表中删除相应的记录,如果hdfs上面有,在META表中添加上相应的记录信息     

(4)-repair 打开所有的修复选项,相当于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans -fixHdfsOverlaps -fixVersionFile -sidelineBigOverlaps     

  (5)   hbck从  hdfs目录、META、RegionServer 这三处获得region的Table和Region的相关信息,根据这些信息判断并repair    

 

实例

查看hbasemeta情况    hbase hbck    

1.重新修复hbase meta表(根据hdfs上的regioninfo文件,生成meta表)    

hbase hbck -fixMeta    

2.重新将hbase meta表分给regionserver(根据meta表,将meta表上的region分给regionservere)    

hbase hbck -fixAssignments      当出现漏洞 

hbase hbck -fixHdfsHoles            ##新建一个region文件夹

hbase hbck -fixMeta                    ##根据regioninfo生成meta表

hbase hbck -fixAssignments        ##分配region到regionserver上  

 

 

 

 

 

 

 

 

 

 

最新回复(0)