hbase hbck的参数使用

  1. http://blog.csdn.net/liliwei0213/article/details/53639275新版本的 
    hbck 能够修复各类错误,修复选项是:     
    (1)-fix,向下兼容用,被-fixAssignments替代     
    (2)-fixAssignments,用于修复region assignments错误     
    (3)-fixMeta,用于修复meta表的问题,前提是HDFS上面的region info信息有而且正确。     
    (4)-fixHdfsHoles,修复region holes(空洞,某个区间没有region)问题     
    (5)-fixHdfsOrphans,修复Orphan region(hdfs上面没有.regioninfo的region)     
    (6)-fixHdfsOverlaps,修复region overlaps(区间重叠)问题     
    (7)-fixVersionFile,修复缺失hbase.version文件的问题     
    (8)-maxMerge <n> (n默认是5),当region有重叠是,须要合并region,一次合并的region数最大不超过这个值。     
    (9)-sidelineBigOverlaps ,当修复region overlaps问题时,容许跟其余region重叠次数最多的一些region不参与(修复后,能够把没有参与的数据经过bulk load加载到相应的region)     
    (10)-maxOverlapsToSideline <n> (n默认是2),当修复region overlaps问题时,一组里最多容许多少个region不参与     
    因为选项较多,因此有两个简写的选项     
    (11) -repair,至关于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans -fixHdfsOverlaps -fixVersionFile -sidelineBigOverlaps     
    (12)-repairHoles,至关于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans     
         
    新版本的 hbck     
    (1)缺失hbase.version文件     
     加上选项 -fixVersionFile 解决     
    (2)若是一个region即不在META表中,又不在hdfs上面,可是在regionserver的online region集合中     
     加上选项 -fixAssignments 解决     
    (3)若是一个region在META表中,而且在regionserver的online region集合中,可是在hdfs上面没有     
     加上选项 -fixAssignments -fixMeta 解决,( -fixAssignments告诉regionserver close region),( -fixMeta删除META表中region的记录)     
    (4)若是一个region在META表中没有记录,没有被regionserver服务,可是在hdfs上面有     
    加上选项 -fixMeta -fixAssignments 解决,( -fixAssignments 用于assign region),( -fixMeta用于在META表中添加region的记录)     
    (5)若是一个region在META表中没有记录,在hdfs上面有,被regionserver服务了     
    加上选项 -fixMeta 解决,在META表中添加这个region的记录,先undeploy region,后assign     
    (6)若是一个region在META表中有记录,可是在hdfs上面没有,而且没有被regionserver服务     
    加上选项 -fixMeta 解决,删除META表中的记录     
    (7)若是一个region在META表中有记录,在hdfs上面也有,table不是disabled的,可是这个region没有被服务     
    加上选项 -fixAssignments 解决,assign这个region     
    (8)若是一个region在META表中有记录,在hdfs上面也有,table是disabled的,可是这个region被某个regionserver服务了     
    加上选项 -fixAssignments 解决,undeploy这个region     
    (9)若是一个region在META表中有记录,在hdfs上面也有,table不是disabled的,可是这个region被多个regionserver服务了     
    加上选项 -fixAssignments 解决,通知全部regionserver close region,而后assign region     
    (10)若是一个region在META表中,在hdfs上面也有,也应该被服务,可是META表中记录的regionserver和实际所在的regionserver不相符     
    加上选项 -fixAssignments 解决     
         
    (11)region holes     
    须要加上 -fixHdfsHoles ,建立一个新的空region,填补空洞,可是不assign 这个 region,也不在META表中添加这个region的相关信息     
    (12)region在hdfs上面没有.regioninfo文件     
    -fixHdfsOrphans 解决     
    (13)region overlaps     
    须要加上 -fixHdfsOverlaps     
           
    说明:     
    (1)修复region holes时,-fixHdfsHoles 选项只是建立了一个新的空region,填补上了这个区间,还须要加上-fixAssignments -fixMeta 来解决问题,( -fixAssignments 用于assign region),( -fixMeta用于在META表中添加region的记录),因此有了组合拳 -repairHoles 修复region holes,至关于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans     
    (2) -fixAssignments,用于修复region没有assign、不该该assign、assign了屡次的问题     
    (3)-fixMeta,若是hdfs上面没有,那么从META表中删除相应的记录,若是hdfs上面有,在META表中添加上相应的记录信息     
    (4)-repair 打开全部的修复选项,至关于-fixAssignments -fixMeta -fixHdfsHoles -fixHdfsOrphans -fixHdfsOverlaps -fixVersionFile -sidelineBigOverlaps     
         
    新版本的hbck从(1)hdfs目录(2)META(3)RegionServer这三处得到region的Table和Region的相关信息,根据这些信息判断并repair    服务器

    示例:ide

    [plain] view plain copy.net

    查看hbasemeta状况    
    hbase hbck    
    1.从新修复hbase meta表(根据hdfs上的regioninfo文件,生成meta表)    
    hbase hbck -fixMeta    
    2.从新将hbase meta表分给regionserver(根据meta表,将meta表上的region分给regionservere)    
    hbase hbck -fixAssignments    server

    [plain] view plain copyblog

    当出现漏洞    
    hbase hbck -fixHdfsHoles  (新建一个region文件夹)    
    hbase hbck -fixMeta        (根据regioninfo生成meta表)    
    hbase hbck -fixAssignments  (分配region到regionserver上)  io

    [plain] view plain copytable

    1、故障缘由    
    IP为10.191.135.3的服务器在2013年8月1日出现服务器从新启动的状况,致使此台服务器上的全部服务均中止。从而造meta

相关文章
相关标签/搜索