HBASE 高可用

为了保证HBASE是高可用的,所依赖的HDFS和zookeeper也要是高可用的.
有关于Hadoop HA高可用可参考: https://blog.csdn.net/weixin_44455125/article/details/122524147
通过参数hbase.rootdir指定了连接到Hadoop的地址,mycluster表示为Hadoop的集群.
HBASE本身的高可用很简单,只要在一个健康的集群其他节点通过命令 hbase-daemon.sh start master启动一个Hmaster进程,这个Hmaster会自动成为backupMaster.

下载安装

wget https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/2.4.9/hbase-2.4.9-bin.tar.gz --no-check-certificate

tar xf hbase-2.4.9-bin.tar.gz -C /opt/

修改配置

cd /opt/hbase-2.4.9/conf/

vim regionservers

emr-worker-01
emr-worker-02

echo 'export HBASE_HOME=/opt/hbase-2.4.9/' >>/etc/profile
echo 'export PATH=${PATH}:${HBASE_HOME}/bin' >>/etc/profile
source /etc/profile

hbase-env.sh

#!/usr/bin/env bash
source /etc/profile
#
#/**
# * Licensed to the Apache Software Foundation (ASF) under one

hbase-site.xml

<configuration>
  
  <property>
    <name>hbase.cluster.distributedname>
    <value>falsevalue>
  property>
  <property>
    <name>hbase.tmp.dirname>
    <value>./tmpvalue>
  property>
  <property>
    <name>hbase.unsafe.stream.capability.enforcename>
    <value>falsevalue>
  property>
<property>
    
    <name>hbase.rootdirname>
    <value>hdfs://mycluster:8020/HBasevalue>
property>
<property>
    
    <name>hbase.cluster.distributedname>
    <value>truevalue>
property>
<property>
    
    <name>hbase.master.portname>
    <value>16000value>
property>
<property>
    
    <name>hbase.zookeeper.quorumname>
    <value>emr-header-01,emr-header-02,emr-worker-01value>
property>
<property>
    
    <name>HBase.zookeeper.property.dataDirname>
    <value>/data/zookeepervalue>
property>
configuration>

scp /etc/profile emr-header-02:/etc/
scp /etc/profile emr-worker-01:/etc/
scp /etc/profile emr-worker-02:/etc/
scp -r /opt/hbase-2.4.9 emr-header-02:/opt/
scp -r /opt/hbase-2.4.9 emr-worker-01:/opt/
scp -r /opt/hbase-2.4.9 emr-worker-02:/opt/

emr-header-02节点执行

source /etc/profile
hbase-daemon.sh start master

访问emr-header-02节点

http://emr-header-01:16010/master-status

hbase默认只有一个master节点,而如果想要做高可用,只需要在其他节点上重新启动一个Hmaster,则会默认会成为备用的节点.

Backup Masters中ServerName有一个emr-header-02,即为成功.接下来,就能直接shutdown掉主节点测试检查,看是否会自动切换成主节点了.

如果不想每次启动都手动在从节点启动backupHmaster进程,可以加入到启动脚本中:

cd /opt/hbase-2.4.9/bin/
vim start-hbase.sh

文件最下面的if中加入:

if [ "$distMode" == 'false' ]
then
  "$bin"/hbase-daemon.sh --config "${HBASE_CONF_DIR}" $commandToRun master
else
  "$bin"/hbase-daemons.sh --config "${HBASE_CONF_DIR}" $commandToRun zookeeper
  "$bin"/hbase-daemon.sh --config "${HBASE_CONF_DIR}" $commandToRun master
  # 加入此行 启动时ssh连接到emr-header-02节点启动Hmaster进程
  ssh emr-header-02 "$bin"/hbase-daemon.sh --config "${HBASE_CONF_DIR}" $commandToRun master
  "$bin"/hbase-daemons.sh --config "${HBASE_CONF_DIR}" \
    --hosts "${HBASE_REGIONSERVERS}" $commandToRun regionserver
  "$bin"/hbase-daemons.sh --config "${HBASE_CONF_DIR}" \
    --hosts "${HBASE_BACKUP_MASTERS}" $commandToRun master-backup