大数据hadoop3.1.3学习笔记——HBase的安装配置(高可用配置可选)

1 Zookeeper正常部署
首先保证Zookeeper集群的正常部署,并启动之:
使用自定义脚本启动:

 zk start

2 Hadoop正常部署
Hadoop集群的正常部署并启动:

 sbin/start-dfs.sh
 sbin/start-yarn.sh

3 HBase的解压
解压Hbase到指定目录:

 tar -zxvf hbase-2.0.5-bin.tar.gz -C /opt/module
 mv /opt/module/hbase-2.0.5 /opt/module/hbase

配置环境变量

 sudo vim /etc/profile.d/my_env.sh

添加

#HBASE_HOME
export HBASE_HOME=/opt/module/hbase
export PATH=$PATH:$HBASE_HOME/bin

4 HBase的配置文件
修改HBase对应的配置文件。
1.hbase-env.sh修改内容:

 export HBASE_MANAGES_ZK=false

2.hbase-site.xml修改内容:



    hbase.rootdir
    hdfs://hadoop102:8020/hbase



    hbase.cluster.distributed
    true



    hbase.zookeeper.quorum
    hadoop102,hadoop103,hadoop104



    hbase.unsafe.stream.capability.enforce
    false


    hbase.wal.provider
    filesystem


3.regionservers:

hadoop101
hadoop102
hadoop103

5 HBase远程发送到其他集群

 xsync hbase/

6 HBase服务的启动

1.单点启动

 bin/hbase-daemon.sh start master
 bin/hbase-daemon.sh start regionserver

提示:如果集群之间的节点时间不同步,会导致regionserver无法启动,抛出ClockOutOfSyncException异常。
修复提示:
a、同步时间服务
请参看帮助文档:《尚硅谷大数据技术之Hadoop入门》
b、属性:hbase.master.maxclockskew设置更大的值

 
    hbase.master.maxclockskew
    180000
    Time difference of regionserver from master
 

2.群启

 bin/start-hbase.sh

对应的停止服务:

 bin/stop-hbase.sh

7 查看HBase页面
启动成功后,可以通过“host:port”的方式来访问HBase管理页面,例如:
http://hadoop101:16010

8 高可用(可选)
在HBase中HMaster负责监控HRegionServer的生命周期,均衡RegionServer的负载,如果HMaster挂掉了,那么整个HBase集群将陷入不健康的状态,并且此时的工作状态并不会维持太久。所以HBase支持对HMaster的高可用配置。

1.关闭HBase集群(如果没有开启则跳过此步)

bin/stop-hbase.sh

2.在conf目录下创建backup-masters文件

 touch conf/backup-masters

3.在backup-masters文件中配置高可用HMaster节点

 echo hadoop102 > conf/backup-masters

4.将整个conf目录scp到其他节点

 scp -r conf/ hadoop102:/opt/module/hbase/
 scp -r conf/ hadoop103:/opt/module/hbase/

5.打开页面测试查看

http://hadooo101:16010

你可能感兴趣的:(Hadoop)