Linux CentOS7 搭建Hadoop3.0.3+HBASE2.1.0+zookeeper-3.4.10分布式集群
文章目录
- 一、准备三台服务器
- 二、下载解压Hbase包（三台服务同步操作）
- 三、配置环境变量（三台服务同步操作）
- 四、修改配置文件（三台服务同步操作）
- 4.1 配置hbase-env.sh文件
- 4.2 配置hbase-site.xml文件
- 4.3 配置regionservers和backup-masters文件
- 4.4 删除slf4j-log4j12-1.7.25.jar
- 4.5 复制htrace-core-3.1.0-incubating.jar
- 五、启动HBASE集群
- 5.1 启动server1的hbase即可
- 5.2 jps查看进程
- 5.3 访问
HBASE中文文档： https://www.w3cschool.cn/hbase_doc/hbase_doc-vxnl2k1n.html
参考文档： https://blog.csdn.net/SL_World/article/details/84942794
一、准备三台服务器
需要安装JDK：
https://blog.csdn.net/qq_39680564/article/details/82768938
需要配置免秘钥与修改主机名：
https://blog.csdn.net/qq_39680564/article/details/89498678
需要安装zookeeper集群：
https://blog.csdn.net/qq_39680564/article/details/89500281
需要安装hadoop集群：
https://blog.csdn.net/qq_39680564/article/details/89513162
| IP | 主机名 | HDFS | MapReduce/Yarn | 角色 |
|---|---|---|---|---|
| 192.168.1.159 | server1 | NameNode | ResourceManager | Master |
| 192.168.1.198 | server2 | DataNode | NodeManager | RegionServer、Backup Master |
| 192.168.1.199 | server3 | DataNode | NodeManager | RegionServer |
二、下载解压Hbase包（三台服务同步操作）
cd /opt
wget https://archive.apache.org/dist/hbase/2.1.0/hbase-2.1.0-bin.tar.gz
tar -zxvf hbase-2.1.0-bin.tar.gz
三、配置环境变量（三台服务同步操作）
vim ~/.bashrc
添加如下内容
#Hbase
export HBASE_HOME=/opt/hbase-2.1.0
export HBASE_CONF_DIR=/opt/hbase-2.1.0/conf
export PATH=$PATH:$HBASE_HOME/bin
如图：
查看环境变量
[root@server1 hbase-2.1.0]# source ~/.bashrc
[root@server1 hbase-2.1.0]# echo $HBASE_HOME
/opt/hbase-2.1.0
四、修改配置文件（三台服务同步操作）
4.1 配置hbase-env.sh文件
vim /opt/hbase-2.1.0/conf/hbase-env.sh
修改如下内容
export JAVA_HOME=/opt/jdk-1.8
export HBASE_MANAGES_ZK=false
4.2 配置hbase-site.xml文件
vim /opt/hbase-2.1.0/conf/hbase-site.xml
添加如下内容
<property>
<name>hbase.rootdirname>
<value>hdfs://server1:9000/hbasevalue>
property>
<property>
<name>hbase.cluster.distributedname>
<value>truevalue>
property>
<property>
<name>hbase.zookeeper.quorumname>
<value>server1,server2,server3value>
property>
<property>
<name>hbase.unsafe.stream.capability.enforcename>
<value>falsevalue>
property>
如图：
4.3 配置regionservers和backup-masters文件
vim /opt/hbase-2.1.0/conf/regionservers
改为如下内容
server2
server3
如图：
vim /opt/hbase-2.1.0/conf/backup-masters
添加如下内容（该文件是不存在的，需要自己创建，里面的主机当作master的备份机）
server2
如图：
4.4 删除slf4j-log4j12-1.7.25.jar
rm -rf /opt/hbase-2.1.0/lib/client-facing-thirdparty/slf4j-log4j12-1.7.25.jar
4.5 复制htrace-core-3.1.0-incubating.jar
cp /opt/hbase-2.1.0/lib/client-facing-thirdparty/htrace-core-3.1.0-incubating.jar /opt/hbase-2.1.0/lib/
五、启动HBASE集群
5.1 启动server1的hbase即可
[root@server1 opt]# /opt/hbase-2.1.0/bin/start-hbase.sh
server1: running zookeeper, logging to /opt/hbase-2.1.0/logs/hbase-root-zookeeper-server1.out
server2: running zookeeper, logging to /opt/hbase-2.1.0/logs/hbase-root-zookeeper-server2.out
server3: running zookeeper, logging to /opt/hbase-2.1.0/logs/hbase-root-zookeeper-server3.out
running master, logging to /opt/hbase-2.1.0/logs/hbase-root-master-server1.out
server2: running regionserver, logging to /opt/hbase-2.1.0/logs/hbase-root-regionserver-server2.out
server3: running regionserver, logging to /opt/hbase-2.1.0/logs/hbase-root-regionserver-server3.out
server2: running master, logging to /opt/hbase-2.1.0/logs/hbase-root-master-server2.out
5.2 jps查看进程
server1
server2（作为master的备份机，也有一个HMaster进程）
server3
5.3 访问
Master：http://192.168.1.159:16010/master-status
Backup Master：http://192.168.1.198:16010/master-status
RegionServer：http://192.168.1.198:16030/rs-status
RegionServer：http://192.168.1.199:16030/rs-status
