虚拟机-zookeeper集群搭建

前言

zookeeper的搭建以及集群搭建是非常简单的、我们在工作中常用的就是单点模式集群模式

本篇的内容为:

  • Zookeeper运行模式
  • Zookeeper搭建(单点、集群)

官网zookeeper搭建参考:https://zookeeper.apache.org/...

正文

一、Zookeeper 运行模式

Zookeeper单点模式集群模式

  • 单点模式(standalone mode)- Zookeeper 只运行在单个服务器上,常用于开发测试阶段,这种模式比较简单,但是不能保证Zookeeper服务的高可用性恢复性
  • 集群模式(replicated mode)- 这种模式叫做“复制模式”;这个模式下,Zookeeper运行于一个集群上,适合生产环境。
    同一个集群下的server节点被称为_quorum_,翻译过来就是“一个正式会议的法定人数”;在集群模式下,最少需要三个server节点。并且官方推荐你使用奇数数量的server节点来组成集群。至于为什么,和Zookeeper的读写策略和一致性协议有关。

二、Zookeeper搭建

单点模式

  1. 去官网下载对应源码压缩包,然后上传到服务器
  2. 解压,tar -zxvf zookeeper-***.tar.gz
  3. 进入到源码目录下的conf目录,根据zoo_sample.cfg,创建一个配置文件zoo.cfg,启动时默认就是按照zoo.cfg这个配置文件的信息来启动。添加如下关键配置:
    a.zk主要会在内存里面维护znode的数据结构,让你高性能地去读写。但是实际上来说,同时也会把数据往磁盘里面存。所以必须配置磁盘数据/日志所存放的目录: dataDir/dataLogDir。
    b.面向客户端开放的端口号:clientPort=2181

    # Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔,
    # 也就是每个 tickTime 时间就会发送一个心跳。
    tickTime=2000 
    # Zookeeper 保存数据的目录
    dataDir=/opt/zookeeper/data
    # Zookeeper 保存日志文件的目录
    dataLogDir=/opt/zookeeper/log
    # 客户端连接Zookeeper 服务器的端口
    # Zookeeper 会监听这个端口,接受客户端的访问请求
    clientPort=2181
  4. 修改环境变量

    vi ~/.bashrc  
    
    export ZOOKEEPER_HOME=/usr/local/zookeeper 
    export PATH=$PATH:$ZOOKEEPER_HOME/bin  
    
    source ~/.bashrc
  5. zk服务启动操作:

我们进入zkServer.sh时候,可以看到zk的一些启动脚本。
虚拟机-zookeeper集群搭建_第1张图片

a.进入到源码目录下的bin目录,执行zkServer.sh脚本文件即可

# 启动
zkServer.sh start
# 关闭
zkServer.sh stop

b.查看当前zookeeper 状态

[root@localhost bin]# sh zkServer.sh status 
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-  3.4.8/bin/../conf/zoo.cfg
Mode: standalone

Mode:standalone可以看到现在的节点启动类型:单点模式。

c.查看zk进程

jps -l

虚拟机-zookeeper集群搭建_第2张图片

d.使用zkCli.sh连接zk的本地server
虚拟机-zookeeper集群搭建_第3张图片
比如:ls /
image
从上图我们可以看到:基于zk的客户端查看一些信息,因为zk的内存数据 结构是基于znode的核心类似文件系统的一套数据结构,里面有很多节点,节点之间是有很多层级关系的,所以通过zkCli里面的命令都是类似玉linux里面的文件系统命令:比如 ls / 通过这个命令可以查看当前zk都有哪些节点。

集群模式

集群模式的搭建和单点模式的差别不大,如果按照官方的最低要求,就是三台服务器,在这三台服务器上面分别执行一下上述单点模式的步骤,同一集群下的每台服务器的配置文件类似。

基于上述单点模式搭建,集群模式的搭建,我们需要做以下更改:

  1. 每台机器上 conf/zoo.cfg 配置文件的参数设置,需要添加集群的信息.

    tickTime=2000
    dataDir=/opt/zookeeper/data
    dataLogDir=/opt/zookeeper/log
    clientPort=2181
     # 集群相关配置
    # 允许 follower 连接并同步到 leader 的初始化连接时间 
    # 比如这里就是允许 5个 tick 的时间
    initLimit=5
    # leader 与 follower 之间发送消息,请求和应答时间长度。
    # 如果 follower 在设置的时间内不能与leader 进行通信,那么此 follower 将被丢弃。
    # 比如这里就是允许 2个 tick 的时间
    syncLimit=2
    # 集群信息
    server.1=centos1:2888:3888
    server.2=centos2:2888:3888
    server.3=centos3:2888:3888

    server.id=host:port1:port2标识了不同Zookeeper服务器的信息,其中 id 是一个数字,表示这个是服务器的编号;host是这个服务器的 ip 地址;至于port1port2参照官网的描述较为准确.
    "2888"和"3888",Zookeeper 节点使用前面那个端口(port1)来与其他节点建立连接。这个连接是必须建立的,因为不同节点之间需要通信。打比方说,follower节点需要“赞成”leader节点的更新命令。更确切一点说,这个节点是用于follower节点和leader节点之间的通信。当一个leader节点出现了,follower节点会在port1上与leader节点建立一个TCP连接。因为默认的leader选举也是用TCP,我们现在就需要另一个端口来用于leader选举,这就是port2的作用。

    概括来说,port1通信端口,port2选举端口。

  2. 在每个Zookeeper服务器对应的dataDir目录下需要创建一个名为myid的文件,这个文件中仅含有一行的内容,指定的是自身的 id 值,就是server.id=host:port1:port2中的id值。这个 id 值必须是集群中唯一的
  3. 确认每台服务器上的zoo.cfgmyid文件修改创建之后,在三个节点上分别执行命令zkServer.sh start,启动zookeeper server。
  4. 查看集群状态

    1、jps(查看进程:会出现:QuorumPeerMain ) 
    2、zkServer.sh status(查看集群状态,主从信息)

三、Zookeeper搭建详细操作

1.zookeper包上传

文件上传:
上传: scp localpath username@ip:remotepath
文件下载:
scp -r remote_username@remote_ip:remote_folder local_folder

scp /Users/xiexinming/software/package/zookeeper-3.4.9.tar.gz [email protected]:/usr/local/

2.zookeper解压修改名称

1、解压

 tar -zxvf zookeeper-3.4.9.tar.gz 

2、删除jar包,然后重命名

image.png

3.配置环境变量

vi ~/.bashrc  

export ZOOKEEPER_HOME=/usr/local/zookeeper 
export PATH=$PATH:$ZOOKEEPER_HOME/bin  

source ~/.bashrc

image.png

4.修改配置文件

拷贝一份已经存在的样本文件,然后进行编辑
进入zookeeper的配置文件中:
cd ./zookeeper/conf
image.png

我们在/opt下新建目录:zookeeper
然后我们修改zookeeper的配置文件。

mkdir /opt/zookeeper/data
mkdir /opt/zookeeper/log

修改里面的基本配置文件:

dataDir=/opt/zookeeper/data
dataLogDir=/opt/zookeeper/log
server.1=centos01:2888:3888
server.2=centos02:2888:3888 

设置zookeeper的id
进入zookeeper的data目录中去,设置他的id

cd /opt/zookeeper/data  
echo 1 > myid

image.png
上面myid里面内容为1,代表的是当前zookeeper机器编号。

5.其他机器zookeeper配置

scp -r /usr/local/zookeeper centos02:/usr/local ,修改环境变量,在centos02将myid的内容改为2 (echo 2 > myid)

scp -r /usr/local/zookeeper centos03:/usr/local,修改环境变量,在centos03将myid的内容改为3 (echo 3 > myid)

在另一台机器查看:

image.png

修改环境变量:

vi ~/.bashrc  
export ZOOKEEPER_HOME=/usr/local/zookeeper 
export PATH=$PATH:$ZOOKEEPER_HOME/bin  
source ~/.bashrc

设置zookeeper的id
进入zookeeper的data目录中去,设置他的id

cd /opt/zookeeper/data  
echo 2 > myid

6.zookeeper启动

zookeeper是最基本基本的系统,所有可以直接跑

二台机器上执行:

1、启动zookeeper:

zkServer.sh start 

2、查看集群状态

1、jps(查看进程:会出现:QuorumPeerMain ) 
2、zkServer.sh status(查看集群状态,主从信息)

image.png

你可能感兴趣的:(zookeeper)