本文介绍的 Zookeeper 是以 3.4.6 这个稳定版本为基础,最新的版本可以通过官网 http://hadoop.apache.org/zookeeper/来获取,Zookeeper 的安装非常简单,下面将从单机模式和集群模式两个方面介绍 Zookeeper 的安装和配置。
1.单机模式
单机安装非常简单,只要获取到 Zookeeper 的压缩包并解压到某个目录如:/usr/local 下,Zookeeper 的启动脚本在 bin 目录下,Linux 下的启动脚本是 zkServer.sh。
$ sudo tar -xf zookeeper-3.4.6.tar.gz -C /usr/local/
在你执行启动脚本之前,还有几个基本的配置项需要配置一下,Zookeeper 的配置文件在 conf 目录下,这个目录下有 zoo_sample.cfg 和 log4j.properties,你需要做的就是将 zoo_sample.cfg 改名为 zoo.cfg,因为 Zookeeper 在启动时会找这个文件作为默认配置文件。下面详细介绍一下,这个配置文件中各个配置项的意义。
tickTime=2000
dataDir=/usr/local/zookeeper-3.4.6-1/data
clientPort=2881
tickTime:这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个 tickTime 时间就会发送一个心跳。
dataDir:顾名思义就是 Zookeeper 保存数据的目录,默认情况下,Zookeeper 将写数据的日志文件也保存在这个目录里。
-
clientPort:这个端口就是客户端连接 Zookeeper 服务器的端口,Zookeeper 会监听这个端口,接受客户端的访问请求。
initLimit=10
syncLimit=5
当这些配置项配置好后,你现在就可以启动 Zookeeper 了,启动后要检查 Zookeeper 是否已经在服务,可以通过 netstat –ntlp 命令查看是否有你配置的 clientPort 端口号在监听服务。
2.集群模式
Zookeeper 不仅可以单机提供服务,同时也支持多机组成集群来提供服务。实际上 Zookeeper 还支持另外一种伪集群的方式,也就是可以在一台物理机上运行多个 Zookeeper 实例,下面将介绍集群模式的安装和配置。
Zookeeper 的集群模式的安装和配置也不是很复杂,所要做的就是增加几个配置项。集群模式除了上面的三个配置项还要增加下面几个配置项:
initLimit=5
syncLimit=2
server.1=192.168.211.1:2888:3888
server.2=192.168.211.2:2888:3888
initLimit:这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper 服务器的客户端,而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 5*2000=10 秒
syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个 tickTime 的时间长度,总的时间长度就是 2*2000=4 秒
server.A=B:C:D:其中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的 ip 地址;C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于 B 都是一样,所以不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不同的端口号。
除了修改 zoo.cfg 配置文件,集群模式下还要配置一个文件 myid,这个文件在 dataDir 目录下,这个文件里面就有一个数据就是 A 的值,Zookeeper 启动时会读取这个文件,拿到里面的数据与 zoo.cfg 里面的配置信息比较从而判断到底是那个 server。
集群配置演示
这里演示在同一个系统上创建三个 zookeeper 进程组成的伪集群。
复制解压得到的 zookeeper 目录,复制三份:
# ls -d -1 zookeeper-3.4.6-*
zookeeper-3.4.6-1
zookeeper-3.4.6-2
zookeeper-3.4.6-3
第一个目录的 zoo.cfg 配置:
# cat /usr/local/zookeeper-3.4.6-1/conf/zoo.cfg
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/usr/local/zookeeper-3.4.6-1/data
clientPort=2181
server.1=192.168.2.57:2881:3881
server.2=192.168.2.57:2882:3882
server.3=192.168.2.57:2883:3883
第二个目录的 zoo.cfg 配置:
# cat /usr/local/zookeeper-3.4.6-2/conf/zoo.cfg
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/usr/local/zookeeper-3.4.6-2/data
clientPort=2182
server.1=192.168.2.57:2881:3881
server.2=192.168.2.57:2882:3882
server.3=192.168.2.57:2883:3883
第三个目录的 zoo.cfg 配置:
# cat /usr/local/zookeeper-3.4.6-3/conf/zoo.cfg
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/usr/local/zookeeper-3.4.6-3/data
clientPort=2183
server.1=192.168.2.57:2881:3881
server.2=192.168.2.57:2882:3882
server.3=192.168.2.57:2883:3883
配置仅 clientPort 项是不同的。
注意在每个 zookeeper 目录下创建 data 目录,建立 myid 文件,内容分别为 1,2,3:
# cat /usr/local/zookeeper-3.4.6-1/data/myid
1
# cat /usr/local/zookeeper-3.4.6-2/data/myid
2
# cat /usr/local/zookeeper-3.4.6-3/data/myid
3
依次启动:
# /usr/local/zookeeper-3.4.6-1/bin/zkServer.sh start
# /usr/local/zookeeper-3.4.6-2/bin/zkServer.sh start
# /usr/local/zookeeper-3.4.6-3/bin/zkServer.sh start
查看端口启动状态:
# netstat -nltp | grep java
tcp 0 0 ::ffff:192.168.2.57:2883 :::* LISTEN 9981/java
tcp 0 0 :::2181 :::* LISTEN 9912/java
tcp 0 0 :::2182 :::* LISTEN 10234/java
tcp 0 0 :::2183 :::* LISTEN 9981/java
tcp 0 0 ::ffff:192.168.2.57:3881 :::* LISTEN 9912/java
tcp 0 0 ::ffff:192.168.2.57:3882 :::* LISTEN 10234/java
tcp 0 0 ::ffff:192.168.2.57:3883 :::* LISTEN 9981/java
tcp 0 0 :::51316 :::* LISTEN 9981/java
tcp 0 0 :::38262 :::* LISTEN 9912/java
tcp 0 0 :::42681 :::* LISTEN 10234/java
查看谁是 leader:
# zookeeper-3.4.6-3/bin/zkServer.sh status
JMX enabled by default
Using config: /usr/local/zookeeper-3.4.6-3/bin/../conf/zoo.cfg
Mode: leader
# zookeeper-3.4.6-2/bin/zkServer.sh status
JMX enabled by default
Using config: /usr/local/zookeeper-3.4.6-2/bin/../conf/zoo.cfg
Mode: follower
# zookeeper-3.4.6-1/bin/zkServer.sh status
JMX enabled by default
Using config: /usr/local/zookeeper-3.4.6-1/bin/../conf/zoo.cfg
Mode: follower
好了,zookeeper 集群的安装配置到这里就讲解完成了。
参考文档:
分布式服务框架 Zookeeper -- 管理分布式环境中的数据