最近由于项目中需要用到zookeeper,仔细的研究了一下,将持续更新zookeeper相关文章,留个痕迹。
本文以及后续zookeeper相关的文章都是以Linux环境环境为基础的,代码是基于C语言。
zookeeper是Hadoop下的一个子项目,主要用来解决同步服务,配置管理,集群管理,分布式调度等一些分布式应用中的问题,具体的zookeeper的详细介绍网上很多,在此不再赘述。
zookeeper运行时必须先装上java相关的库,Linux下如何配置jdk网上也是多如牛毛。
首先准备一个zookeeper开发包,可以到官网下载,这里提供一个版本,zookeeper-3.4.6.tar.gz。
一般在项目中我们会使用多台机器来搭建zookeeper集群,由于条件限制,我们可以在一台机器上搭建一个伪集群,只要指定不同的端口就行了。
将压缩包解压,会得到 zookeeper-3.4.6目录,进入zookeeper-3.4.6下的conf目录,我们来进行配置文件的修改,这里我们配置三个伪集群服务器,所以新建三个文件zoo1.cfg、zoo2.cfg、zoo3.cfg,分别写入下面的配置内容:
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/home/cdadmin/thc/zookeeper/zookeeper-3.4.6/data/d_1
clientPort=2181
dataLogDir=/home/cdadmin/thc/zookeeper/zookeeper-3.4.6/log/log_1
server.1=localhost:2887:3887
server.2=localhost:2888:3888
server.3=localhost:2889:3889
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/home/cdadmin/thc/zookeeper/zookeeper-3.4.6/data/d_2
clientPort=2182
dataLogDir=/home/cdadmin/thc/zookeeper/zookeeper-3.4.6/log/log_2
server.1=localhost:2887:3887
server.2=localhost:2888:3888
server.3=localhost:2889:3889
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/home/cdadmin/thc/zookeeper/zookeeper-3.4.6/data/d_3
clientPort=2183
dataLogDir=/home/cdadmin/thc/zookeeper/zookeeper-3.4.6/log/log_3
server.1=localhost:2887:3887
server.2=localhost:2888:3888
server.3=localhost:2889:3889
注意:dataDir和dataLogDir对应的目录要相应的建立
配置参数说明
tickTime:zookeeper客户端和服务器之间发送心跳的间隔时间
initLimit:这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper 服务器的客户端,而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 5*2000=10 秒
syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个 tickTime 的时间长度,总的时间长度就是 2*2000=4 秒
dataDir:顾名思义就是 Zookeeper 保存数据的目录,默认情况下,Zookeeper 将写数据的日志文件也保存在这个目录里。
clientPort:这个端口就是客户端连接 Zookeeper 服务器的端口,Zookeeper 会监听这个端口,接受客户端的访问请求。
dataLogDir:顾名思义就是 Zookeeper 保存日志文件的目录
server.A=B:C:D:其中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的 ip 地址;C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于 B 都是一样,所以不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不同的端口号。
在修改好了参数文件后,在每个dataDir下建立一个文件,文件名为myid,文件的内容分别为1、2、3,(分别对应的是server.1,server.2,server.3),这样就可以启动zookeeper服务器了。
切换到zookeeper-3.4.6/bin目录分别运行命令:zkServer.sh start zoo1.cfg、zkServer.sh start zoo2.cfg、zkServer.sh start zoo3.cfg,输入命令jps,结果如下图一样,就说明启动成功了。
启动成功以后,我们就可以用客户端去连接了,运行命令:zkCli.sh -server 127.0.0.1:2182,客户端连接上以后我们就可以对服务器进行一些结点的操作了,如下图所示:
这样zookeeper就搭建成功了。
今天先到这,晚安吧,待续!