概述
zookeeper实际上是yahoo开发的,用于分布式中一致性处理的框架。最初其作为研发Hadoop时的副产品。由于分布式系统中一致性处理较为困难,其他的分布式系统没有必要 费劲重复造轮子,故随后的分布式系统中大量应用了zookeeper,以至于zookeeper成为了各种分布式系统的基础组件,其地位之重要,可想而知。著名的hadoop,kafka,dubbo 都是基于zookeeper而构建。
如果你不够了解ZooKeeper请阅读这篇文章:《zooKeeper的运用场景》以及《分布式zooKeep系列》
1.下载ZooKeeper
稳定版:
http://mirror.bit.edu.cn/apache/zookeeper/stable/
2.提取tar文件
cd /opt/
tar -zxf zookeeper-3.4.12.tar.gz
cd zookeeper-3.4.12
mkdir data
mkdir logs
3.创建配置文件
使用命令 vi conf/zoo.cfg 创建配置文件并打开,ps (其实目录conf 下有默认的配置文件,但是注释太多,英文一大堆,太乱,所有还不如自己新建一个配置文件)
输入命令:
vi /opt/zookeeper-3.4.12/conf/zoo.cfg
编辑填写内容如下:
tickTime = 2000
dataDir = /opt/zookeeper-3.4.12/data
dataLogDir = /opt/zookeeper-3.4.12/logs
tickTime = 2000
clientPort = 2181
initLimit = 5
syncLimit = 2
配置文件描述
tickTime
tickTime则是上述两个超时配置的基本单位,例如对于initLimit,其配置值为5,说明其超时时间为 2000ms * 5 = 10秒。
dataDir
其配置的含义跟单机模式下的含义类似,不同的是集群模式下还有一个myid文件。myid文件的内容只有一行,且内容只能为1 - 255之间的数字,这个数字亦即上面介绍server.id中的id,表示zk进程的id。
dataLogDir
如果没提供的话使用的则是dataDir。zookeeper的持久化都存储在这两个目录里。dataLogDir里是放到的顺序日志(WAL)。而dataDir里放的是内存数据结构的snapshot,便于快速恢复。为了达到性能最大化,一般建议把dataDir和dataLogDir分到不同的磁盘上,这样就可以充分利用磁盘顺序写的特性。
initLimit
ZooKeeper集群模式下包含多个zk进程,其中一个进程为leader,余下的进程为follower,当follower最初与leader建立连接时,它们之间会传输相当多的数据,尤其是follower的数据落后leader很多。initLimit配置follower与leader之间建立连接后进行同步的最长时间
syncLimit
配置follower和leader之间发送消息,请求和应答的最大时间长度。
启动服务
/opt/zookeeper-3.4.12/bin/zkServer.sh start
响应:
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.12/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
连接服务
连接到ZooKeeper服务
/opt/zookeeper-3.4.12/bin/zkCli.sh
响应:
Connecting to localhost:2181
2017-08-22 16:43:05,954 [myid:] - INFO [main:Environment@100] - Client environment:zookeeper.version=3.4.12-1757313, built on 08/23/2016 06:50 GMT
2017-08-22 16:43:05,958 [myid:] - INFO [main:Environment@100] - Client environment:host.name=node1
2017-08-22 16:43:05,958 [myid:] - INFO [main:Environment@100] - Client environment:java.version=1.8.0_144
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:java.vendor=Oracle Corporation
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:java.home=/usr/lib/jvm/jre
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:java.class.path=/opt/zookeeper-3.4.12/bin/../build/classes:/opt/zookeeper-3.4.12/bin/../build/lib/*.jar:/opt/zookeeper-3.4.12/bin/../lib/slf4j-log4j12-1.6.1.jar:/opt/zookeeper-3.4.12/bin/../lib/slf4j-api-1.6.1.jar:/opt/zookeeper-3.4.12/bin/../lib/netty-3.10.5.Final.jar:/opt/zookeeper-3.4.12/bin/../lib/log4j-1.2.16.jar:/opt/zookeeper-3.4.12/bin/../lib/jline-0.9.94.jar:/opt/zookeeper-3.4.12/bin/../zookeeper-3.4.12.jar:/opt/zookeeper-3.4.12/bin/../src/java/lib/*.jar:/opt/zookeeper-3.4.12/bin/../conf:.:/lib/jvm/lib:/lib/jvm/jre/lib
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:java.library.path=/usr/java/packages/lib/amd64:/usr/lib64:/lib64:/lib:/usr/lib
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:java.io.tmpdir=/tmp
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:java.compiler=
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:os.name=Linux
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:os.arch=amd64
2017-08-22 16:43:05,967 [myid:] - INFO [main:Environment@100] - Client environment:os.version=3.10.0-514.26.2.el7.x86_64
2017-08-22 16:43:05,968 [myid:] - INFO [main:Environment@100] - Client environment:user.name=root
2017-08-22 16:43:05,968 [myid:] - INFO [main:Environment@100] - Client environment:user.home=/root
2017-08-22 16:43:05,968 [myid:] - INFO [main:Environment@100] - Client environment:user.dir=/opt/zookeeper-3.4.12
2017-08-22 16:43:05,969 [myid:] - INFO [main:ZooKeeper@438] - Initiating client connection, connectString=localhost:2181 sessionTimeout=30000 watcher=org.apache.zookeeper.ZooKeeperMain$MyWatcher@506c589e
Welcome to ZooKeeper!
2017-08-22 16:43:06,011 [myid:] - INFO [main-SendThread(localhost:2181):ClientCnxn$SendThread@1032] - Opening socket connection to server localhost/0:0:0:0:0:0:0:1:2181. Will not attempt to authenticate using SASL (unknown error)
JLine support is enabled
2017-08-22 16:43:06,164 [myid:] - INFO [main-SendThread(localhost:2181):ClientCnxn$SendThread@876] - Socket connection established to localhost/0:0:0:0:0:0:0:1:2181, initiating session
2017-08-22 16:43:06,237 [myid:] - INFO [main-SendThread(localhost:2181):ClientCnxn$SendThread@1299] - Session establishment complete on server localhost/0:0:0:0:0:0:0:1:2181, sessionid = 0x15e091bf2020000, negotiated timeout = 30000
WATCHER::
WatchedEvent state:SyncConnected type:None path:null
[zk: localhost:2181(CONNECTED) 0]
服务状态
/opt/zookeeper-3.4.12/bin/zkServer.sh status
响应:
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.12/bin/../conf/zoo.cfg
Mode: standalone
停止服务
/opt/zookeeper-3.4.12/bin/zkServer.sh stop
响应:
bin/zkServer.sh stop
ZooKeeper JMX enabled by default
Using config: /opt/zookeeper-3.4.12/bin/../conf/zoo.cfg
Stopping zookeeper ... STOPPED
1.1、dubbo-admin 本地编译打包
概述:
因为zookeeper只是一个黑框,我们无法看到是否存在了什么提供者或消费者,这时就要借助Dubbo-Admin管理平台来实时的查看,也可以通过这个平台来管理提者和消费者。
dubbo-admin.war 本人不建议直接在网上下载,我是直接下载了dubbo-master的源代码 然后编译成 war包
下载地址: https://github.com/apache/incubator-dubbo-ops
war包我也放在了 github上: https://github.com/haoxiaoyong1014/dubbo-demo/tree/master/war
这里只关心 dubbo-admin,将下载过来的 zip 包解压,也可以不下载 zip包,可以直接 git clone https://github.com/apache/incubator-dubbo-ops
这里我们只关心 dubbo-admin 所以我只要在终端也就是 cmd下进入dubbo-admin 执行:
mvn package -Dmaven.skip.test=true
打包成功之后我们进入target
这个文件得放在Tomcat下才能运行。
这里我已经上传了这个 war 包: https://github.com/haoxiaoyong1014/dubbo-demo/tree/master/war
1.2 dubbo-admin 的安装
dubbo-admin已打包成功,接下来就容易很多了
1. 安装
将 dubbo-admin-2.5.4-SNAPSHOT.war 拷入 tomcat webapps中
2. 配置
修改tomcat的端口8188,修改方法如下,打到conf下的文件 server.xml,因为zookeeper会用到8080的端口,所以为了不冲突,把Tomcat的端口改一下。记得一定要改!!!
3 启动一下Tomcat,让它把war解压了
进入 tomcat安装的 bin目录
tomcat的bin文件夹中存在一份.bat文件和相对应的.sh文件,名字都一样就后缀名不一样,这两个文件都是批处理文件,一个是linux下的批处理文件,另一个是在window系统上执行的文件。
在window上面处理的,只需要双击就可以执行,在linux上面执行这个文件的话是 sh 文件名.sh
所以如果你是 window系统:只需要双击 startup.bat 文件,如果你是 linux 或者是 mac就需要进入终端
执行: ./startup.sh
启动成功之后你会发现webapp下多了一个文件夹,这是启动 tomcat自动解压文件
再把 Tomcat给关了 shutdown.bat 或者 shutdown.sh
打开文件是否是如下内容:
dubbo.registry.address=zookeeper://127.0.0.1:2181
dubbo.admin.root.password=root
dubbo.admin.guest.password=guest
如果是,就不用改,这里的127.0.0.1对应的是自己的电脑IP,因为这里zookeeper也在自己电脑上,所以要这么写才行。一般情况下都是不需要改的,因为初始都是本地的IP地址。但还是看看比较安全
5. 访问:
这下全部都配置好了,首先,一定要先启动zookeeper启动后再去启动tomcat!一定要先启动zookeeper启动后再去启动tomcat!一定要先启动zookeeper启动后再去启动tomcat!重要的事情三遍!
启动zookeeper
启动tomcat
访问http://localhost:8188/dubbo-admin-2.0.0/ 一定要注意名一定要和你webapp下的工程名一样!!
会弹出一个窗口:
输入用户名和密码都是root
6. 写在后面:
到了这一步就可以结合demo来感受一下了,
demo实例地址:https://github.com/haoxiaoyong1014/dubbo-demo
7,最后