E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Zookeepr
zookeeperLoadBalance
服务器端:a/服务注册--服务器启动时向Zookeeper在/zookeeper/workservers节点目录下注册服务节点b/启动Socket监听客户端的连接--注册服务器节点的同时该服务器针对自己在
zookeepr
时待吾
·
2020-02-17 13:52
hadoop(十七)—hadoop集群环境的搭建
Hadoop集群的作用,以前我们学习Hadoop伪分布式的时候没有用到Zookeeper是因为伪分布式只有一个NameNode,没有Active和Standby状态的两个NameNode之说,因此根本就不需要
Zookeepr
文子轩
·
2019-12-12 00:45
ZooKeeper学习笔记(一)——概述
zookeeper从设计模式的角度来理解:是一个基于观察者设计模式的分布式服务管理框架,她负责存储和观察大家都关心的数据,然后接收观察者的注册,一旦这些数据的状态发生变化,zookeeper就将负责通知已经在
zookeepr
三秋叶
·
2019-11-15 14:00
Ambari 管理hadoop、hbase、zookeeper节点
ApacheAmbari支持HDFS、MapReduce、Hive、Pig、Hbase、
Zookeepr
、Sqoop和Hcatalog等
hu_wen
·
2019-10-23 15:00
Ambari 管理hadoop、hbase、zookeeper节点
ApacheAmbari支持HDFS、MapReduce、Hive、Pig、Hbase、
Zookeepr
、Sqoop和Hcatalog等
hu_wen
·
2019-10-23 15:00
完全分布式zookeerper的安装过程
搭建zookeerper集群把zookeeper搭建在从节点上最好把zookeerper的安装包放在home路径下我放在了/opt下(我的所有文件都放这里了,不要跟我学习)上传
zookeepr
压缩包,我放在了
大大怪啊
·
2019-06-18 13:53
Zookeeper
kafka集群部署
0.zookeeper集群部署kafka依赖于zookeeper,在安装kafka集群之前,请先安装zookeeper,
zookeepr
集群的安装,参见我另外一篇文章linux下zookeeper集群部署以及测试我们假定安装好的集群是
yandaren
·
2019-04-18 20:46
详解ZooKeeper集群配置流程
Zookeeper官网:http://zookeeper.apache.org/下载地址http://mirrors.ustc.edu.cn/apache/zookeeper/zookeeper-3.4.13/1.
Zookeepr
DYH1564335
·
2018-12-10 00:00
了解
ZooKeepr
内部原理
本文不会讲解任何关于如何通过Zookeeper构建一个应用程序相关的知识,因为这种教程网上非常多,相信大家可以轻而易举的搭建.本文主要是介绍ZooKeeper内部是如何运行的,通过从高层次介绍其使用的协议,以及ZooKeeper所采用的在提供高性能的同时还具有容错能力的机制.请求、事务和标识符首先我们先明确下,在ZooKeeper服务器中的几个基本概念。请求:请求表示源自客户端发起的操作,事务通常
程序员小罗
·
2018-07-15 00:00
分布式系统
zookeeper
【SparkStreaming】Windows 10环境下 Kafka+SparkStreaming运行实例
运行环境1.环境部署1.安装
zookeepr
2.安装Kafka2.ScalaAPI测试Producer和Consumer1.Maven依赖2.Producer3.Consumer3.运行结果3.SparkStreaming
weiiL
·
2018-06-14 10:15
Spark
bigdata
Kafka安装启动入门教程
我的原创地址:https://dongkelun.com/2018/05/21/kafkaConf/前言本文讲如何安装启动kafka,并进行测试,其中
zookeepr
是kafka自带的,本文基本按照官网文档进行安装启动的
董可伦
·
2018-05-22 23:00
安装部署
kafka
centos7
ZoopKeeper可视化zkui框架
一、简介zkui为zookeeper提供了一个web管理界面,可以对
zookeepr
的节点值进行CRUD操作,同时也提供了安全认证。
Developer
·
2018-04-28 00:00
可视化
maven
git
java
zookeeper
第七章 :Hadoop+Zookeeper 3节点高可用集群搭建和原理解释
Hadoop集群的作用,以前我们学习Hadoop伪分布式的时候没有用到Zookeeper是因为伪分布式只有一个NameNode,没有Active和Standby状态的两个NameNode之说,因此根本就不需要
Zookeepr
小爷欣欣
·
2018-04-02 14:44
大数据
从零学习hadoop
并发技术CountDownLatch的使用
ZooInspector,界面化管理zookeeper3.解压,点击zookeeper-dev-ZooInspector.jar进入界面管理4.点击绿色的启动按钮输入端口号启动5.打开界面如图6.在连接
zookeepr
djw745917
·
2018-03-22 14:26
java
ZooKeeper分布式锁与代码实现
事实上,
zookeepr
自己的领导者选举机制是不对外公开的。2.锁的具体实现代码
牛大财有大才
·
2017-12-12 16:19
分布式锁
zookeeper分布式锁
zookeeper
zookeeper相关
为zookeeper配置相应的acl权限
Zookeepr
是没有所有者的概念的。每个ZNode的ACL是独立的,且子节点不会继承父节点的ACL。例如:Znode/app对于ip为1
qianshanding0708
·
2017-09-21 15:10
ZooKeepr
配置文件详解
ZooKeepr
配置项详细说明 clientPort必须,不支持-D参数,监听端口dataDir必须,不支持-D参数,用于指定ZooKeeper服务器存储快照文件的目录,默认情况下,如果dataLogDir
莫名的拉风
·
2016-12-27 21:00
zookeeper
zookeeper配置
Kafka 快速搭建指南
1.下载Kafkawget tar zxvf kafka_2.11-0.10.0.0.tgzcd kafka_2.11-0.10.0.02.启动服务端Kafka需要用到
ZooKeepr
,所以需要先启动一个
自由linux
·
2016-07-11 02:54
Kafka
消息队列
kafka consumer group的删除和offset恢复
运维kafka时,会有时需要删除无效或已下线的consumergroup,若设置的offset保存位置是
zookeepr
,则数据都在zookeeper中,可自行删除,方式就是删除zookeeper相应节点
小胖头鱼
·
2016-03-23 15:07
kafka
ZooKeepr
日志清理
转载请用注明:@ni掌柜
[email protected]
在使用zookeeper过程中,我们知道,会有dataDir和dataLogDir两个目录,分别用于snapshot和事务日志的输出(默认情况下只有dataDir目录,snapshot和事务日志都保存在这个目录中,关于这两个目录的详细说明,请看《ZooKeeper管理员指南 》)。 正常运行过程中,ZK会不断地把快照数据和事务日志输
舒润
·
2016-03-02 11:00
zookeepr
杂讲
zookeeper是通过zab保证顺序性和一致性,基于paxos算法http://www.aboutyun.com/thread-13828-1-1.html保持分布式一致性算法,一般基于共享锁或者协议,zookeeper是通过协议的算法保证一致性(最终一致性伪实时性),最终一致性,没有实时性,要实时性的话需要用sync方法http://www.superwu.cn/2014/11/21/1423
g7n3f
·
2016-02-17 21:20
CDH Hadoop 集群部署方案
1、集群规划主机名称 主机IP 安装软件 运行的进程node1 10.1.19.100
zookeepr
1 DataNode、NodeManager、JournalNode
muruiheng
·
2016-01-07 14:00
Hadoop学习笔记 4 - 集群环境安装部署
一、集群规划:主机名称 主机IP 安装软件 运行的进程hadoop01 10.1.19.130
zookeepr
1 DataNode、NodeManager、JournalNode
muruiheng
·
2015-12-01 20:00
Hadoop2.2.0 HA高可用分布式集群搭建(hbase,hive,sqoop,spark)
1需要软件Hadoop-2.2.0Hbase-0.96.2(这里就用这个版本,跟Hadoop-2.2.0是配套的,不用覆盖jar包什么的)Hive-0.13.1
Zookeepr
-3.4.6(建议使用
Zookeepr
edentyin
·
2015-09-07 23:15
hadoop
spark
hadoop2.2+zookeeper+hbase安装详解
天津九安医疗电子--吴伟一、需要软件Jdk1.8.0_linuxHadoop-2.2.0(Apache官网Stable版本)Hbase-0.96.2(与Hadoop-2.2.0是配套的,不用覆盖jar包)
Zookeepr
hogface
·
2015-04-20 10:00
zookeepr
+kafka集群--代码实现(三)
项目基于maven构建,不得不说kafkajava客户端实在是太糟糕了;构建环境会遇到很多麻烦。建议参参考如下pom.xml;其中各个依赖包必须版本协调一致。 4.0.0 com.test test-kafka jar test-kafka http://maven.apache.org1.0.0 log4jlog4j1.2.14 org.apache.kafkakafka_2
pingli0204
·
2014-11-11 18:49
kafka
zookeepr
zookeepr
+kafka集群搭建(一)
来自吴超的课件:1.ZooKeeper 1.1zk可以用来保证数据在zk集群之间的数据的事务性一致。2.如何搭建ZooKeeper服务器集群 2.1zk服务器集群规模不小于3个节点,要求各服务器之间系统时间要保持一致。 2.2在hadoop0的/usr/local目录下,解压缩zk....tar.gz,设置环境变量 2.3在conf目录下,修改文件mvzoo_sample.cfg
pingli0204
·
2014-11-11 18:12
kafka
zookeepr
zookeepr
+kafka集群搭建(二)
zookeeper+kafka集群安装之二此为上一篇文章的续篇,kafka安装需要依赖zookeeper,本文与上一篇文章都是真正分布式安装配置,可以直接用于生产环境.zookeeper安装参考:首先了解几个kafka中的概念:kafka是一个消息队列服务器,服务称为broker,消息发送者称为producer,消息接收者称为consumer;通常我们部署多个broker以提供高可用性的消息服务集
pingli0204
·
2014-11-11 17:53
kafka
zookeepr
ZooKeepr
日志清理
转载请用注明:@ni掌柜
[email protected]
在使用zookeeper过程中,我们知道,会有dataDir和dataLogDir两个目录,分别用于snapshot和事务日志的输出(默认情况下只有dataDir目录,snapshot和事务日志都保存在这个目录中,关于这两个目录的详细说明,请看《ZooKeeper管理员指南 》)
kavy
·
2014-09-24 13:00
OO
zookeeper学习(一)
在看
ZooKeepr
的实现是,发现了有几个包缺失了(e.g. data, proto)。以为是code下载错了,后来发现,其实这些包的code都是由Jute自动生成的。
巴尾的兔兔帅
·
2014-06-09 15:00
zookeeper
Hadoop2.2.0基于QJM的HA实践
Hadoop2.2.0的NN的HA目前有两种方式,贫民的方式自然是QJM了,它会采用类似
Zookeepr
的方式来保存NN的LOG,而NFS的模式显然不是我等几台机器组成的集群的选项
zhangzhaokun
·
2014-01-05 22:00
zookeepr
的入门
在window上安装 单机安装非常简单,只要获取到 Zookeeper 的压缩包并解压到某个目录如:zookeeper-3.4.5 下,Zookeeper 的启动脚本在 bin 目录下,Linux 下的启动脚本是 zkServer.sh,在 3.4.5 这个版本 Zookeeper 提供 windows 下的启动脚本,zkServer.cmd , Zookeeper 的配置文件在 conf 目录
ljz0898
·
2013-11-25 16:00
OO
ZooKeeper 应用概述
ZooKeepr
,其官网对它的描述为:ADistributedCoordinationServiceforDistributedApplications。
须等待
·
2013-05-31 14:00
zookeeper
【ZooKeeper Notes 9】
ZooKeepr
日志清理
转载请用注明:@ni掌柜
[email protected]
在使用zookeeper过程中,我们知道,会有dataDir和dataLogDir两个目录,分别用于snapshot和事务日志的输出(默认情况下只有dataDir目录,snapshot和事务日志都保存在这个目录中,关于这两个目录的详细说明,请看《ZooKeeper管理员指南》)。 正常运行过程中,ZK会不断地把快照数据和事务
xubo_zhang
·
2013-01-15 16:00
zookeepr
单机伪集群配置
1.要在单机下搭建群集,简单的就是分别解压复制N个目录。2.每个目录,分配配置对应的data和myid,其中myid用来表明当前启动是哪个zookeeper3.配置文件的群集属性server.1=127.0.0.1:2881:3881server.2=127.0.0.1:2882:3883server.3=127.0.0.1:2883:3883server.4=127.0.0.1:2884:388
sharewind
·
2012-11-26 11:00
【ZooKeeper Notes 10】
ZooKeepr
监控
查看PDF转载请注明:@ni掌柜
[email protected]
在公司内部,有不少应用已经强依赖zookeeper,zookeeper的工作状态直接影响它们的正常工作。目前开源世界中暂没有一个比较成熟的zookeeper-monitor,于是开始zookeeper监控这块工作。目前zookeeper-monitor能做哪些事情,讲到这个,首先来看看哪些因素对zookeeper正常工作比较大的影
nileader
·
2012-10-20 08:51
监控
指南
报表
ZooKeeper
【ZooKeeper Notes 10】
ZooKeepr
监控
查看PDF转载请注明:@ni掌柜
[email protected]
在公司内部,有不少应用已经强依赖zookeeper,zookeeper的工作状态直接影响它们的正常工作。目前开源世界中暂没有一个比较成熟的zookeeper-monitor,于是开始zookeeper监控这块工作。 目前zookeeper-monitor能做哪些事情,讲到这个,首先来看看哪些因素对zookeeper正常工
nileader
·
2012-10-20 08:51
zookeeper
监控
报表
指南
taokeeper
Hadoop WordCount解读
因为最近配置了Hadoop的伪分布式和Hbase和
Zookeepr
的集群环境。现在正准备研究Hadooop,今天第一个Map/Reduce,启动成功,成就啊。
tswisdom
·
2012-09-03 11:00
【ZooKeeper Notes 9】
ZooKeepr
日志清理
转载请用注明:@ni掌柜
[email protected]
在使用zookeeper过程中,我们知道,会有dataDir和dataLogDir两个目录,分别用于snapshot和事务日志的输出(默认情况下只有dataDir目录,snapshot和事务日志都保存在这个目录中,关于这两个目录的详细说明,请看《ZooKeeper管理员指南》)。 正常运行过程中,ZK会不断地把快照数据和事务日志输
nileader
·
2012-07-16 08:20
zookeeper
指南
clean
日志清理
zookeepr
单机伪集群配置
(洋文不好,压根儿看不太明白官方文档啥意思)1. 要在单机下搭建群集,简单的就是分别解压复制N个目录。2. 每个目录,分配配置对应的data 和 myid ,其中myid 用来表明当前启动是哪个zookeeper3. 配置文件的群集属性server.1=127.0.0.1:2881:3881server.2=127.0.0.1:2882:3883server.3=127.0.0.1:2883:38
sharewind
·
2012-07-09 22:00
OO
zookeeper集群安装
分别解压至
zookeepr
集群机器(一般为基数台机器)相应目录(此处为$ZOOKEEPER_HOME),集群为mem1,mem2,mem3(hosts对应)。配置1. 分别在zoo
rzhzhz
·
2012-04-11 11:00
hadoop
集群
测试
each
部署分布式zookeeper部署分布式zookeeper的步骤:
部署分布式zookeeper的步骤:1.从官网下载
zookeepr
的最新版本http://zookeeper.apache.org/releases.html本文下载的版本是zookeeper-3.3.32
csforgood
·
2012-03-05 18:16
zookeeper
职场
休闲
部署分布式zookeeper部署分布式zookeeper的步骤:
部署分布式zookeeper的步骤:1.从官网下载
zookeepr
的最新版本http://zookeeper.apache.org/releases.html本文下载的版本是zookeeper-3.3.32
csforgood
·
2012-03-05 18:16
职场
休闲
zookeeper
HBASE
Hadoop WordCount解读
因为最近配置了Hadoop的伪分布式和Hbase和
Zookeepr
的集群环境。现在正准备研究Hadooop,今天第一个Map/Reduce,启动成功,成就啊。
a123159521
·
2011-11-01 17:00
wordcount
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他