E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
——Zookeeper
Hbase的部署安装实践
安装部署hbase一、安装
zookeeper
1.进入压缩包所在文件夹,解压并安装解压安装路径2.重命名安装文件3.赋予用户当前目录的权限4、将
Zookeeper
的安装路径添加到系统的环境变量之中编辑用户根目录下的
煮酒、
·
2023-11-26 03:47
大数据
hadoop
linux
hdfs
zookeeper
Zookeeper
(一):在WSL单机搭建
Zookeeper
伪集群
目录
Zookeeper
1启动单个
Zookeeper
实例1.1下载
Zookeeper
安装包并解压1.2添加环境变量1.3修改默认配置1.4新建数据存储目录和日志目录1.5启动
Zookeeper
1.6停止
Zookeeper
2
yunyun1886358
·
2023-11-26 03:45
分布式
zookeeper
分布式
Kafka(一):在WSL单机搭建Kafka伪集群
1.1.4启动Kafka单机版1.2Linux1.2.1安装包下载1.2.2创建目录1.2.3添加环境变量1.2.4修改配置文件1.2.5运行Kafka1.2.6停止Kafka2搭建Kafka集群2.1搭建
Zookeeper
yunyun1886358
·
2023-11-26 03:14
大数据
kafka
分布式
kafka快速入门
目录1kafka1.1kafka介绍1.2kafka安装和配置1.2.1jdk环境1.2.2
zookeeper
安装1.2.3kafka安装1.3kafka入门案例1.3.1创建工程kafka-demo1.3.2
赵广陆
·
2023-11-26 03:48
kafka
kafka
linq
分布式
Nacos安装使用
用来取代以前常用的注册中心(
zookeeper
,eureka等等),以及配置中心(spri
阿亮说技术
·
2023-11-26 03:26
微服务_java
nacos
微服务
Grafana实现下拉列表 、动态传参
最近整理了一份大厂面试资料《史上最全大厂面试题》,Springboot、微服务、算法、数据结构、
Zookeeper
、Mybatis、Dubbo、linux、Kafka、Elasticsearch、数据库等等获取方式
飞乐鸟
·
2023-11-26 01:57
grafana
Linux kafka常用命令
/kafka-topics.sh--
zookeeper
172.18.111.106:21
zrx林夕
·
2023-11-26 01:23
java
linux
kafka
linux
zookeeper
Linux下查看某个进程占用的CPU、内存
1、用top命令指定固定的PIDtop-p109972、查询指定进程的PIDps-ef|grep
zookeeper
3、使用ps查询指定进程名或者PID的占用情况ps-aux|grep
zookeeper
ps-aux
xujianjun229
·
2023-11-26 00:39
ubuntu
and
linux
linux
运维
服务器
【
zookeeper
】
zookeeper
如何 关闭 kerberos认证 Exception while determining if
ZooKeeper
is secure
文章目录1.概述【今天女朋友生日,有意义的一天,发个博客庆祝一下】1.概述有一个环境,我们开启了Zookeeoer认证,然后根据文章:【
zookeeper
】
zookeeper
源码
zookeeper
z中Kerberos
九师兄
·
2023-11-26 00:52
不体系
java-zookeeper
zookeeper
kafka
Kafka安全认证:SASL/GSSAPI (kerberos)
文章目录1.环境2.创建主体并生成keytab3.配置jaas.conf4.配置kafkaserver.properties5.配置kafka
zookeeper
.properties6.kafkabroker
Matty_Blog
·
2023-11-26 00:21
Kafka
kafka2.5版本常用命令大全
创建主题,replication分区partitions副本数,对应broker数量kafka-topics.sh--create--
zookeeper
${host}:2181--replication-factor1
李岱滨
·
2023-11-25 23:36
Zookeeper
和 Redis 哪种更好?
Zookeeper
和Redis哪种更好?普通人Redis可以使用SetNX这个指令来实现分布式锁,
Zookeeper
可以基于同一级节点的唯一性或者有序节点的特性来实现分布式锁。
武昌库里写JAVA
·
2023-11-25 22:06
zookeeper
redis
分布式
Relabel与Metic Relabel
它可以与各种服务发现工具集成,如Kubernetes、Consul、Eureka和
Zookeeper
等。
inner222
·
2023-11-25 20:43
prometheus
基于centos7的hadoop2.7、
zookeeper
3.5、hbase1.3、spark2.3、scala2.11、kafka2.11、hive3.1、flume1.8、sqoop1.4组件部署
部署前准备修改主机名1、修改主机名(6台机器都要操作,以Master为举例)hostnamectlset-hostnameMaster(永久修改主机名)reboot(重启系统)修改hosts将第一行127.0.0.1xxxx注释掉,加上:195.168.2.127master195.168.2.128slave1195.168.2.129slave2确认网卡信息vi/etc/sysconfig/n
luoz_python
·
2023-11-25 19:42
大数据平台运维
hadoop
大数据
spark
flume
kafka
SpringCloud 注册中心 Eureka 集群是怎么保持数据一致的?
下面从2个方面来说明:什么是弱数据一致性Eureka是如何同步数据的1.弱数据一致性我们知道
ZooKeeper
也可以实现数据中心,
ZooKeeper
就是强一致性的。分布式系统中有一个重要理论:CAP。
风平浪静如码
·
2023-11-25 17:26
educoder中kafka-入门篇
/bin/bash#1.创建一个副本数量为1、分区数量为3、名为demo的Topickafka-topics.sh--create--
zookeeper
127.0.0.1:2181--replication-factor1
小施没烦恼
·
2023-11-25 17:41
大数据处理Spark
kafka
zookeeper
分布式
kafka第一篇 kafka入门
1.kafka入门kafka默认端口号:9092
zookeeper
:21811.1安装brewinstallkafka1.2安装目录#kafka安装目录/usr/local/Cellar/kafka/2.1.0
z阿木木的眼泪
·
2023-11-25 17:10
kafka
kafka
大数据
大数据开发之Kafka篇----Kafka入门(2)
部署试用篇说了这么就的Kafka理论知识,我们也需要实际操作一波了
Zookeeper
部署使用Kafka肯定离不开使用
Zookeeper
的,这里我们介绍一下在3台机器上部署
Zookeeper
的过程(但我就只在我是在我本机上演示的
豆豆总
·
2023-11-25 17:40
Kafka
kafka入门篇-使用
中生产数据生产学生信息搭建kafka1、上传压缩包到任意节点2、解压,配置环境变量所有节点都配置3、修改config/server.properties1、broker.id=0,每一个节点broker.id要不一样2、
zookeeper
.connect
啊帅和和。
·
2023-11-25 17:35
Kafka专栏。
大数据专栏。
spark
大数据
big
data
Kafka入门-Kafka安装(Windows环境)
写在前面:1,Kafka安装之前,首先电脑上应该有安装JDK环境,
Zookeeper
(Kafka需要依赖于
Zookeeper
环境),
Zookeeper
的安装可以参考这篇文章:https://blog.csdn.net
HanChen.log
·
2023-11-25 17:02
Kafka
Kafka
zookeeper
的acl权限控制_
ZooKeeper
ACL权限设置
ZK的节点有5种操作权限:CREATE、READ、WRITE、DELETE、ADMIN也就是增、删、改、查、管理权限,这5种权限简写为crwda(即:每个单词的首字符缩写)注:这5种权限中,delete是指对子节点的删除权限,其它4种权限指对自身节点的操作权限身份的认证有4种方式:world:默认方式,相当于全世界都能访问auth:代表已经认证通过的用户(cli中可以通过addauthdigest
陈悦天
·
2023-11-25 16:32
spring-boot Kafka事务
需求在使用@Transactional注解实现数据库事务时,需要在数据库commit成功后才发送消息,如果事务回滚了,消息就不发送数据库操作使用的是mybatis实现依赖
zookeeper
版本3.6kafka
东南枝下
·
2023-11-25 16:20
kafka常见命令汇总
停止命令bin/
zookeeper
-server-stop.sh-daemonconfig/
zookeeper
.propertiesbin/kafka-server-stop.sh-daemonconfig
Stestack
·
2023-11-25 16:09
kafka
分布式
使用DolphinScheduler调度DataX完成Mysql到Mysql的数据同步
使用DolphinScheduler调度DataX完成Mysql到Mysql的数据同步DolphinScheduler集群的部署基础环境:Mysql(5.7.25)JDK(1.8.0_144)
Zookeeper
下雨不撑伞丶
·
2023-11-25 13:35
大数据
mysql
大数据
数据仓库
SLF4J: Class path contains multiple SLF4J bindings
环境:操作系统window10,gradle版本:gradle-6.8.3,IDE:IntelliJIDEA2019.3.4x64目录前言:1、冲突原因:在使用springboot中,引入
zookeeper
2
魂玉天成
·
2023-11-25 11:37
bug
intellij-idea
java
关于UnsupportedOperationException: Constructor threw an exception for org.apache.hadoop.hbase.ipc的问题
今天在搭建hbase的环境的时候正常配置了hbase-env.sh,hbase-site.xml文件后,先启动HDFS环境和
Zookeeper
环境之后,启动hbase,启动之后发现我们的进程HRegionServer
holywangle
·
2023-11-25 11:36
apache
hadoop
hbase
Kafka常用命令
kafka自带命令的使用1.创建topic:kafka-topics.bat--create--
zookeeper
localhost:2181--replication-factor1--partitions1
编码之路就在脚下
·
2023-11-25 10:05
kafka
java开发
kafka
Zookeeper
+Hadoop+Hbase+Hive+Kylin+Nginx集群搭建
Zookeeper
+Hadoop+Hbase+Hive+Kylin+Nginx集群搭建一、虚拟机安装Centos71.准备工作2.centos7安装过程3.关闭防火墙(关键)二、安装jdk1.卸载镜像自带
桃橙柳
·
2023-11-25 09:15
大数据生态安装
大数据
hadoop
linux
hdfs
centos
完全分布式安装Hadoop,Hive,Hbase,Hwi,
Zookeeper
完全分布式安装Hadoop,Hive,Hbase,Hwi,
Zookeeper
其他部分见:HDFSYARN
zookeeper
HBASEHIVEHIVEhwi的启动HDFS和HBASE动态增加和减少节点一.
ljtyxl
·
2023-11-25 09:45
bigdata
hadoop
hbase
zookeeper
hive
使用
Zookeeper
实现分布式锁(二)
常用的锁思想1.乐观锁与悲观锁悲观锁:就是在并发环境下很悲观,每次拿数据都会认为别人要修改数据,所以每次拿数据的时候都会上锁,这样有人拿数据的时候,其他人就不能进行增删改查的操作.很多关系型数据库中用了这种锁机制.比如行锁,表锁.乐观锁:就是并发情况下很乐观,每次拿数据的时候认为别人不会去修改,所以不会上锁,而是采用一个version字段作为版本控制,如果别人修改时version与当前数据的ver
随手点灯
·
2023-11-25 09:49
Mysql到Hbase数据实时增量同步案例(框架:MySQL-binlog+Maxwell+Kafka+python+Hbase)
系统环境CentOSLinux、JDK、
zookeeper
、kafka、Maxwell、MySQL、Hbase本次可以学习如下知识:1)、MySQLbinlog启用配置与
AllenGd
·
2023-11-25 09:09
Python
kafka
hbase
python
kafka
maxwell
(二)大数据---Hadoop组件介绍,区别
文章目录文件系统数据存储内存技术数据搜集消息系统数据处理查询引擎分析和报告工具调度与管理服务机器学习开发平台Hive,Impala,pig区别HDFS:分布式文件系统YARN:分布式资源管理MapReduce、Spark、Flink:分布式计算框架Yarn/Mesos:分布式资源管理器
zookeeper
(─__─)
·
2023-11-25 07:37
Hadoop
hadoop
big
data
大数据
rpm安装和卸载软件
example.rpm包并在安装过程中显示正在安装的文件信息;rpm-ivhexample.rpm安装example.rpm包并在安装过程中显示正在安装的文件信息及安装进度;2、查看安装完成的软件[root@jacky
zookeeper
黑客不黑_
·
2023-11-25 07:09
大型网络日志中心的实现
架构拓扑如下:ELK环境的搭建看前面文章用elk建立网络日志中心实践
zookeeper
安装:Hosts修改[root@10-57-22-234bin]#cat/etc/hosts10.57.22.167zk110.5
wsf535
·
2023-11-25 05:37
2023.11.24 海豚调度,postgres库使用
目录海豚调度架构dolphinschedulerDAG(DirectedAcyclicGraph),个人自用启动服务DS的架构(海豚调度)海豚调度架构dolphinscheduler注:需要先开启
zookeeper
白白的wj
·
2023-11-24 22:20
linux
运维
服务器
大数据
hadoop
database
数据仓库
探究Kafka原理-2.Kafka基本命令实操
原理如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成2023计划中:源码溯源,一探究竟联系方式:nhs19990716,加我进群,大家一起学习,一起进步,一起对抗互联网寒冬文章目录安装部署安装
zookeeper
爱吃芝士的土豆倪
·
2023-11-24 22:07
kafka
kafka
分布式
java
docker安装部署Apache Griffin
dockerpullapachegriffin/griffin_spark2:0.3.0dockerpullapachegriffin/elasticsearchdockerpullapachegriffin/kafkadockerpull
zookeeper
柒柒钏
·
2023-11-24 21:35
安装教程
docker
apache
Griffin
Grafana如何实现折线柱状图
最近整理了一份大厂面试资料《史上最全大厂面试题》,Springboot、微服务、算法、数据结构、
Zookeeper
、Mybatis、Dubbo、linux、Kafka、Elasticsearch、数据库等等获取方式
飞乐鸟
·
2023-11-24 18:05
Grafana
grafana
docker安装kafka
单机版window下新建一个文件kafka-alone.yml,文件内容如下:version:'2'services:zk:image:
zookeeper
:3.6container_name:zk_c0ports
zhaoxichen_10
·
2023-11-24 17:35
docker
mq
kafka
docker
连接
zookeeper
报错Connection refused: no further information
消费端启动类控制台循环打印:java.net.ConnectException:Connectionrefused:nofurtherinformationatsun.nio.ch.SocketChannelImpl.checkConnect(NativeMethod)~[na:1.8.0_251]atsun.nio.ch.SocketChannelImpl.finishConnect(Socke
notTu
·
2023-11-24 16:30
学习
java-zookeeper
zookeeper
dubbo
dubbo服务启动报错connection refused
Connectionrefusedatsun.nio.ch.SocketChannelImpl.checkConnect(NativeMethod)atsun.nio.ch.SocketChannelImpl.finishConnect(SocketChannelImpl.java:715)atorg.apache.
zookeeper
.Clien
小雨仙
·
2023-11-24 16:30
java
Kafka源码分析 Topic与Partition使用
bin/kafka-topics.sh--
zookeeper
localhost:218
顧棟
·
2023-11-24 15:09
Kafka源码分析
kafka
Zookeeper
连接超时
一、错误描述安装完
zookeeper
后,启动服务,然后进行测试,报“Errorcontactingservice.Itisprobablynotrunning.”
Qhj0211
·
2023-11-24 15:38
zookeeper
源码 — 四、session建立
目录session建立的主要过程客户端发起连接服务端创建sessionsession建立的主要过程用一张图来说明session建立过程中client和server的交互主要流程服务端启动,客户端启动客户端发起socket连接服务端acceptsocket连接,socket连接建立客户端发送ConnectRequest给serverserver收到后初始化ServerCnxn,代表一个和客户端的连接
weixin_34351321
·
2023-11-24 15:37
大数据
runtime
cloudtalk 无法连接到消息服务器,solr - Solr Cloud down无法与
Zookeeper
对话客户端会话超时 - 堆栈内存溢出...
我有在16GBRAM内存上运行的solr云,用于分片的2个solr节点(相同ip),嵌入式
zookeeper
。
貔蚯
·
2023-11-24 15:07
cloudtalk
无法连接到消息服务器
【
ZooKeeper
】Curator 简单介绍以及连接
zookeeper
重连策略的简单使用
Curator简单介绍Curator是Netflix公司开源的一套
zookeeper
客户端框架,解决了很多
Zookeeper
客户端非常底层的细节开发工作,包括连接重连、反复注册Watcher和NodeExistsException
codingXT
·
2023-11-24 15:01
zookeeper
python 异步任务框架 Celery 入门,速看
celery本身并不包含消息队列,它支持一下消息队列RabbitMQRdisAmazonSQS
Zookeeper
更多关于Broker见官方文档backen
软件测试小白
·
2023-11-24 15:26
Zookeeper
Leader选举机制 (图文解释)
第一次启动:假设这是一个有5台设备的集群:服务器1启动,发起一次选举,服务器1投自己一票,此时服务器1票数为一票,不够半数以上(3票),选举无法完成,服务器1状态保持为LOOKING。服务器2启动,再发起一次选举,服务器1和2分别投自己一票,并且交换选票信息。此时服务器1发现服务器2的myid比自己目前投票推举的(服务器1)大,更改选票为推举服务器2,此时服务器1票数为0票,服务器2票数为2票,并
嘉嘉嘉Jessie
·
2023-11-24 15:41
zookeeper
ZooKeeper
Leader选举
ZooKeeper
Leader选举
ZooKeeper
集群中有三种服务器角色:Leader、Follower和Observe。
loser与你
·
2023-11-24 15:10
Zookeeper
zookeeper
分布式
大数据
ZooKeeper
集群中的Leader、Follower、Observer节点的作用,以及选举机制
ZooKeeper
集群中的Leader、Follower、Observer节点的作用ZooKeepr采用的是主从模式,有主节点(Leader)和从节点(Follower),这也就意味着一个集群最少需要两台服务器
写写SQL
·
2023-11-24 14:07
zookeeper
上一页
28
29
30
31
32
33
34
35
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他