E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
kafka2
Kafka 集群搭建
集群搭建需要服务器至少3台,奇数台2、Kafka的安装需要java环境,jdk1.83、Kafka安装包版本:kafka_2.11-0.10.0.1.tar.gz4、假设3台服务器分别为:kafka1、
kafka2
那小子、真烦
·
2024-02-02 14:30
KAFKA
kafka
分布式
zookeeper
CentOS7 安装 kafka3.0.0
文章目录前言一、安装JDK二、安装Kafka1、wget下载2、解压3、修改配置文件4、kafka配置文件详解三、启动kafka&停止启动1、先启动zk2、再启动kafka停止1、先停止
kafka2
、再停止
lfwh
·
2023-12-27 08:52
Centos7
Kafka
kafka
分布式
清空kafka数据
一清空kafka数据1关闭
kafka2
删除kafka存储目录(1)查询server.properties文件log.dirs配置,默认为“/tmp/kafka-logs”(2)删除目录3删除zookeeper
XHW___001
·
2023-12-27 07:53
linux
开发环境
kafka
大数据
Kafka(一):在WSL单机搭建Kafka伪集群
修改环境变量1.1.3修改配置文件1.1.4启动Kafka单机版1.2Linux1.2.1安装包下载1.2.2创建目录1.2.3添加环境变量1.2.4修改配置文件1.2.5运行Kafka1.2.6停止
Kafka2
yunyun1886358
·
2023-11-26 03:14
大数据
kafka
分布式
zk集群+Kafka集群搭建,开启kafka-manager控制台
zookeeper.apache.org/releases.html#downloadhttp://kafka.apache.org/downloads三体服务器,每台服务器设置ip别名分别为kafka1,
kafka2
Source_
·
2023-11-22 10:33
消息中间件/消息队列——RabbitMQ
目录一、消息中间件1、简介2、消息中间件主要作用3、消息中间件的两种模式1、P2P模式2、Pub/Sub模式4、常用中间件介绍与对比1、
kafka2
、RabbitMQ3、RocketMQ二、RabbitMQ
fajixianshouhu
·
2023-11-08 22:23
rabbitmq
kafka
第二节 kafka 重要配置
2.1Broker端参数log.dirs:日志文件目录,多个路径,用逗号分隔,比如/home/kafka1,/home/
kafka2
,/home/kafka3``。
农民工进城
·
2023-11-04 10:36
日志系统升级_ELK+KafKa
ELK+KafKa的相关配置安装zookeeper教程windows环境下安装配置Kafka集群系统中logback-spring.xml的配置,关于kafka配置说明kafka集群中的配置kafka1:
kafka2
陌然回首7
·
2023-11-03 05:32
日志
elasticsearch
elk
kafka
zookeeper
Docker部署Kafka
docker部署kafka1、拉取镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
、创建容器创建并运行zookeeperdockerrun-d
浮华1994
·
2023-11-03 01:56
DOCKER
docker
kafka
kafka环境搭建-springboot集成kafka
下载wurstmeister/kafka和wurstmeister/zookeeper镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
dark_horse_lk
·
2023-10-25 22:47
Spring
docker部署kafka并使用SpringBoot集成kafka
这里写自定义目录标题前言1、docker部署
kafka2
、Java连接kafka前言不熟悉docker的可以先去自行熟悉一下基本命令。找个时间我写个docker基础趴!
橘子皮..
·
2023-10-25 22:15
linux
kafka
docker
kafka伪集群部署,使用docker环境拷贝模式
线上启动容器的方式是复制容器的运行环境出来,然后进行运行脚本的形式1:在home/kafka目录下创建如下目录2:复制kafka1容器内的数据/bitnami/kafka/data,直接放在1992_data里面,同理,复制
kafka2
小徐敲java
·
2023-09-30 08:49
kafka
docker
分布式
Kafka快速实战以及基本原理详解
文章目录1、Kafka介绍1.1、MQ的作用1.2、为什么要用
Kafka2
、Kafka快速上手2.1、实验环境2.2、单机服务体验2.3、理解Kakfa的消息传递机制1、Kafka介绍ChatGPT对于
Tacy0213
·
2023-09-28 13:15
MQ
kafka
分布式
Docker 如何安装Kafka
1、下载镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
、启动zookeeperdockerrun-d--namezookeeper-p2181
嗨技术
·
2023-09-08 20:44
01-Kafaka
1、
Kafka2
的安装与配置1、上传kafka_2.12-1.0.2.tgz到服务器并解压:tar-zxfkafka_2.12-1.0.2.tgz-C/opt2、配置环境变量并更新:编辑profile配置文件
NikoWord
·
2023-09-07 07:15
09-mq
linq
c#
mac m1 docker 安装kafka和zookeeper
ip地址ifconfigen0192.168.0.105.下面的ip都会使用到1、拉取镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
bluewelkin
·
2023-08-28 06:42
kafaka
kafka
Kafka的简单介绍-刘宇
、什么是消息队列2、消息队列的分类2.1、点对点(Peer-to-Peer)2.2、发布订阅(Pub/Sub)3、P2P和发布订阅的区别4、使用场景5、常见的消息系统二、Kafka的基本概念1、什么是
Kafka2
Brycen Liu
·
2023-07-30 22:01
Kafka
kafka
消息中间件
docker安装kafka和zookeeper
1、下载镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
、启动zookeeper容器dockerrun-d--namezookeeper-p2181
程序员老石
·
2023-07-15 19:31
消息中间件
kafka
java-zookeeper
docker
利用Docker 安装 zookeeper和kafka
linux服务云,如果是裸机,需要安装jdk和docker,这里就不赘述准备工作了1拉取镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
qq_34324703
·
2023-07-14 09:41
java-zookeeper
docker
zookeeper
zookeeper和kafka的配置及运行、kafka的生产和消费(简单linux命令行)、服务器参数配置了解
文章目录1.从git上安装及单机配置和启动zk2.zk集群的搭建1)简历域名映射2)修改三台zk的配置(zoo.cfg里面修改)3)启动zk服务器3.安装并单机配置kafka1)安装及配置
kafka2
)
谢白羽
·
2023-06-22 21:06
中间件
kafka
zookeeper
分布式
Kafka09:【案例】Flume集成Kafka
一、Flume集成Kafka在实际工作中flume和kafka会深度结合使用1:flume采集数据,将数据实时写入
kafka2
:flume从kafka中消费数据,保存到hdfs,做数据备份下面我们就来看一个综合案例使用
做一个有趣的人Zz
·
2023-06-20 00:53
kafka
kafka
flume
big
data
Kafka常见面试题
文章目录1什么是
kafka2
为什么要使用kafka,为什么要使用消息队列3.Kafka中的ISR、AR又代表什么?
Klaus_S
·
2023-06-08 23:48
kafka
java
分布式
【Kafka】面试题总结
KafkaKafka1、为什么要使用
kafka2
、Kafka的架构是怎么样的3、Kafka如何保证消息不丢失4、Kafka如何保证消息不重复消费5、什么是Kafka的重平衡机制6、Kafka几种选举过程简单介绍一下
跪在镜子前喊帅
·
2023-06-08 12:22
面试题
java
Flume系列:Flume常用采集通道案例
目录ApacheHadoop生态-目录汇总-持续更新1:文件->flume->
kafka2
:kafka->flume->hdfs(方案一)3:kafka->flume->hdfs(方案二)ApacheHadoop
iwester
·
2023-06-07 03:41
#
Flume
Hadoop生态
flume
大数据
hadoop
腾讯云TDSQL分布式数据库安装部署
##############4台(CPU:4core/MEM:8G/HDD:100G)172.17.16.2mac1:zk1,kafka1,proxy1,db1172.17.16.5mac2:zk2,
kafka2
DBA-fashion
·
2023-04-05 19:23
TDSQL
kafka面试题知识点整理
kafka-面试题整理刚刚学了kafka,整理一些面试题知识点,帮助记忆1、什么是
kafka2
、什么是消息队列3、kafka通信流程4、Leader选举流程5、副本及同步原理6、消费者消费数据的方式7、
干饭的猪
·
2023-04-05 11:36
kafka
kafka可视化客户端工具(Kafka Tool)的基本使用 超详细
目录1.下载2、安装3、简单使用1)连接
kafka2
)简单使用1.下载下载地址:OffsetExplorer2、安装根据不同的系统下载对应的版本,我这里kafka版本是1.1.0,下载kafkatool2.0.1
金乌爬虫
·
2023-03-29 22:45
数据库操作
kafka
java
分布式
SpringBoot 集成 Kafka
SpringBoot集成Kafka1安装
Kafka2
创建Topic3Java创建Topic4SpringBoot项目4.1pom.xml4.2application.yml4.3KafkaApplication.java4.4CustomizePartitioner.java4.5KafkaInitialConfig.java4.6SendMessageController.java5
深色風信子
·
2023-02-19 07:18
kafka
spring
boot
java
Flume:自定义拦截器-选择器-kafka
文章目录一、kafka基本操作与flume级联案例操作手册(不使用选择器、拦截器)1、启动hdfs、
kafka2
、准备级联配置:(第一版:不使用选择器、拦截器)3、kafka的基本命令操作:4、启动flume
叫我小蟹
·
2022-12-22 07:20
flume
kafka
flume
kafka
【技术分享】fluentd对接kafka + sasl_ssl plain 认证方式案例
kafka&kafka的sasl_plainsasl_ssl配置方案:二、Fluentd(td-agent)&kafka的sasl_plainsasl_ssl配置方案:总结引言td-agent自带的插件
kafka2
Coder_preston
·
2022-12-04 12:42
技术分享
kafka
ssl
分布式
【电商数仓】日志采集架构设计原理、系统表结构解析、数仓分层相关概念、范式理论详解
文章目录一日志采集架构设计原理1为什么使用Flume将数据生产进
kafka2
为什么还需要一个消费的Flume3深入细节4业务日志采集二电商系统表1后台管理系统2电商业务表三数仓分层1分为哪几层2为什么要分层
OneTenTwo76
·
2022-11-16 07:01
电商数仓
kafka
大数据
分布式
k8s部署kafka集群zk
109857229部署zookeeper1、编写kafka空间yaml文件catkafka-namespace.yamlapiVersion:v1kind:Namespacemetadata:name:
kafka2
划水的运维
·
2022-09-25 20:02
k8s
容器
SpringBoot集成Kafka
1.安装kafka1)安装zk和kafka镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
)启动zk镜像生成容器dockerrun-d
Mu_Mu是一只小白
·
2022-06-16 00:21
环境搭建
springBoot整合
kafka
docker
外网无法访问Kafka
kafka3.0.0集群搭建
192.168.56.20conch01zookeeper、kafka192.168.56.21conch02zookeeper、kafka192.168.56.22conch03zookeeper、
kafka2
爱上口袋的天空
·
2022-04-06 17:07
kafka
kafka
docker安装kafka
1、下载镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
、启动zookeeperdockerrun-d--namezookeeper-p2181
·
2022-02-23 14:49
kafkadocker
微服务架构中,二次浅封装实践
背景简介二、框架浅封装1、浅封装作用2、统一版本控制三、实践案例1、案例简介2、分层架构3、目录结构4、技术栈组件四、微服务组件1、Nacos2、Gateway3、Feign4、Seata五、中间件集成1、
Kafka2
知了一笑
·
2021-11-21 15:00
linux如何查看kafka消息队列,查看kafka消息队列的积压状况
replication-factor2--partitions3--topicmydemo5列出topicbootstrapkafka-topics--list--zookeepermaster:2181/
kafka2
风口上的诸侯
·
2021-05-17 16:00
kafka2
:性能优化
参考kafka技术分享如何确定Kafka的分区数,key和consumer线程数,以及不消费问题解决kafka性能参数和压力测试揭秘kafkaproducer线程与吞吐量1.partition数量配置partition数量由topic的并发决定,并发少则1个分区就可以,并发越高,分区数越多,可以提高吞吐量。创建topic时指定topic数量bin/kafka-topics.sh--create--
myparamita
·
2021-05-09 19:33
Kafka 实战:(一)Kafka安装配置教程及常用命令
kafka_2.11-2.0.0.tgz至/opt/目录下,并重命名为kafkatar-zxvfkafka_2.11-2.0.0.tgz-C/opt/cd/opt/mvkafka_2.11-2.0.0/
kafka2
萧渊之
·
2021-01-20 12:05
java
kafka
【Kafka】实战:(一)Kafka安装配置教程及常用命令
kafka_2.11-2.0.0.tgz至/opt/目录下,并重命名为kafkatar-zxvfkafka_2.11-2.0.0.tgz-C/opt/cd/opt/mvkafka_2.11-2.0.0/
kafka2
萧渊之
·
2020-12-31 15:29
java
kafka
kafka新旧大版本 共用一个zookeeper,如何使用命令行?
kafkaconfig/server.properties配置注意:zookeeper.connectzookeeper.connect,注意,在路径后面,我指定本kafka集群使用zookeeper中/
kafka2
雨夜天晴
·
2020-09-16 13:53
数据库
kafka
【Flink基础】-- 写入 Kafka 的两种方式
方式一:用Robin的方式写入Kafka1、实现exactly-once语义的kafkasink,用Robin的方式写入
Kafka2
、randomRobin:创建FlinkKafkaProducer时,
highfei2011
·
2020-09-15 22:47
Scala
Flink
flink
kafka
spring-kafka入门学习(一):kafka的安装与启动
目录一、软件版本的选择二、安装zookeeper1下载zookeeper2配置zookeeper3启动zookeeper三、安装kafka1下载
kafka2
配置kafka3启动kafka四、测试一、软件版本的选择二
阿瑟与非
·
2020-09-14 13:04
spring-kafka
kafka
zookeeper
java
安装kafka
1、下载:kafka_2.11-0.10.1.1.tgz最终解压(到)成/usr/local/
kafka2
、配置:mkdir-p/usr/local/kafka/log/kafka//创建kafka日志目录
mydream119
·
2020-09-11 07:54
无头无尾
【spring cloud stream】spring cloud stream配置多个kafka地址
spring:cloud:stream:binders:#接下来的kafka1和
kafka2
就是两个kafkabroker的环境配置,配置完成后可以应用kafka1、
kafka2
这个定义的名字#在别的地方引用
ColdFireMan
·
2020-08-23 09:58
java
开发框架
Docker安装kafka
Docker安装kafka1、下载镜像dockerpullzookeeperdockerpullwurstmeister/
kafka2
、启动zookeeper容器dockerrun-d--namezookeeper-p2181
陌复流年
·
2020-08-16 04:13
docker——kafka集群安装
1、下载kafka镜像:dockerpullwurstmeister/
kafka2
、编写docker-compose.yml文件version:'2'services:kafka:build:.image
0day__
·
2020-08-16 03:36
docker
kafka
安装docker的kafka集群
qq_38270106/article/details/88789737新建docker的kafka配置文件mkdir-p/usr/local/docker-compose/kafka/{kafka1,
kafka2
From zero to all
·
2020-08-16 00:55
docker安装kafka集群
qq_38270106/article/details/88789737新建docker的kafka配置文件mkdir-p/usr/local/docker-compose/kafka/{kafka1,
kafka2
落叶飘零z
·
2020-08-16 00:54
Linux
zookeeper
kafka
docker安装kafka和zookeeper
1下载镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
启动zookeeper容器dockerrun-d--namezookeeper-p2181
qq_16563637
·
2020-08-16 00:28
docker
kafka
zookeeper
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他