E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
kafka2
Docker搭建Kafka
下载Kafka和Zookeeper镜像文件1,dockerpullwurstmeister/
kafka2
,dockerpullwurstmeister/zookeeper先运行zk,再运行kafka1,
Art&Code
·
2020-08-15 22:52
【kafka-部署】docker快速构建kafka测试环境(单机)
1、下载kafka和zookeeper镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
、启动容器这里zk对应宿主机的端口不设置
b_just
·
2020-08-15 20:17
kafka
docker
kafka2
实现原理二
3.PartitionReplication原则Kafka高效文件存储设计特点Kafka把topic中一个parition大文件分成多个小文件段,通过多个小文件段,就容易定期清除或删除已经消费完文件,减少磁盘占用。通过索引信息可以快速定位message和确定response的最大大小。通过index元数据全部映射到memory,可以避免segmentfile的IO磁盘操作。通过索引文件稀疏存储,可
麟玉
·
2020-07-30 04:51
六、Spark Streaming消费数据反写Kafka
需求:1、flume将socket流数据采集到
kafka2
、streaming读取kafka的数据进行清洗3、将清洗后的数据再次放到kafka清洗后的结果数据为:houseid|gathertime|srcip
murphyZ
·
2020-07-14 15:23
Kafka
使用docker搭建kafka
下载基础镜像**由于kafka需要zookeeper管理,因此需要先安装zookeeper的镜像#dockerpullwurstmeister/zookeeper#dockerpullwurstmeister/
kafka2
陈小咩咩
·
2020-07-08 05:21
kafaka
Kafka集群部署
集群搭建需要服务器至少3台,奇数台2、Kafka的安装需要java环境,jdk1.83、Kafka安装包版本:kafka_2.11-0.10.0.1.tar.gz4、假设3台服务器分别为:kafka1、
kafka2
xuesp
·
2020-07-07 07:14
Kafka
Kafka
HyperLedger Fabric 交易流程
zookeeper0,kafka0,ca1,192.168.1.121peer2,orderer2,zookeeper1,kafka1ca2192.168.1.122peer3,zookeeper2,
kafka2
jamenew
·
2020-07-01 02:15
Fabric联盟链
fabric2.环境部署
主机名IP使用情况备注p1192.168.11.130ZK1、Kafka1、Orderer1、Peer1p2192.168.11.133ZK2、
Kafka2
、Orderer2、Peer2p3192.
hnclsl
·
2020-07-01 00:28
区块链
k8s搭建kafka集群
1、创建namespace2、创建动态持久化存储卷3、创建zk集群4、创建kafka集群1、创建namespaceapiVersion:v1kind:Namespacemetadata:name:
kafka2
wangmiaoyan
·
2020-06-27 13:27
Linux
k8s
Linux系统中KafKa安装和使用方法 java客户端连接kafka
单机安装1下载并安装kafka# tar zxvf kafka_2.12-1.1.0tgz # mv kafka_2.12-1.1.0 /usr/local/kafka# cd /usr/local/
kafka2
我是女孩
·
2020-06-27 06:59
环境搭建
kafka集群(伪分布式)的搭建及集成springboot
1、下载zookeeper2、创建data、logs文件夹3、修改zoo.cfg文件4、搭建zookeeper25、搭建zookeeper36、测试zookeeper集群三、搭建kafka集群1、下载
kafka2
身为风帆,要顺其自然
·
2020-06-25 06:56
kafka
kafka
Kafka原理及Kafka群集部署
Kafka的特性5)Kafka架构6)Topic和Partition的区别7)kafka流程图8)Kafka的文件存储机制9)数据的可靠性和持久性保证10)leader选举二、部署单机Kafka1)部署
Kafka2
筱振
·
2020-02-27 14:13
Kafka原理
Kafka群集部署
Linux
架构
【kafka-部署】docker快速构建kafka测试环境(单机)
1、下载kafka和zookeeper镜像dockerpullwurstmeister/zookeeperdockerpullwurstmeister/
kafka2
、启动容器这里zk对应宿主机的端口不设置
粮忆雨
·
2020-02-16 23:42
RabbitMQ和kafka对于消费失败处理总结
kafka2
、消费失败处理方案(个人思考)业务处理异常时,暂不提交offset,利用数据库(关系型或非
huangxiongbiao
·
2020-01-06 05:01
Windows10 搭建Kafka集群
下载Kafka:http://mirror.bit.edu.cn/apache/kafka/2.3.0/kafka_2.12-2.3.0.tgz2.解压后复制Kafka文件夹,分别命名为kafka1、
kafka2
武培轩
·
2019-08-30 11:00
Docker搭建Kafka
下载Kafka和Zookeeper镜像文件1,dockerpullwurstmeister/
kafka2
,dockerpullwurstmeister/zookeeper先运行zk,再运行kafka1,
toov5
·
2019-08-24 22:00
查看kafka消息队列的积压情况
kafka2--replication-factor2--partitions3--topicmydemo5列出topickafka-topics--list--zookeepermaster:2181/
kafka2
猩球崛起
·
2019-07-14 16:25
kafka
消息积压
安装kafka-manager监控Kafka集群状态(搭配kafka tool使用)
如果你使用的是
Kafka2
深寒丶
·
2019-05-22 23:41
大数据
producer:WARN Bootstrap broker
kafka2
:9092 disconnected (org.apache.kafka.clients.NetworkClient)
/kafka-console-producer.sh-broker-listkafka1:9092,
kafka2
:9092,kafka3:9092-topictest[2019-04-2408:52:56,252
wo1769815
·
2019-04-24 09:13
Linux
kafka
producer
Kafka集群部署
集群搭建需要服务器至少3台,奇数台2、Kafka的安装需要java环境,jdk1.83、Kafka安装包版本:kafka_2.11-0.10.0.1.tar.gz4、假设3台服务器分别为:kafka1、
kafka2
xuesp
·
2019-03-03 21:40
Kafka
HyperLedger Fabric 交易流程
zookeeper0,kafka0,ca1,·192.168.1.121peer2,orderer2,zookeeper1,kafka1ca2·192.168.1.122peer3,zookeeper2,
kafka2
newthink
·
2019-02-21 15:00
服务器
分布式
BlockChain区块链
苏先生之大数据面试经验总结(二)
适合做日志采集,可以定制多种数据源,减少开发量;而kafka是分布式消息处理的中间件,自带存储功能,适合做日志缓存;flume主要用于将数据往HDFS、HBASE发送;如果涉及多个系统的使用,可以选择用
kafka2
菜鸟苏先森
·
2018-11-25 21:23
笔记
Kafka集群安装和配置(二)
(一)、环境介绍1、服务器的相关设置:1、kafka1:172.20.67.522、
kafka2
:172.20.67.563、kafka3:172.20.67.572、zookeeper所需的三个端口1
lqbyz
·
2018-11-12 17:07
kafka
安装
配置
中间件
区块链杂项
区块链技术是一个对多种技术的组合创新,多种技术包括:1、共识算法:POW/POS/DPOS/PBFT/BFT-Raft/Paxos/
Kafka2
、P2P通讯:自举(bootstrapped)/连接/广播
VeC_House
·
2018-10-28 16:33
docker环境下安装kafka
docker环境下安装kafka一、安装kafka单机版1、拉取镜像dockerpullwurstmeister/zookeeper dockerpullwurstmeister/
kafka2
、启动镜像
m0_38090892
·
2018-06-12 00:00
Kafka zabbix监控
Xmx1G-Xms1G-Dcom.sun.management.jmxremote.port=11060-Dcom.sun.management.jmxremote.rmi.port=11060"改完记得重启
kafka2
wwdhks
·
2017-12-25 15:42
kafka
Linux
zk+kafka集群
Zookeeper+kafka集群我用了3台机器1.1修改zoo.cfg配置文件server.1=kafka1:2888:3888server.2=
kafka2
:2888:3888server.3=kafka3
可以笑的话不会哭
·
2017-03-13 14:34
kafka
完全分布式ZooKeeper集群和Kafka集群的搭建和使用
首先要安装JDK(jdk-7u9-linux-i586.tar.gz)和SSH,IP地址的分配为Kafka1(192.168.56.136),
Kafka2
(192.168.56.137),Kafka3(
1000sprites
·
2015-12-27 12:00
[ZZ] Big Data 开源工具
2012/10/27/big-data-right-now-five-trendy-open-source-technologies/ 总结的开源工具: 1, STORM AND
KAFKA2
·
2015-11-13 18:03
Data
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他