E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式消息系统
k8s部署Kafka集群
1.1、Kafka(消息队列)是一个分布式消息中间件,支持分区的、多副本的、多订阅者的、基于zookeeper协调的
分布式消息系统
。
潞哥的博客
·
2025-01-21 10:38
kubernetes
kafka
容器
kafka集群搭建
Kafka集群搭建一、概念说明它是一个
分布式消息系统
,由linkedin使用scala编写,用作LinkedIn的活动流(ActivityStream)和运营数据处理管道(Pipeline)的基础。
java皮皮虫
·
2024-09-04 16:48
kafka
springboot
后台
kafka
kafka测试
kafka集群
Kafka入门:从零开始了解分布式流处理平台
什么是KafkaApacheKafka是由LinkedIn公司开发,后来由Apache软件基金会维护的一个分布式、分区、多副本的基于ZooKeeper协调的
分布式消息系统
。
犬余
·
2024-08-31 19:34
分布式
kafka
学习
笔记
Kafka命令详解:从零开始,掌握Kafka集群管理、主题操作与监控的全方位技能,理解每一条命令背后的逻辑与最佳实践
为大家推荐几篇比较好的Kafka文章:Kafka分布式集群部署实战:跨越理论,直击生产环境部署难题与解决方案,性能调优、监控与管理策略大揭秘,轻松上手分布式消息中间件-CSDN博客ApacheKafka是一个开源的
分布式消息系统
长风清留扬
·
2024-08-27 16:37
大数据
Kafka
Linux
kafka
分布式
linux
大数据
命令模式
消息中间件:Kafka消息丢失与堆积问题分析与解决方案
消息中间件:Kafka消息丢失与堆积问题分析与解决方案Kafka作为
分布式消息系统
,广泛应用于实时数据流处理、大数据分析等领域。
upgrador
·
2024-08-24 02:02
#
消息中间件
kafka
分布式
Kafka核心逻辑介绍 | 京东云技术团队
1、概念Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica)
分布式消息系统
(kafka2.8.0版本之后接触了对zk的依赖,使用自己的kRaft
·
2024-02-20 11:54
kafkaredis消息队列
初识kafka
[TOC]Kafka起初是由Linkedin公司采用Scala语言开发的一个多分区、多副本且基于ZooKeeper协调的
分布式消息系统
,现己被捐献给Apache基金会。
tracy_668
·
2024-02-09 14:07
kafka自定义分区策略详解
二、kafka的分区策略三、自定义的Kafka分区器实现总结前言在
分布式消息系统
中,正确地将消息发送到合适的分区是至关重要的。
啄sir.
·
2024-02-04 11:01
kafka
分布式
java
大数据入门-大数据技术概述(二)
大数据入门-大数据是什么2.大数据入门-大数据技术概述(一)一、简介二、技术详解1.分布式协调服务:Zookeeper2.分布式资源管理器:Yarn3.计算引擎:Spark4.查询引擎:Impala5.
分布式消息系统
水坚石青
·
2024-02-04 11:11
大数据理论
大数据
spark
kafka
Kafka速度之谜:高性能的幕后秘密大揭秘
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一、kafka高性能的原因PageCacheZeroCopy(零拷贝)前言Kafka的介绍kafka是linkedIn开源的
分布式消息系统
代码魔法师Sunny
·
2024-02-03 10:30
MQ
kafka
分布式
分布式集群如何保证线程安全
比如
分布式消息系统
就没法保证消息的有序性,但可以通过变分布式消息为单一系统就可以保证消息的有序性了。另外,当接收方没法处理调用有序性,可以通过一个队列先把调用信息缓存起来,然后再串行的处理这些调用。
李黎明
·
2024-01-31 14:58
多线程
分布式
kafka(一)快速入门
kafka是一个分布式、支持分区、多副本,基于zookeeper协调的
分布式消息系统
;二、应用场景日志收集:一个公司可以用Kafka收集各种服务的log,通过kafka推送到各种存储系统;消息系统:解耦和生产者和消费者
匠道
·
2024-01-25 05:19
kafka
kafka
分布式
Kafka 集群如何实现数据同步?
Kafka介绍Kafka是一个高吞吐的
分布式消息系统
,不但像传统消息队列(RaabitMQ、RocketMQ等)那样能够【异步处理、流量消峰、服务解耦】还能够把消息持久化到磁盘上,用于批量消费。
java2508
·
2024-01-24 14:02
kafka
分布式
领航
分布式消息系统
:一起探索Apache Kafka的核心术语及其应用场景
本文是Kafka系列文章的第一篇,将带你了解Kafka的核心术语及其应用场景,后续会逐步探索其各方面的原理及应用场景。下面先看一张大概得简图,涉及Kafka的功能、原理等等,后续不断深入介绍,欢迎关注。1、什么是消息中间件消息中间件(messagequeuemiddleWare,MQ)指利用高效可靠消息传递机制进行与平台无关的数据交流,并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排
超越不平凡
·
2024-01-21 15:27
分布式
kafka
kafka核心概念
kafka的堆内存大小对kafka的影响以及为什么堆内存大一些kafka会更稳定
对于KafkaBroker,它是一个由Java编写的
分布式消息系统
,因此KafkaBroker的性能和稳定性会受到堆内存大小的影响。
暴走的贼宇
·
2024-01-19 07:48
kafka
分布式
分布式开放消息系统(RocketMQ)的原理与实践
分布式消息系统
作为实现分布式系统可扩展、可伸缩性的关键组件,需要具有高吞吐量、高可用等特点。
豆奶快攻
·
2024-01-16 07:01
消息队列
使用Spring Boot集成中间件:Kafka的高级使用案例讲解
使用SpringBoot集成中间件:Kafka的具体使用案例讲解导言在实际应用中,Kafka作为一种强大的
分布式消息系统
,广泛应用于实时数据处理和消息传递。
KingDol_MIni
·
2024-01-15 06:33
springboot
前后端技术
java
spring
boot
后端
分布式架构技术选型
文章目录前言分布式服务框架分布式事务分布式锁分布式缓存
分布式消息系统
分布式搜索系统分布式调度配置中心注册中心全链路追踪服务监控日志收集和分析服务路由服务熔断器负载均衡前言如果要把一个单体应用变成一个分布式系统
孤独如梦
·
2024-01-06 12:14
架构
分布式
分布式系统
微服务
大数据实时项目必备技能二:kafka有话说
导读:Kafka是由LinkedIn开发并开源的
分布式消息系统
,因其分布式及高吞吐率而被广泛使用,现已与ClouderaHadoop,ApacheStorm,ApacheSpark集成。
栀子花_ef39
·
2024-01-03 11:05
Kafka_01_Kafka初识
Kafka_01_Kafka初识Kafka基础概念延迟任务KafkaKafka:ZooKeeper协调的
分布式消息系统
基于Scala语言编写的高性能、多分区、多副本Kafka高性能的原因:页缓存、顺序IO
爱喝可乐的w
·
2023-12-31 20:48
Kafka
kafka
分布式
Kafka 初识
kafka是由LinkedIn公司开发的,是一个分布式、支持分区的、多副本的,基于zookeeper协调的
分布式消息系统
,它的最大特点就是可以实时的处理大量数据以满足各种需求场景:比如基于Hadoop的批处理系统
Advancer-lbh
·
2023-12-29 14:56
消息中间件
kafka
分布式
消息中间件
Kafka核心逻辑介绍 | 京东云技术团队
1,概念Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica)
分布式消息系统
(kafka2.8.0版本之后接触了对zk的依赖,使用自己的kRaft
京东云开发者
·
2023-12-22 09:33
技术分享
云计算
kafka
京东云
linq
从零到一学习RocketMQ
RocketMQ是一款功能强大的
分布式消息系统
,广泛应用于多个领域,包括异步通信解耦、企业解决方案、金融支付、电信、电子商务、快递物流、广告营销、社交、即时通信、移动应用、手游、视频、物联网、车联网等。
1b( ̄▽ ̄)d
·
2023-12-16 15:53
java
开发语言
KafKa基本原理
分布式,分区,多副本,zk协调的
分布式消息系统
使用日志收集消息系统用户活动跟踪运营指标概念Brokertopicproducerconsumerconsumergrouppartition通信基于tcp
小淘淘喵的主人
·
2023-12-16 13:59
java
Kafka快速实战与基本原理详解
Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的
分布式消息系统
,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景
Memory_2020
·
2023-12-16 06:08
中间件
kafka
分布式
Kafka 最佳实践:构建可靠、高性能的
分布式消息系统
ApacheKafka是一个强大的
分布式消息系统
,被广泛应用于实时数据流处理和事件驱动架构。为了充分发挥Kafka的优势,需要遵循一些最佳实践,确保系统在高负载下稳定运行,数据可靠传递。
晓之以理的喵~~
·
2023-12-14 12:41
KafKa
分布式
kafka
Kafka -基础篇
Kafka初识Kafka是什么Kafka是最初由LinkedIn公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的
分布式消息系统
。
~AC~
·
2023-12-06 11:49
golang
java
Java零基础——RocketMQ篇
1.RocketMQ简介官网:http://rocketmq.apache.org/RocketMQ是阿里巴巴2016年MQ中间件,使用Java语言开发,RocketMQ是一款开源的
分布式消息系统
,基于高可用分布式集群技术
动力节点IT教育
·
2023-12-05 17:03
Java零基础教学文档
java-rocketmq
java
rocketmq
大数据开发:Kafka消息存储到Broker的流程
Kafka作为
分布式消息系统
,在大数据平台架构层面,承担着消息流转和存储支持的重要任务。消息经kafka引入到大数据系统平台,存储是一道重要的关卡。
成都加米谷大数据
·
2023-12-04 23:34
kafka简介
背景起源于Linkedin,在apache开源,基于发布订阅的
分布式消息系统
。
码蹄疾
·
2023-12-04 07:25
kafka
apache
服务器
分布式
linkedin
Kafka
分布式消息系统
文章目录消息中间件对比Kafka概述kafka安装和配置kafka入门生产者发送消息消费者接收消息Kafka高可用设计集群备份机制(Replication)备份机制(Replication)-同步方式kafka生产者详解同步发送异步发送参数详解(ack)参数详解(retries)参数详解-消息压缩kafka消费者详解消费者组消息有序性提交和偏移量偏移量偏移量提交方式SpringBoot集成kafk
sweetheart7-7
·
2023-11-30 12:01
分布式
kafka
消息中间件
高可用
SpringBoot集成
Docker Kafka
0X00CentOS部署kafkaCentOS7搭建Kafka环境-简书Kafka是一个分布式流平台,基于Zookeeper的
分布式消息系统
;具有高吞吐量、高性能、实时及高可用等特点由服务器和客户端组成
ButFlyzzZ
·
2023-11-29 05:29
Docker
kafka
docker
2023.6.6 python爬虫小项目 定时自动爬取
whileTrue:+sleep()方式二:Timeloop方式三:threading.Timer方式四:内置模块sched方式五:调度模块schedule方式六:任务框架APScheduler方式七:
分布式消息系统
github_czy
·
2023-11-28 23:13
python
爬虫
开发语言
kafka介绍
一、kafka介绍1.kafka简单介绍kafka是一款分布式、支持分区的、多副本,基于zookeeper协调的
分布式消息系统
。最大的特性就是可以实时处理大量数据来满足需求。
凤梨..
·
2023-11-28 11:42
Java
Linux
java
Kafka基本原理详解
一、概念理解Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的
分布式消息系统
,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景
昙花逐月
·
2023-11-27 10:46
KAFKA
kafka
分布式
big
data
Kafka 集群如何实现数据同步
Kafka介绍Kafka是一个高吞吐的
分布式消息系统
,不但像传统消息队列(RaabitMQ、RocketMQ等)那样能够【异步处理、流量消峰、服务解耦】还能够把消息持久化到磁盘上,用于批量消费。
!chen
·
2023-11-26 14:18
kafka
分布式
java kafka client_一、kafka 介绍 && kafka-client
早期Kafka的定位是一个高吞吐的
分布式消息系统
,目前则演变成了一个成熟的分布式消息引擎,以及流处理平台。
香浓拉码
·
2023-11-26 12:59
java
kafka
client
Redis Stream消息队列
其实这种类似于broker/consumer(生产者/消费者)的数据结构很常见,比如RabbitMQ消息中间件、Celery消息中间件,以及Kafka
分布式消息系统
等,而RedisStream正是借鉴了
小日子呀
·
2023-11-23 15:11
#
Redis
redis
数据库
缓存
分享一份京东大数据技术官私藏:Kafka核心设计与实践原理
什么是KafkaKafka起初是由LinkedIn公司采用Scala语言开发的一一个多分区、多副本且基于ZooKeeper协调的
分布式消息系统
,现已被捐献给Apache基金会。
m0_64926671
·
2023-11-23 09:53
Java
kafka
big
data
java
Kafka 集群如何实现数据同步?
Kafka介绍Kafka是一个高吞吐的
分布式消息系统
,不但像传统消息队列(RaabitMQ、RocketMQ等)那样能
咸鱼Linux运维
·
2023-11-21 18:36
kafka
分布式
Kafka性能测试初探
Kafka是一种高性能的
分布式消息系统
,由LinkedIn公司开发,用于处理海量的实时数据流。它采用了发布/订阅模式,可以将数据流分发到多个消费者端,同时提供了高可靠性、高吞吐量和低延迟的特性。
潇潇说测试
·
2023-11-20 21:43
软件测试
软件测试工程师
自动化测试
kafka
分布式
职场和发展
功能测试
软件测试
自动化测试
程序人生
Kafka 集群实现数据同步
Kafka介绍Kafka是一个高吞吐的
分布式消息系统
,不但像传统消息队列(RaabitMQ、RocketMQ等)那样能够【异步处理、流量消峰、服务解耦】还能够把消息持久化到磁盘上,用于批量消费。
!chen
·
2023-11-19 01:55
立体仓库
kafka
分布式
PLC
WCS系统
基于区块链的
分布式消息系统
架构与物联网场景应用
1.
分布式消息系统
介绍
分布式消息系统
是基于区块链实现的消息代理服务,它与区块链节点建立连接,将消息数据存储在区块链节点上。面向用户或物联网设备提供消息发布订阅功能。
宁强核桃饼
·
2023-11-18 21:18
物联网+传感器设备
详解Kafka应用场景及工作原理
一、概述Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的发布/订阅式
分布式消息系统
二、特性持久性、可靠性
撞撞~
·
2023-11-16 22:39
消息中间件
分布式
kafka
java
Kafka
afka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的
分布式消息系统
。
布道师小羊
·
2023-11-15 09:35
#
中间件
架构设计
kafka
深入理解Kafka3.6.0的核心概念,搭建与使用
Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的
分布式消息系统
,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景
Mumunu-
·
2023-11-14 16:44
ELK
hadoop
kafka
hadoop
kafka
ELK
消息中间件汇总
RocketMQ是MetaQ的3.0版本ONS:阿里ONS是阿里巴巴公司推出的一款
分布式消息系统
。
信仰_273993243
·
2023-11-13 14:52
其他
java
Linux系统上搭建高可用Kafka集群(使用自带的zookeeper)
本次在CentOS7.6上搭建Kafka集群ApacheKafka是一个高吞吐量的
分布式消息系统
,被广泛应用于大规模数据处理和实时数据管道中。
不掉头发的阿水
·
2023-11-12 10:27
消息中间件
SpringBoot
虚拟机操作系统
linux
kafka
运维
Kafka和RocketMq对比
Kafka和RocketMQ是目前非常流行的
分布式消息系统
,它们都能够高效地处理海量的消息数据。
hb13262736769
·
2023-11-10 12:35
kafka
java-rocketmq
rocketmq
RocketMQ的原理与实践
分布式消息系统
作为实现分布式系统可扩展、可伸缩性的关键组件,需要具有高吞吐量、高可用等特点。
一颗向上的草莓
·
2023-11-10 10:39
RocketMQ
java面试
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他