E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
kafka消息队列
SpringCloud详细讲解
服务间采用轻量级通信机制进行通信,如HTTPAPI或
消息队列
。
上官花雨
·
2025-02-07 10:14
spring
cloud
java
微服务
Debezium系列之:处理decimal数据类型org.apache.
kafka
.connect.data.Decimal
Debezium系列之:处理decimal数据类型org.apache.
kafka
.connect.data.Decimal一、背景二、Debezium处理decimal数据类型三种方式三、precise
快乐骑行^_^
·
2025-02-07 08:00
debezium
Debezium系列
decimal数据类型
kafka.connect
data.Decimal
浅谈分布式事务
分布式事务是指涉及多个独立数据源(如数据库、
消息队列
、缓存等)的事务,确保这些操作要么全部成功,要么全部回滚,以保证数据一致性。
纠结哥_Shrek
·
2025-02-07 07:27
分布式
Redis持久化-秒杀系统设计
在构建高性能、高可用的系统时,Redis作为缓存和
消息队列
的角色越来越重要。在一些场景下,我们还需要将Redis的数据进行持久化,以确保数据的安全性和恢复能力。
你也想高人一等啊?
·
2025-02-07 06:51
spring
java
mybatis
深度解读
Kafka
数据可靠性
Kafka
起初是由LinkedIn公司开发的一个分布式的消息系统,后成为Apache的一部分,它使用Scala编写,以可水平扩展和高吞吐率而被广泛使用。
程序の之道
·
2025-02-07 06:17
kafka
hive
yarn
spark
hadoop
【
kafka
】
kafka
的动态配置管理使用和分析
该文章可能已过期,已不做勘误并更新,请访问原文地址(持续更新)
Kafka
中的动态配置源码分析
kafka
知识图谱:
Kafka
知识图谱大全
kafka
管控平台推荐使用滴滴开源的
Kafka
运维管控平台(戳我呀)
石臻臻的杂货铺
·
2025-02-07 06:16
Kafka
kafka
运维
Kafka
源码解剖
1、
Kafka
源码解刨生产者会将数据封装成ProducerRecord对象,进行序列化操作后便会根据默认分区规则(轮询策略)。
纸短情长恋曲
·
2025-02-07 06:45
kafka
大数据
java
架构师⾯试题 -
Kafka
专题篇
1.
KAFKA
是什么?..........................................................................................
cesske
·
2025-02-07 05:15
kafka
分布式
Kafka
设计之生产者与消费者
vs拉取(Pull)3.2.消费者定位(ConsumerPosition)3.3.离线数据加载(OfflineDataLoad)3.4.静态成员身份(StaticMembership)一.前言接上一篇《
Kafka
流华追梦
·
2025-02-07 05:14
Kafka
kafka
生产者设计
负载均衡
异步发送
消费者设计
推送和拉取
离线数据加载
图解
Kafka
网络层源码实现机制之收发消息全过程
针对JavaNIO的SocketChannel,
kafka
是如何封装统一的传输层来实现最基础的网络连接以及读写操作的?剖析
Kafka
Channel是如何对传输层、读写buffer操作进行封装的?
炫酷盖茨猫先生
·
2025-02-07 05:14
后端
kafka
java
大数据
分布式
数据库
【
kafka
实战】05
Kafka
消费者消费消息过程源码剖析
1.概述
Kafka
消费者(Consumer)是
Kafka
系统中负责从
Kafka
集群中拉取消息的客户端组件。消费者消费消息的过程涉及多个步骤,包括消费者组的协调、分区分配、消息拉取、消息处理等。
suyukangchen
·
2025-02-07 05:41
kafak实战
kafka
linq
分布式
RabbitMQ 深度解析与最佳实践
引言在现代分布式系统中,
消息队列
(MessageQueue,MQ)扮演着至关重要的角色,能够解耦系统、提高可用性、提升吞吐量。
( •̀∀•́ )920
·
2025-02-07 03:56
rabbitmq
ruby
分布式
15.
kafka
常见报错
1.UnknownTopicOrPartitionExceptionorg.Nginx.
kafka
.common.errors.UnknownTopicOrPartitionException:Thisserverdoesnothostthistopic-partition
小黑要上天
·
2025-02-07 00:36
Kafka
kafka
分布式
设计模式-观察者模式
消息队列
(MQ),一种能实现生产者到消费者单向通信的通信模型,这也是现在常用的主流中间件。
养歌
·
2025-02-06 17:53
java
观察者模式
中间件
java
你说通过
Kafka
AdminClient获取Lag会有性能问题?尊嘟假嘟0.o
0.前言前阵子团队里出了个大故障,本质是因为其他语言实现的client有问题,非常频繁的请求大量元数据,而
Kafka
服务端这边也没有做什么限制,导致
Kafka
Broker宕了。
·
2025-02-06 13:04
javakafka大数据
上位机与云平台通信:为什么你的MQTT总是断连?
在工业自动化、智能家居、物联网等应用场景中,MQTT(
消息队列
遥测传输协议)作为一种轻量级的发布/订阅消息传输协议,广泛应用于上位机与云平台之间的数据通信。
威哥说编程
·
2025-02-06 09:31
开发语言
后端
多线程并发如何高效实现生产者/消费者?
【导读】无需引入第三方
消息队列
组件,我们如何利用内置C#语法高效实现生产者/消费者对数据进行处理呢?
dotNET跨平台
·
2025-02-06 09:25
队列
python
java
数据库
linux
30、Flink中操作已经配置好的远程文件系统
publicstaticLongget
Kafka
OffsetFromHoodie2(S
梦想养猫开书店
·
2025-02-06 08:50
胡思乱想
flink
华为云
RabbitMQ延迟消息的两种实现方式
对于普通的
消息队列
,消息一旦被发送到队列内,消费者就可以直接消费,无法实现诸如过期订单的需求。那么就需要特殊的技术来实现,RabbitMQ中有两种实现方式:TTL+死信队列、插件。
.晚安.
·
2025-02-06 07:45
rabbitmq
kafka
-eagle-2.0.3:Note:
Kafka
version is - or JMX Port is -1 maybe
kafka
broker jmxport disable.
kafka
-eagle-2.0.3无法获取
kafka
集群信息
kafka
开启JMX,这样就可以通过
kafka
-eagle查看
kafka
集群状态。
快乐骑行^_^
·
2025-02-06 06:42
大数据
kafka-eagle
【
Kafka
】Window下
kafka
开启JMX监控
1.概述因为需要,需要在windows下开启
kafka
,然后
kafka
开启JMX监控同样是修改
kafka
-server-start文件,但是修改的是
kafka
-server-start.batIF["%
九师兄
·
2025-02-06 06:09
kafka
开启jmx port,报错端口被占用
KAFKA
开启JMX_PORT后,在使用
kafka
命令行工具(
kafka
-topics、
kafka
-console-consumer.sh等)时,会报端口被占用的异常,如:bash-5.1#/opt/
kafka
假装是只熊
·
2025-02-06 06:39
kafka
java
Kafka
开启JMX监控
在
kafka
的安装目录bin下找到启动脚本
kafka
-run-class.sh编辑
kafka
-run-class.shJMX_PORT=9527//在脚本第一行添加JMX端口-Djava.rmi.server.hostname
程序员众推
·
2025-02-06 06:39
杂记
kafka
jmx
kafka
不支持读写分离的原因
前段时间在看
kafka
相关内容,发现
kafka
“所有的”读写流量都在主partition上,从partition只负责备份数据。那么为什么
kafka
从partition不跟其他中间件一样承接读流量?
·
2025-02-06 01:23
kafka
Kafka
的安装及相关操作命令
文章目录前言一、安装
kafka
1.下载
kafka
2.解压
kafka
3.配置环境变量二、
kafka
相关命令1.启动zk2.启动
Kafka
Broker3.创建主题4.列出所有主题5.查看主题详情6.删除主题
凡许真
·
2025-02-05 23:41
kafka
0.10.2.1
操作命令
mac
单机版
【
kafka
】
kafka
docker jmx 远程连接 跨容器
1.概述前情提要:【Java】javajmx入门案例【
kafka
】java使用jmx监控
Kafka
【
Kafka
】Window下
kafka
开启JMX监控2.远程连接
kafka
jxm远程连接我是docker
九师兄
·
2025-02-05 23:40
kafka
docker
jmx
远程连接
Kafka
启用 JMX
以下是在
Kafka
服务启动时启用JMX的步骤:找到
Kafka
的启动脚本,通常在
Kafka
安装目录的bin子目录下编辑启动脚本(例如
kafka
-server-start.sh),在其中设置JMX参数。
cyw8998
·
2025-02-05 23:39
kafka
分布式
Zabbix5.0LTS配置Apache
Kafka
by JMX模板监控
Kafka
目录部署环境安装zabbix-java-gateway编译安装zabbix-java-gateway修改zabbix-java-gateway配置settings.sh修改Zabbixserver配置文件
Kafka
ErbaoLiu
·
2025-02-05 23:39
Prometheus
kafka
zabbix5.0
zabbix监控kafka
JMX
【Redis介绍使用】
Redis是一个开源的高性能键值对存储系统,广泛用于缓存、
消息队列
、实时数据存储等场景。它不仅仅支持简单的键值对存储,还提供了许多丰富的数据结构,其中之一就是列表(List)。
孔瑾熙
·
2025-02-05 22:34
redis
数据库
缓存
kafka
的高可用情况下,挂掉一个节点,为什么消费者消费不到数据了
1.假设有
kafka
集群,3个broker
kafka
集群
kafka
01
kafka
02
kafka
032.创建topictest(分区3副本3)
kafka
-topics.sh--create--topic'test
黄土高坡上的独孤前辈
·
2025-02-05 21:55
Kafka
C# RabbitMQ
消息队列
深度解析与实战指南
今天我们要聊的是C#开发中不可或缺的一项技能——使用RabbitMQ进行
消息队列
编程。RabbitMQ不仅功能强大,还支持多种消息传递模式,能够满足各种应用场景的需求。
墨瑾轩
·
2025-02-05 20:23
一起学学C#【四】
c#
rabbitmq
ruby
开源项目推荐:基于Lambda架构的大数据管道
开源项目推荐:基于Lambda架构的大数据管道big-data-pipeline-lambda-archAfullbigdatapipeline(LambdaArchitecture)withSpark,
Kafka
柳旖岭
·
2025-02-05 16:53
Kafka
架构
引言
Kafka
凭借其独树一帜的分区架构,在消息中间件领域展现出了卓越的性能表现。
优人ovo
·
2025-02-04 22:41
kafka
架构
分布式
Kafka
SSL(TLS)安全协议
文章目录
Kafka
SSL(TLS)安全协议1.
Kafka
SSL的作用1.1数据加密1.2身份认证1.3数据完整性1.4防止中间人攻击1.5确保安全的分布式环境1.6防止拒绝服务(DoS)攻击2.
Kafka
SSL
王多鱼的梦想~
·
2025-02-04 21:06
Kafka修炼手册
kafka
ssl
安全
golang 操作 docker 中
kafka
阅读目录docker中安装
kafka
Kafka
和ZooKeeper的关系
Kafka
两种订阅模式zookeeper安装1、在docker中拉取zookeeper镜像2、运行zookeeper服务3、查看docker
知其黑、受其白
·
2025-02-04 16:23
golang
docker
kafka
Kafka
应用场景
序在学习一门新技术之前,我们需要先去了解一下这门技术的具体应用场景,使用它能够做什么,能够达到什么目的,学习
kafka
的初衷是用作
消息队列
;但是还可以使用
Kafka
Stream进行一些实时的流计算,多用于大数据处理
串一串cc
·
2025-02-04 15:20
分布式
消息队列
ActiveMQ RabbitMQ RocketMQ
Kafka
目录1、
消息队列
的主要的应用场景:解耦异步削峰(1)解耦(2)异步(3)削峰2、使用
消息队列
的缺点3、
消息队列
选型4、保证
消息队列
的高可用5、保证消息不被重复消费6、保证消费的可靠性传输(1)生产者丢失数据
zxm8513
·
2025-02-04 12:23
工业互联网开发技术
综合性技术汇集
我的应用为谁而生
rabbitmq
java
分布式
ActiveMQ、RabbitMQ、RocketMQ、
Kafka
的介绍及优缺点说明
ActiveMQ单机吞吐量:万级topic数量都吞吐量的影响:时效性:ms级可用性:高,基于主从架构实现高可用性消息可靠性:有较低的概率丢失数据功能支持:MQ领域的功能极其完备总结:非常成熟,功能强大,在早些年业内大量的公司以及项目中都有应用偶尔会有较低概率丢失消息现在社区以及国内应用都越来越少,官方社区现在对ActiveMQ5.x维护越来越少,几个月才发布一个版本主要是基于解耦和异步来用的,较少
墨痕诉清风
·
2025-02-04 12:20
安全文献
java-rabbitmq
rabbitmq
java-activemq
ActiveMQ、RabbitMQ、
Kafka
、RocketMQ在优先级队列、延迟队列、死信队列、重试队列、消费模式、广播模式的区别
目录1.优先级队列2.延迟队列3.死信队列4.重试队列5.消费模式6.广播模式ActiveMQ、RabbitMQ、
Kafka
、RocketMQ这四款
消息队列
在优先级队列、延迟队列、死信队列、重试队列、消费模式
点滴~
·
2025-02-04 11:49
activemq
rabbitmq
kafka
各个
消息队列
的优缺点对比(activeMQ、rabbitMQ、rocketMQ、
kafka
)
各个
消息队列
对比特性activeMQrabbitMQrocketMQ
kafka
单机吞吐量万/秒万/秒10万/秒10万/秒topic对吞吐量的影响无无topic达到几百/几千个级别,吞吐量会有小幅下降;这是
batcat560
·
2025-02-04 11:16
消息队列
activemq
rabbitmq
rocketmq
kafka
ActiveMQ、RabbitMQ、RocketMQ、
Kafka
四种消息中间件分析介绍
ActiveMQ、RabbitMQ、RocketMQ、
Kafka
四种消息中间件分析介绍我们从四种消息中间件的介绍到基本使用,以及高可用,消息重复性,消息丢失,消息顺序性能方面进行分析介绍!
GeoffA
·
2025-02-04 11:13
java技术
java-rabbitmq
java-activemq
java-rocketmq
kafka
使用 Grafana 和 Prometheus展现
消息队列
性能
引言上篇文章通过JMX提取
Kafka
数据,本篇文章将通过JDBC存储
Kafka
性能数据存储于数据库,并通过Grafana和Prometheus进行展示,实现开发中常用的可视化监控1.环境准备
Kafka
:
优人ovo
·
2025-02-04 07:16
grafana
prometheus
Caused by: java.io.NotSerializableException: org.apache.parquet.schema.MessageType
scala任务代码Headdefault%flink.confflink.execution.packagesorg.apache.flink:flink-connector-
kafka
_2.11:1.11.2
黄瓜炖啤酒鸭
·
2025-02-04 04:17
Flink
依赖冲突
Android岗常见40道面试题,面试前必须了解的知识点!!!
2)Thread普通线程,如果需要有自己的
消息队列
,需要调用Looper.prepare()创建Looper实例,调用loop()去循环消息。
2501_90226046
·
2025-02-03 21:24
android
面试
职场和发展
揭秘 Fluss 架构组件
Fluss部署,带领大家部署Fluss环境,体验一下Fluss的功能Fluss整合数据湖的操作,体验Fluss与数据湖的结合讲解了Fluss、
Kafka
、Paimon之间的区别和联系前面三篇文章可以让大家上手玩起来
大圣数据星球
·
2025-02-03 20:13
大数据
Flink
设计模式
基于Java的智能家居设计:基于Java的智能家居仿真环境开发技巧
基于Java的智能家居设计:基于Java的智能家居仿真环境开发技巧关键词:智能家居、Java、仿真环境、物联网、软件架构、
消息队列
、RESTfulAPI1.背景介绍智能家居已成为现代生活的重要组成部分,
杭州大厂Java程序媛
·
2025-02-03 19:35
计算机软件编程原理与应用实践
java
python
javascript
kotlin
golang
架构
人工智能
Java RabbitMQ 的作用是什么? 使用场景有哪些?有哪些优缺点?
RabbitMQ是一个开源的
消息队列
系统,用于在分布式系统中传递消息。它实现了AMQP(AdvancedMessageQueuingProtocol)协议,为应用提供了可靠的消息传递机制。
学习资源网
·
2025-02-03 12:08
java-rabbitmq
java
rabbitmq
Windows下Go语言环境搭建和使用
可以用于系统监控、容器技术(Docker)、大数据、存储技术、分布式系统(HyperledgerFabric)、消息系统(
Kafka
客户端)、服务器管理、安全工具、Web工具等。
go语言学习基地
·
2025-02-03 11:36
GO语言学习
golang
windows
开发语言
Kakfa客户端SSL访问
kafka
博主最近在做安全治理,遇到了相当多的坑,现在我进行整理,提供一个可行的
kafka
的SSL访问开启
kafka
的ssl访问1首先创建你的私钥与证书,在
kafka
所在的主机,运行如下命令:keytool-keystoreserver.keystore.jks-aliaslocalhost-validity365
浪漫至死不渝1
·
2025-02-03 09:15
kafka
ssl
分布式
Kafka
ACL(访问控制列表)介绍
文章目录
Kafka
ACL(访问控制列表)介绍1.
Kafka
ACL的基本概念1.1
Kafka
ACL的目标1.2
Kafka
ACL的组成部分2.
Kafka
支持的资源类型2.1Topic(主题)2.2ConsumerGroup
王多鱼的梦想~
·
2025-02-03 08:37
Kafka修炼手册
kafka
分布式
安全
apache
运维
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他