kafka消息中间件

阿里云centos8.1 Docker+Kafka安装使用

环境&软件包阿里云centos8.1dockerzookeeperkafka安装zookeeperkafka依赖zookeeper，通过zookeeper管理broker，需先安装zookeeper#拉取镜像
artCoding·2023-12-17 05:23

把所有Java知识操作都写出来了-Github上收获45K+star的阿里P8整理的新版手抄本

该文档在Github上收获45K+star的Java核心神技（这参数，质量多高就不用我多说了吧）非常全面，包含基础知识、Java集合、JVM、多线程并发、spring原理、微服务、Netty与RPC、Kafka
构架师鱼鱼·2023-12-17 03:32

dcoker-compose一键部署EFAK —— 筑梦之路

简介EFAK（EagleForApacheKafka，以前称为KafkaEagle）是一款由国内公司开源的Kafka集群监控系统，可以用来监视kafka集群的broker状态、Topic信息、IO、内存
筑梦之路·2023-12-17 03:40

spring boot整合IBM WebSphere MQ，并配置多个队列管理器

IBMWebSphereMQ概述网上关于IBMWebSphereMQ的资料挺少的，毕竟是一项老技术，整理一下从零开始对于IBMWebSphereMQ的理解IBMWebSphereMQ是一种消息中间件技术
一只欢脱的知更鸟呀·2023-12-17 02:14

消息队列zookeeper集群+kafka

消息队列zookeeper集群+kafkakafka3.0之前依赖于zookpeeperzookeeper开源分布式架构，提供协调服务（Apache项目）基于观察者模式设计的分布式服务管理架构存储和管理数据
m0_52416577·2023-12-17 01:24

FolkMQ 国产消息中间件，v1.0.21 发布

简介采用“多路复用”+“内存运行”+“快照持久化”+“Broker集群模式”（可选）+基于Socket.D网络应用协议开发。全新设计，自主架构！角色功能生产端发布消息（Qos0、Qos1）、发布定时消息（Qos0、Qos1）、发布重试消费端订阅、取消订阅消费端消费-ACK（自动、手动）服务端发布-Confirm、订阅-Confirm、取消订阅-Confirm、派发-Retry、派发-Delayed
组合缺一·2023-12-17 01:23

使用 docker-compose 部署 folkmq 消息中间件

仓库拉取docker-compose.yml文件:https://github.com/noear/folkmq/tree/main/deployversion:'3.5'services:folkmq-server:image:noearorg/folkmq-server:1.0.19container_name:folkmq-serverenvironment:-folkmq.admin=ad
组合缺一·2023-12-17 01:22

Flink 有状态流式处理

传统批次处理方法【1】持续收取数据（kafka等），以window时间作为划分，划分一个一个的批次档案（按照时间或者大小等）；【2】周期性执行批次运算（Spark/Stom等）；传统批次处理方法存在的问题
程序猿进阶·2023-12-17 00:30

TDengine Kafka Connector将 Kafka 中指定 topic 的数据（批量或实时）同步到 TDengine

教程放在这里：TDengineJavaConnector，官方文档已经写的很清晰了，不再赘述。这里记录一下踩坑：1.报错java.lang.UnsatisfiedLinkError:notaosinjava.library.pathatjava.lang.ClassLoader.loadLibrary(ClassLoader.java:1860)atjava.lang.Runtime.loadLi
谢小鱼·2023-12-16 23:56

Kafka的安装介绍

1.准备工作准备三台服务器kafka1:192.168.36.242kafka2:192.168.36.243kafka3:192.168.36.244三台服务器关闭防火墙和selinuxsystemctlstopfirewalld
一个小宏混·2023-12-16 23:59

深入理解网络 I/O 多路复用：Epoll

，在互联网企业担任Java开发，CSDN优质创作者推荐专栏：Spring、MySQL、Nacos、Java，后续其他专栏会持续优化更新迭代文章所在专栏：网络I/O我当前正在学习微服务领域、云原生领域、消息中间件等架构
vnjohn·2023-12-16 22:00

深入理解网络 I/O：单 Selector 多线程｜单线程模型

，在互联网企业担任Java开发，CSDN优质创作者推荐专栏：Spring、MySQL、Nacos、Java，后续其他专栏会持续优化更新迭代文章所在专栏：网络I/O我当前正在学习微服务领域、云原生领域、消息中间件等架构
vnjohn·2023-12-16 22:00

深入理解网络阻塞 I/O：BIO

，在互联网企业担任Java开发，CSDN优质创作者推荐专栏：Spring、MySQL、Nacos、Java，后续其他专栏会持续优化更新迭代文章所在专栏：网络I/O我当前正在学习微服务领域、云原生领域、消息中间件等架构
vnjohn·2023-12-16 22:29

深入理解网络非阻塞 I/O：NIO

，在互联网企业担任Java开发，CSDN优质创作者推荐专栏：Spring、MySQL、Nacos、Java，后续其他专栏会持续优化更新迭代文章所在专栏：网络I/O我当前正在学习微服务领域、云原生领域、消息中间件等架构
vnjohn·2023-12-16 22:29

深入理解网络中断：原理与应用

，在互联网企业担任Java开发，CSDN优质创作者推荐专栏：Spring、MySQL、Nacos、Java，后续其他专栏会持续优化更新迭代文章所在专栏：网络I/O我当前正在学习微服务领域、云原生领域、消息中间件等架构
vnjohn·2023-12-16 22:29

深入理解网络 I/O：单 Group 混杂模式｜多 Group 主从模式

，在互联网企业担任Java开发，CSDN优质创作者推荐专栏：Spring、MySQL、Nacos、Java，后续其他专栏会持续优化更新迭代文章所在专栏：网络I/O我当前正在学习微服务领域、云原生领域、消息中间件等架构
vnjohn·2023-12-16 22:56

Kafka中的fetch-min-size、fetch-max-wait和request.timeout.ms配置

当前kafka的版本为2.8.11，SpringBoot的版本为2.7.6，在pom.xml中引入下述依赖：org.springframework.kafkaspring-kafka2.8.11然后在yml
y_bccl27·2023-12-16 21:12

Kafka中的enable-auto-commit和auto-commit-interval配置

当前kafka的版本为2.8.11，SpringBoot的版本为2.7.6，在pom.xml中引入下述依赖：org.springframework.kafkaspring-kafka2.8.11提前说明
y_bccl27·2023-12-16 21:36

Kafka Avro序列化之二：使用Twitter的Bijection 类库实现

KafkaAvro序列化之一：使用自定义序列化比较麻烦，需要根据schema生成实体类，需要调用avro的API实现对象到byte[]的序列化和byte[]到对象的反序列化转化，而那些方法看上去比较繁琐
跟着大数据和AI去旅行·2023-12-16 20:34

RabbitMQ插件详解：rabbitmq_recent_history_exchange【RabbitMQ 七】

欢迎来到我的博客，代码的世界里，每一行都是一个故事@[TOC](rabbitmq_recent_history_exchange)##前言RabbitMQ作为一款强大的消息中间件，提供了许多有趣且功能强大的插件
一只牛博·2023-12-16 18:44

Kafka内容分享(四)：Kafka 架构和幂等性与事务

目录一、架构1.1、Kafka重要概念1.1.1、broker1.1.2、zookeeper1.1.3、producer（生产者）1.1.4、consumer（消费者）1.1.5、consumergroup
之乎者也··2023-12-16 18:44

《RabbitMQ实战指南》---- RabbitMQ入门

1、消息中间件1.1、什么是消息中间件消息中间件（MessageQueueMiddleware，简称MQ）是指利用高效可靠的消息传递机制进行与平台无关的数据交流，并基于数据通道来进行分布式系统的集成。
jushisi·2023-12-16 18:18

02-MQ入门之RabbitMQ简单概念说明

二：RabbitMQ介绍1.RabbitMQ的概念RabbitMQ是一个消息中间件：它接受并转发消息。
小鹿的周先生·2023-12-16 18:16

【星环云课堂大数据实验】kafka消息发布与订阅

文章目录一、Kafka概述二、实验环境三、实验准备四、实验目的五、实验步骤5.1、创建KafkaTopic5.2、Kafka消息发布5.3、Kafka消息订阅六、实验感悟一、Kafka概述Kafka是由
生生不息~·2023-12-16 17:12

Kafka学习（二）-------- 什么是Kafka

通过Kafka的快速入门https://www.cnblogs.com/tree1123/p/11150927.html能了解到Kafka的基本部署，使用，但他和其他的消息中间件有什么不同呢？
大数据流动·2023-12-16 17:17

Java面试题及答案整理（ 2022 年 2 月最新版，持续更新）

Java工程师面试题包括了：MyBatis、ZK、Dubbo、EL、Redis、MySQL、并发编程、Java面试、Spring、微服务、Linux、Springboot、SpringCloud、MQ、Kafka
大老高程序员·2023-12-16 17:01

SpringCloudStream实战拆解以及3.1后新版本特性分析

2.2:一秒切换对接kafka2.3：一秒切换对接RocketMQ三、详解SCS三神器3.1Binder3.2Binding3.3Message四、SCS提供的高级功能4.1消息分组消费机制4.2个性化使用五
roykingw·2023-12-16 17:20

消息通知泛型版

最近在做一个项目，项目内部需要使用消息通知系统，由于只是单机内部消息通知，使用类似kafka这样的消息队列就太重量级了。所以设计了一个简单的消息通知功能。
天地一蜉蝣_6e86·2023-12-16 15:18

消息队列kafka详解：Kafka架构介绍

一.工作流程Kafka中消息是以topic进行分类的，Producer生产消息，Consumer消费消息，都是面向topic的。
码农小旋风·2023-12-16 14:20

Kafka Avro序列化之一：使用自定义序列化

定义Schema通过ApacheAvro编程快速入门，我们定义了User实体类。user.avsc{"namespace":"org.example.avro","type":"record","name"
跟着大数据和AI去旅行·2023-12-16 14:50

本地 idea 连接操作服务器上的 kafka，配置内外网映射

主要就是内外网映射的配置在Kafka的安装目录中的config/server.properties文件中注释掉原来的advertised.listeners和listeners添加以下内容，将下面内容中的
超爱慢·2023-12-16 14:18

四十二、Redis

Redis基础三、Redis的持久化四、Redis主从、哨兵、分片集群安装五、Redis主从六、Redis哨兵七、Redis分片集群一、简介Redis是一个内存中的数据结构存储系统，可以用作数据库、缓存和消息中间件
qing_ti_xx·2023-12-16 14:52

《PySpark大数据分析实战》-10.独立集群模式的代码运行

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-16 14:49

《PySpark大数据分析实战》-08.宽窄依赖和阶段划分

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-16 14:19

《PySpark大数据分析实战》-09.Spark独立集群安装

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-16 14:49

《PySpark大数据分析实战》-05.PySpark库介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2023-12-16 14:05

KafKa基本原理

分布式，分区，多副本，zk协调的分布式消息系统使用日志收集消息系统用户活动跟踪运营指标概念Brokertopicproducerconsumerconsumergrouppartition通信基于tcp协议很多集群信息记录在zk里保证自己的无状态，方便水平扩容leader处理partition的读写请求，followers被动复制leader,不提供读写保证多副本与消费一致性一个partition
小淘淘喵的主人·2023-12-16 13:59

kafka配置多个消费者groupid kafka多个消费者消费同一个partition（java）

目录1-单播模式，只有一个消费者组2-广播模式，多个消费者组3-Java实践kafka是由Apache软件基金会开发的一个开源流处理平台。
KG大数据·2023-12-16 13:56

RabbitMQ下载与安装(window版)

MQ和JMS类似，但不同的是JMS是SUNJAVA消息中间件服务的一个标准和API定义，而MQ则是遵循了AMQP协议的具体实现和
哈皮给·2023-12-16 13:24

kafka常用命令

/bin/kafka-console-producer.sh--broker-listdn02.hadoop.cn:6667,dn03.hadoop.cn:6667,dn04.hadoop.cn:6667
wind_103·2023-12-16 12:23

分布式事务---2PC和3PC原理

分布式事物常见解决方案:2PC两段提交协议3PC三段提交协议(弥补两端提交协议缺点)TCC或者GTS(阿里)消息中间件最终一致性使用LCN解决分布式事物，理念“LCN并不生产事务,LCN只是本地事务的搬运工
吹老师个人app编程教学·2023-12-16 11:36

扫盲Kafka？看这一篇就够了！ | 京东云技术团队

kafka的使用场景为什么要使用Kafka消息队列？解耦、削峰：传统的方式上游发送数据下游需要实时接收，如果上游在某些业务场景：例如上午十点会流量激增至顶峰，那么下游资源可能会扛不住压力。
京东云技术团队·2023-12-16 11:02

Logstash输入Kafka输出Es配置

Logstash介绍Logstash是一个开源的数据收集引擎，具有实时管道功能。它可以从各种数据源中动态地统一和标准化数据，并将其发送到你选择的目的地。Logstash的早期目标主要是用于收集日志，但现在的功能已经远远超出这个范围。任何事件类型都可以通过Logstash进行分析，通过输入、过滤器和输出插件进行转换。Logstash的工作原理是使用管道方式进行日志的搜集处理和输出。这个管道包括三个阶
有梦想的攻城狮·2023-12-16 11:24

消息中间件使用场景

一、消息中间件简介Message-orientedmiddleware(MOM)issoftwareorhardwareinfrastructuresupportingsendingandreceivingmessagesbetweendistributedsystems
Justin_Jun·2023-12-16 10:16

【Kafka】Kafka 实现 Exactly-once

本篇结构：Kafka三种语义Kafka故障保证Exactly-once参考博客一、Kafka三种语义在分布式系统中，构成系统的任何节点都是被定义为可以彼此独立失败的。
w1992wishes·2023-12-16 10:59

统一日志管理方案：Spring项目logback日志与logstash和Elasticsearch整合

原创/朱季谦最近在做一个将分布式系统的日志数据通过logstash传到kafka的功能，做完之后决定业余搭一个ELK日志分析系统，将logstash采集到的日志传给Elasticsearch。
朱季谦·2023-12-16 10:06

深入理解Dubbo-7.服务消费调用源码分析

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring源码、JUC源码、Kafka原理、分布式技术原理如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪·2023-12-16 09:33

深入理解Dubbo-8.Dubbo的失败重试设计

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring源码、JUC源码、Kafka原理、分布式技术原理如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪·2023-12-16 09:33

深入理解Dubbo-6.服务消费源码分析

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring源码、JUC源码、Kafka原理、分布式技术原理如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪·2023-12-16 09:03

Mysql存储引擎-InnoDB

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring源码、JUC源码、Kafka原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪·2023-12-16 09:26
上一页 41 42 43 44 45 46 47 48 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他