Spring-Kafka

spring-kafka

spring-kafka使用spring-kafka的小伙伴，看过来。说明因为spring-kafka封装的比较厉害，可能跟你实际使用起来有很大的差别。
weixin_30536513·2020-06-27 21:43

使用Kafka时一定要注意防止消费速度过慢触发rebalance而导致的重复消费

在Java应用中，我们往往会使用spring-kafka组件简单的设置一下group_id,topic就开始消费消息了，其实这样会埋下巨大的安全隐患，即当消费速度过慢时有可能会触发rebalance,这批消息被分配到另一个消费者
司青·2020-06-26 20:59

Kafka的不同消费方式和消费者代码示例

一、前言本文针对Kafka的消费者代码，均由Kafka原生的客户端API构成，而非spring-kafka或SpringCloudStream等对于原生API进行封装的示例。
DayDayUp丶·2020-06-26 13:38

maven填坑记

遇到的问题导包不完整，结果就是第一次遇到这种情况我是懵的，以为spring-kafka包中不包括这些包（黑人问号脸）接下来开始骚操作了，既然里面没有，行行行，那我手动导包总可以吧
兵才而骄·2020-06-24 01:16

ReplyingKafkaTemplate的使用——Spring结合Kafka实现同步调用

参考：https://docs.spring.io/spring-kafka/reference/html/#replying-template使用SpringRequest-Reply实现基于Kafka
打不死的小黑·2020-06-23 17:37

spring-kafka通过@KafkaListener实现消费者监听流程分析

首先通过@EnableKafka注解，注入KafkaBootstrapConfiguration类@Target(ElementType.TYPE)@Retention(RetentionPolicy.RUNTIME)@Documented@Import(KafkaBootstrapConfiguration.class)public@interfaceEnableKafka{}注入KafkaLi
码拉松·2020-06-23 15:17

spring boot与kafka集成(spring boot 1.5.1版本)

引入依赖org.springframework.kafkaspring-kafka具体spring-kafka的版本由springboot的当前版本决定。ap
dream8062·2020-06-23 05:34

彻底搞定 SpringBoot 整合 Kafka（spring-kafka深入探秘）

Spring创建了一个项目Spring-kafka，封装了Apache的Kafka-client，用于在Spring项目里快速集成kafka。
spring_root·2020-06-20 23:52

总结kafka的consumer消费能力很低的情况下的处理方案

简介由于项目中需要使用kafka作为消息队列，并且项目是基于spring-boot来进行构建的，所以项目采用了spring-kafka作为原生kafka的一个扩展库进行使用。
LzwGlory·2020-06-20 23:50

spring-kafka之KafkaListener注解深入解读

因此，也越来越多的框架对kafka做了集成，比如本文将要说到的spring-kafka。Kafka既然作为一个消息发布订阅系统，就包括消息生成者和消息消费者。
Enast·2020-05-29 15:00

Spring-Kafka简记（二）

new無语转载请注明原创出处，谢谢！配置在application.yml添加配置后，SpringBoot会自动生成Kafka相关默认配置，省掉了要Java配置的步骤。application.ymlspring:kafka:consumer:group-id:fooauto-offset-reset:earliestSpringBoot生成的默认配置auto.commit.interval.ms=5
new無語·2020-04-05 18:58

spring-kafka的线程模型与spring.kafka.listener.concurrency参数

在spring应用中如果需要订阅kafka消息，通常情况下我们不会直接使用kafka-client,而是使用更方便的一层封装spring-kafka。
司青玄·2020-04-02 18:25

Spring-Kafka（五）—— 使用Kafka事务的两种方式

为什么要使用Kafka事务在日常开发中，数据库的事务几乎是必须用到的，事务回滚不一定在于数据增删改异常，可能系统出现特定逻辑判断的时候也需要进行数据回滚，Kafka亦是如此，我们并不希望消息监听器接收到一些错误的或者不需要的消息。SpringBoot使用数据库事务非常简单，只需要在方法上加上@Transactional注解即可，那Kafka如果需要使用事务也可以如此，不过还需修改其他配置才能生效。
海苔胖胖·2020-03-17 03:37

spring boot与kafka集成(spring boot 1.5.1版本)

引入依赖org.springframework.kafkaspring-kafka具体spring-kafka的版本由springboot的当前版本决定。
SamHxm·2020-03-06 00:02

总结一次kafka的consumer消费能力很低的处理方案

问题项目使用spring-kafka操作消费kafka近期出现消费速度变慢，consumer消费一条数据平均需要200ms的时间，并且频繁发生，consumer会停止消费十几秒。
兜里有佩·2020-02-28 15:36

Spring-Kafka简记-基础使用

依赖MAVENorg.springframework.kafkaspring-kafka2.1.10.RELEASEGradlecompile'org.springframework.kafka:spring-kafka
new無語·2020-02-05 12:20

Spring-Kafka（六）—— @KafkaListener的花式操作

Spring-Kafka中消息监听大致分为两种类型，一种是单条数据消费，一种是批量消费；两者的区别只是在于监听器一次性获取消息的数量。
海苔胖胖·2019-12-27 17:38

kafka消费延迟或者重复消费原因

简介由于项目中需要使用kafka作为消息队列，并且项目是基于spring-boot来进行构建的，所以项目采用了spring-kafka作为原生kafka的一个扩展库进行使用。
bigfish1129·2019-12-25 23:13

Spring-Kafka（十）—— ConsumerAwareErrorHandler异常处理器

异常处理代码异常十之八九，十段代码九个bug，哈哈哈哈。平常程序异常我们使用trycatch捕获异常，在catch方法中根据异常类型进行相关处理，既然我们可以使用trycatch处理异常，那为什么还要使用ConsumerAwareErrorHandler异常处理器去处理异常呢？首先，KafkaListener要做的事只是监听Topic中的数据并消费，如果在KafkaListener中还需要对异常进
海苔胖胖·2019-12-19 18:00

Spring-Kafka（三）—— 操作Topic以及Kafka Tool 2的使用

为什么要手动创建Topic看过Spring-Kafka（二）这篇文章的三秒真男人会发现，我们从到到尾都没有创建过"topic.quick.demo"这个Topic，这是因为KafkaTemplate在发送的时候就已经帮我们完成了创建的操作
海苔胖胖·2019-12-19 18:54

Spring-Kafka（一）—— Kafka，你好

简介这个专题讲什么呢？SpringBoot整合Kafka，不会过多的涉及Kafka的设计、源码等，主要还是在于讲述SpringBoot是如何整合Kafka的，以及一些简单的实现，文章所有的表述皆是基于本人的理解，如有不恰之处，请在文章底部评论。Kafka认识一下Kafka异军突起，是近来非常火热的一款消息中间件。消息中间件的作用非常多，常用作系统业务的解耦。例如最常听到的秒杀业务，我们也能使用消息
海苔胖胖·2019-12-19 18:29

Spring-Kafka（八）—— KafkaListener定时启动（禁止自启动）

定时启动的意义何在如果只学习技术不讨论其应用范围那就是在耍流氓啊，为了不做那个流氓，我还是牺牲一下色相吧在这里我举一个定时启动的应用场景：比如现在单机环境下，我们需要利用Kafka做数据持久化的功能，由于用户活跃的时间为早上10点至晚上12点，那在这个时间段做一个大数据量的持久化可能会影响数据库性能导致用户体验降低，我们可以选择在用户活跃度低的时间段去做持久化的操作，也就是晚上12点后到第二条的早
海苔胖胖·2019-12-12 09:40

Kafka在SpringBoot中的入门配置

一、Springboot与Spring-kafka版本关系二、概念知识三、SpringBoot操作Kafka示例Topic配置producer配置过滤监听器中的消息监听器的异常处理KafkaConsumer
IT菜鸟学习·2019-11-30 20:32

总结kafka的consumer消费能力很低的情况下的处理方案

简介由于项目中需要使用kafka作为消息队列，并且项目是基于spring-boot来进行构建的，所以项目采用了spring-kafka作为原生kafka的一个扩展库进行使用。
LOC_Thomas·2019-11-08 07:53

springboot+kafka+邮件发送（最佳实践）

导读集成spring-kafka，生产者生产邮件message，消费者负责发送引入线程池，多线程发送消息多邮件服务器配置定时任务生产消息；计划邮件发送实现过程导入依赖1.85.1.382.1.51.3.22.8.23.4org.springframework.bootspring-boot-starterorg.springframework.bootspring-boot-starter-tes
可乐丶先生·2019-08-01 17:00

spring-kafka的线程模型与spring.kafka.listener.concurrency参数

在spring应用中如果需要订阅kafka消息，通常情况下我们不会直接使用kafka-client,而是使用更方便的一层封装spring-kafka。
总有刁明想害朕·2019-06-28 17:22

spring boot集成kafka之spring-kafka深入探秘

Spring创建了一个项目Spring-kafka，封装了Apache的Kafka-client，用于在Spring项目里快速集成kafka。除了简单的收发消息外，Spring-kafka还提供了很
chihujiang3132·2019-05-31 19:00

spring-kafka

spring-kafka使用spring-kafka的小伙伴，看过来。说明因为spring-kafka封装的比较厉害，可能跟你实际使用起来有很大的差别。
bener·2019-05-17 14:00

Spring-Kafka源码解析

ConsumerConfigskafkaProducerkafkaProducer生产者模型ProducerConfigs使用过程中踩的坑坑1坑2Spring-KafkakafkaConsumerkafkaConsumer消费者模型spring-kafka
子毅168·2019-04-29 22:21

kafka消费延迟或者重复消费原因

简介由于项目中需要使用kafka作为消息队列，并且项目是基于spring-boot来进行构建的，所以项目采用了spring-kafka作为原生kafka的一个扩展库进行使用。
我知道你是高手·2019-03-23 19:22

SpringBoot学习：kafka批量并发消费配置（consumer+producer）

springboot使用的是2.0.0版本，spring-kafka使用的是2.1.4版本，配置的时候遇到了一些问题，在此总结一下：1.session-timeout连接超时时间，之前配置的是3000(
大小鱼鱼鱼与鱼.·2019-03-08 00:05

一步步解决spring-kafka消息丢失

kafka的高性能、流式响应、对大数据支持是有目共睹的，在我们内部项目product-search有使用CDC的解决方案，而kafka成为该方案的输出源，此时各个业务方只需要去订阅消费即可。1.问题描述有一天有开发人员找到我：我的consumer端消费kafka为何有时候可以消费到数据，有时候不行？dev环境我自己试了是没有问题的，而test环境就不行，不行的时候系统也没有任何报错信息，why?2
布道·2018-12-13 18:32

分布式消息系统：Kafka（九）应用Spring Boot实现消费者和生产者

一、项目（1）新建SpringBoot项目，参考以下创建过程；创建一个SpringBoot项目（2）pom文件中添加spring-kafka框架org.springframework.kafkaspring-kafka
mengmengdastyle·2018-09-03 16:58

详解Spring Kafka中关于Kafka的配置参数

SpringKafka文档地址：https://docs.spring.io/spring-kafka/reference/htmlsinglekafka文档地址：http://kafka.apache.org
冯立彬·2018-08-28 08:44

Spring Kafka中关于Kafka的配置参数

SpringKafka文档地址：https://docs.spring.io/spring-kafka/reference/htmlsinglekafka文档地址：http://kafka.apache.org
冯立彬·2018-08-27 18:16

sprintboot集成kafka

springboot版本org.springframework.bootspring-boot-starter-parent1.5.6.RELEASEspring-kafka和kafka版本对应关系在pom中增加spring-kafka
黑暗行动·2018-06-06 15:13

kafka原理和实践（六）总结升华

目录总结篇1.官方介绍2.特点3.Kafka的设计4.Kayka的应用场景5.总结正文系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka
FAw67J7·2018-04-10 18:40

kafka原理和实践（三）spring-kafka生产者源码

模板三、KafkaProducer3.1KafkaProducer构造过程3.2KafkaProducer发送数据四、总结正文系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka
FAw67J7·2018-04-10 18:28

kafka原理和实践（四）spring-kafka消费者源码

目录一、kafkaConsumer消费者模型一、kafkaConsumer构造二、消费者容器启动流程正文系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka
FAw67J7·2018-04-10 18:36

kafka原理和实践（二）spring-kafka简单实践

目录一、生产者1.1.配置1.2发送kafka消息二、消费者2.1配置2.2消费kafka消息正文系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践
FAw67J7·2018-04-10 18:34

kafka原理和实践（五）spring-kafka配置详解

目录一、官方配置二、实践中的配置1、生产者配置2、消费者配置3.使用规范正文系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践
FAw67J7·2018-04-10 18:02

kafka原理和实践（一）原理：10分钟入门

目录一、kafka拓扑图二、名词解释三、生产模型四、消费模型 正文系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践（三）
FAw67J7·2018-04-10 00:00

Java应用CPU占用率高的问题排查(spring-kafka 1.1.7版本的bug)

近期项目中使用到了spring-kafka-1.1.7.RELEASE,上线后发现程序在没有请求时，进程的CPU占用率依然保持在20%以上，于是开始查找原因。首先通过ps-mp命令查看到低是哪个线程长时间占用CPU：ps-mp进程PID-oTHREAD,tid,time输出如下：kafka-cpu.png其中第二列就是命令执行时此线程的CPU占用率，可见图中用红框标记的部分明显偏高。我们记下右侧的
司青玄·2018-03-19 18:50

kafka原理和实践（五）spring-kafka配置详解

系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践（三）spring-kafka生产者源码kafka原理和实践（四）spring-kafka
只会一点java·2017-11-30 12:00

kafka原理和实践（三）spring-kafka生产者源码

系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践（三）spring-kafka生产者源码kafka原理和实践（四）spring-kafka
只会一点java·2017-11-30 12:00

kafka原理和实践（四）spring-kafka消费者源码

系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践（三）spring-kafka生产者源码kafka原理和实践（四）spring-kafka
只会一点java·2017-11-30 12:00

kafka原理和实践（六）总结升华

系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践（三）spring-kafka生产者源码kafka原理和实践（四）spring-kafka
只会一点java·2017-11-30 12:00

kafka原理和实践（一）原理：10分钟入门

系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践（三）spring-kafka生产者源码kafka原理和实践（四）spring-kafka
只会一点java·2017-11-30 12:00

kafka原理和实践（二）spring-kafka简单实践

系列目录kafka原理和实践（一）原理：10分钟入门kafka原理和实践（二）spring-kafka简单实践kafka原理和实践（三）spring-kafka生产者源码kafka原理和实践（四）spring-kafka
只会一点java·2017-11-30 12:00

springboot 1.5.2 集成kafka的简单例子

添加依赖compile("org.springframework.kafka:spring-kafka:1.1.2.RELEASE")添加application.properties#kafka#指定kafka
Xiao.jf·2017-11-02 11:36
上一页 1 2 3 4 5 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他