kafka-java

Kafka-Java三：Spring配置Kafka消费者消费消息

packagecom.demo.lxb.kafka;importorg.apache.kafka.clients.consumer.ConsumerConfig;importorg.apache.kafka.clients.consumer.ConsumerRecord;importorg.apache.kafka.clients.consumer.ConsumerRecords;importor
叫我吕小布·2023-10-25 12:32

Kafka-Java四：Spring配置Kafka消费者提交Offset的策略

一、Kafka消费者提交Offset的策略Kafka消费者提交Offset的策略有自动提交Offset：消费者将消息拉取下来以后未被消费者消费前，直接自动提交offset。自动提交可能丢失数据，比如消息在被消费者消费前已经提交了offset，有可能消息拉取下来以后，消费者挂了手动提交Offset消费者在消费消息时/后，再提交offset，在消费者中实现手动提交Offset分为：手动同步提交、手动异
叫我吕小布·2023-10-25 12:24

Kafka-Java二：Spring实现kafka消息发送的ack机制

写在前面如果只有一个kafka实例的话，那么文章中提到kafka集群=kafka实例一、什么是消息发送者端的ack机制ack机制：消息确认发送成功的标识由谁发起该标识：kafka集群发起该标识的场景：kafka集群确认已经收到了消息。由谁接收该标识：消息发送者端接收该标识的意义：消息发送者接到该标识，才表示消息发送成功。二、消息发送者端ack机制的策略有哪些2.1、ack=0kafka集群不需要任
叫我吕小布·2023-10-25 00:23

Kafka-Java二：Spring配置kafka消息发送端的缓冲区

一、涉及到的组件概念1.1、缓冲区1.2、本地线程1.3.本地线程消息推送策略二、各组件的解释参见代码注释//配置消息的缓冲区/**设置消息发送者端的缓冲区大小，如果设置了缓冲区，消息会先发送到缓冲区，可以提供发送性能*默认大小是32M*/props.put(ProducerConfig.BUFFER_MEMORY_CONFIG,33554432);//配置消息的本地线程/**设置消息发送者端的本
叫我吕小布·2023-10-25 00:23

Kafka-Java一：Spring实现kafka消息的简单发送

目录写在前面一、创建maven项目二、引入依赖2.1、maven项目创建完成后，需要引入以下依赖2.2、创建工程目录三、创建生产者3.1、创建生产者，同步发送消息3.2、创建生产者，异步发送消息四、同步发送消息和异步发送消息的区别五、报错处理思路写在前面该文章通过spring只实现消息的简单发送，不实现消息的监听。一、创建maven项目创建maven过程不再赘述。二、引入依赖2.1、maven项目
叫我吕小布·2023-10-25 00:21

大数据系列之kafka-java实现

Java源码GitBub地址：https://github.com/fzmeng/kafka-demo关于kafka安装步骤可见文章http://www.cnblogs.com/cnmenglang/p/6520166.html在上篇文章中使用shell命令处理了kafka的消息生产与消息消费。下面介绍Java语言对kafka的消息生产与消息消费的处理。1.代码结构如图2.pom.xml4.0.0
CodeM91·2020-09-15 23:19

kafka-java使用的一些坑

1、pruducer未关闭，或者main线程关闭太快，会导致producer生成者的消息并未完全发送给kafka以下代码显示了，如果当前producer发送失败，则需要隔一段时间才会有数字打印出来importorg.apache.kafka.clients.producer.KafkaProducer;importorg.apache.kafka.clients.producer.Producer
yt438936731·2020-08-18 12:12

kafka-java代码操作kafka（producer和consumer）配置信息和解释

1.maven:org.apache.kafkakafka_2.100.8.2.12.kafka生产者代码：importorg.apache.kafka.clients.producer.KafkaProducer;importorg.apache.kafka.clients.producer.Producer;importorg.apache.kafka.clients.producer.Pro
爱丶迁就·2018-08-27 14:06

大数据系列之kafka-java实现

Java源码GitBub地址：https://github.com/fzmeng/kafka-demo关于kafka安装步骤可见文章http://www.cnblogs.com/cnmenglang/p/6520166.html在上篇文章中使用shell命令处理了kafka的消息生产与消息消费。下面介绍Java语言对kafka的消息生产与消息消费的处理。1.代码结构如图2.pom.xml4.0.0
苦行僧1991·2017-03-14 17:07
上一页 1 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他