Kafka专题学习

kafka消费组下的消费者离开组

主要内容本文是从大型互联网系统的应用角度探讨分布式缓存的。本文站在原理、框架、架构、案例等多个视角对分布式缓存进行了探讨。互联网系统随着容量需求的陡增，许多看似简单的存储类场景都面临着巨大的容量问题和稳定性风险，而其中大部分问题都可以通过对缓存的合理使用来规避。读者从本文中将会获得应对这些问题的思路，也会对分布式缓存有一个体系化的认识。本文内容共分为三个部分，16章的内容，全文按照从理论到实现，再
上班划水小能手·2023-12-29 12:21

消息队列中间件的简述以及比较

文章目录引言一、RabbitMQ的简单介绍二、ActiveMQ的简单介绍三、RocketMQ的简单介绍四、Kafka的简单介绍五、各个中间件对比总结参考文档引言  上文简单讲述了何为消息队列和消息队列的特点
xiaodaidai丶·2023-12-29 08:21

kafka相关面试题及答案

1、什么是Kafka，它主要用于什么场景？Kafka是一个分布式流处理平台，由LinkedIn开发并于2011年开源，目前是Apache软件基金会的一个顶级项目。
爬山算法·2023-12-29 07:25

Kafka学习笔记1（千峰教育）

Kafka学习笔记1（千峰教育）一、为什么使用消息队列1.使用同步的通信方式来解决多个服务之间的通信2.使用异步的通信方式二、消息队列的流派1.有broker2.无broker三、Kafka的基本知识1
该叫啥·2023-12-29 07:55

「Kafka」生产者篇

「Kafka」生产者篇生产者发送消息流程在消息发送的过程中，涉及到了两个线程——main线程和Sender线程。在main线程中创建了一个双端队列RecordAccumulator。
小成同学_·2023-12-29 07:20

Kafka优异的性能是如何实现的？

ApacheKafka是一个分布式流处理平台，设计用来处理高吞吐量的数据。它被广泛用于构建实时数据管道和流式应用程序。
KevinAha·2023-12-29 07:49

Kafka可视化管理工具kafka-manager部署安装和使用-已更名为CMAK

一、kafka-manager简介为了简化开发者和服务工程师维护Kafka集群的工作，yahoo构建了一个叫做Kafka管理器的基于Web工具，叫做KafkaManager。
吕文涛·2023-12-29 07:23

SparkStreaming与Kafka整合

1.3SparkStreaming与Kafka整合1.3.1整合简述kafka是做消息的缓存，数据和业务隔离操作的消息队列，而sparkstreaming是一款准实时流式计算框架，所以二者的整合，是大势所趋
Guff_hys·2023-12-29 06:55

【数据采集与预处理】数据接入工具Kafka

目录一、Kafka简介（一）消息队列（二）什么是Kafka二、Kafka架构三、Kafka工作流程分析（一）Kafka核心组成（二）写入流程（三）Zookeeper存储结构（四）Kafka消费过程四、Kafka
Francek Chen·2023-12-29 06:55

docker compose 部署 grafana + loki + vector 监控kafka消息

Centos7随笔记录记录dockercompose统一管理granfana+loki+vector监控kafka信息。
芝麻馅汤圆儿·2023-12-29 06:44

SpringBoot 集成 Kafka消息中间件，Docker安装Kafka环境

前述提供kafka、zooker在docker环境下进行安装的示例，springBoot集成kafka实现producer-生产者和consumer-消费者(监听消费：single模式和batch模式)
小诺大人·2023-12-29 05:21

Kafka概述 （3.x/2023）

一.Kafka定义1.kafka传统定义：kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用于大数据实时处理领域发布/订阅：消息的发布者不会将消息直接发给指定的订阅者
这货不是王马勺·2023-12-29 02:09

【头歌实训】kafka-入门篇

文章目录第1关：kafka-初体验任务描述相关知识Kafka简述Kafka应用场景Kafka架构组件kafka常用命令编程要求测试说明答案代码第2关：生产者（Producer）-简单模式任务描述相关知识
撕得失败的标签·2023-12-29 00:11

消息中间件

文章目录1.消息不丢失2.消息重复消费3.死信交换机实现延时队列4.消息堆积问题5.rabbitMQ高可用机制6.Kafka是如何保证消息不丢失的7.消息的顺序消费8.Kafka高可用机制9.kafka
ITfeib·2023-12-28 21:31

私有部署ELK，搭建自己的日志中心（一）-- 概述

涉及到的组件有：filebeatkafkalogstashelasticsearchkibanakafkaui以采集jvm日志为示例，采集对象不外乎是以下两种：虚拟机k8sPod容器市面上采集日志的技术层出不穷
天草二十六_简村人·2023-12-28 21:55

企业级ELK-架构与部署（二）亲测可用！

废话不多说，直接上干货——ELK中的logstash、kafka与filebeat的部署。实战搭建环境与各主机角色说明。
睿江云计算·2023-12-28 21:20

大数据处理各组件概念及作用

一、数据采集：1.1Flume集群：数据采集工具，如写脚本将不同源端的数据采集后进行数据存储，或推送至Kafka等；1.2FTP集群：文件传输工具；1.3Kafka集群：消息队列，未避免消息堵塞而将消息由
p1i2n3g4·2023-12-28 17:11

阿里中间件团队4面真题(60W)：线程锁+分布式锁+Kafka等

Java中间件一面技术一面考察范围：重点问了Java线程锁：synchronized和ReentrantLock相关的底层实现线程池的底层实现以及常见的参数数据结构基本都问了一遍：链表、队列等Java内存模型：常问的JVM分代模型，以及JDK1.8后的区别，最后还问了JVM相关的调优参数分布式锁的实现比较技术一面题目：1：自我介绍2：擅长哪方面的技术？3；java有哪些锁中类？（乐观锁&悲观锁、可
AI乔治·2023-12-28 17:53

日志分析平台的架构方案

2.数据传输层：-使用消息队列（如Kafka、RabbitMQ）
Angel·2023-12-28 15:51

孟红梅老师《把握课堂教学设计策略，培育语文核心素养》听课笔记

2021年7月16日，如期参加项城市教师进修学校举办的继续教育（语文专题学习）。我有幸听来自商丘永城的孟红梅老师带来的讲座。今天上午专门把讲座的精华部分整理了一下，以供自己在以后的教学过程中灵活运用。
童童迪迪·2023-12-28 13:32

kafka基础知识总结

一、Kafka的基础1、什么是kafka？Kafka是一个由Apache软件基金会开发的分布式流处理平台。它最初是为LinkedIn设计的，用于处理大规模的实时日志数据流。
计算衎·2023-12-28 13:09

关于netty kafka hdfs hbase性能调研记录

1.netty调研记录项目中准备用netty框架来实现socket接口，对于netty的性能做了个初步调研，大致过程如下：1.1调用socket接口的客户端为了让客户端快速发送数据，我们已经提前将需要传输的数据通过java的ObjectInputStream写数据到了一个文件，主要是节省客户端接口的编码，然后让客户端不断循环发送数据一段时间(比如20分钟，时间是可以指定)，客户端代码如下：impo
aperise·2023-12-28 13:09

SpringBoot学习笔记-集成其他组件框架记录

动手写了一些测试示例，集成了一些常用的组件框架Mybatis、Redis、Rabbitmq、Kafka、Quartz、Swagger、ElasticSearch、OAuth、SMS、InstantMessaging
人生偌只如初见·2023-12-28 12:09

内网离线搭建之----kafka-manager集群监控

工具介绍:为了简化开发者和服务工程师维护Kafka集群的工作，yahoo构建了一个叫做Kafka管理器的基于Web工具，叫做KafkaManager。
落世繁华·2023-12-28 12:08

「Kafka」入门篇

「Kafka」入门篇基础架构Kafka快速入门集群规划集群部署官方下载地址：http://kafka.apache.org/downloads.html解压安装包：[atguigu@hadoop102software
小成同学_·2023-12-28 12:30

Kafka

KafkaKafka概念Kafka是一种高吞吐量、分布式、基于发布/订阅的消息系统，最初由LinkedIn公司开发，使用Scala语言编写，目前是Apache的开源项目。
武昌库里写JAVA·2023-12-28 11:29

【头歌实训】PySpark Streaming 数据源

文章目录第1关：MySQL数据源任务描述相关知识PySparkJDBC概述PySparkJDBCPySparkStreamingJDBC编程要求测试说明答案代码第2关：Kafka数据源任务描述相关知识Kafka
撕得失败的标签·2023-12-28 11:24

人工智能专题学习

图片发自App一杯绿茶提神，继续下午的人工智能优化学习。周末两天早起培训，精彩的课程还是可以引人入胜，就如同这茶一样沁人心脾，舒心。上课老师都是名校高学历，都是年轻人。
秋子在线·2023-12-28 11:43

智能化运维学习笔记【2】

第四章、分布式消息队列4.1开源消息队列对比与分析目前市面上存在ZeroMQActiveMQRockeMQKafka等消息中间件，本人在工作中接触到比较多的是ActiveMQ和Kafka。
运维仙人·2023-12-28 10:23

kafka自定义分区实战

本文来说下kafka自定义分区相关的知识与内容，同时说下springboot整合kafka如何来实现自定义分区文章目录Kafka如何实现分区Kafka集群是如何知道投递到哪个broker中默认分区策略Kafka
wh柒八九·2023-12-28 10:12

SpringBoot整合kafka实战之带回调的生产者

本文来说下SpringBoot整合kafka部分知识内容文章目录带回调的生产者方式一方式二本文小结带回调的生产者前面我们说了简单的生产和消费，本文说下带回调的生产者。
wh柒八九·2023-12-28 10:42

在Windows安装运行Kafka

本文来说下如何在Windows安装运行Kafka。因为kafka的运行需要依赖zookeeper，而zookeeper又要依赖jdk。
wh柒八九·2023-12-28 10:41

Kafka会不会重复消费

本文来说下kafka会不会重复消费的问题。在单体架构时代，就存在着接口幂等性的问题，只不过到了分布式、高并发的场景之后，接口幂等性的问题会更加明显。
wh柒八九·2023-12-28 10:11

Kafka的高性能原理

本文来说下Kafka的高性能设计文章目录什么是高性能设计Kafka高性能设计的全景图生产消息的性能优化手段批量发送消息消息压缩高效序列化内存池复用存储消息的性能优化手段IO多路复用.磁盘顺序写PageCache
wh柒八九·2023-12-28 10:11

kafka是如何解决粘包拆包的

本文来说下kafka是如何解决粘包拆包的文章目录概述kakfa是如何解决粘包拆包问题的呢本文小结概述前面笔者写了一篇文章一文讲清粘包拆包全面的讲解了TCP粘包拆包相关的问题。
wh柒八九·2023-12-28 10:41

MQ设计思想分析

对于MQ来说，不管是RocketMQ、Kafka还是其他消息队列，它们的本质都是：一发一存一消费。下面我们以这个本质作为根，一起由浅入深地聊聊MQ。
wh柒八九·2023-12-28 10:40

RabbitMQ 和 Kafka 对比

本文对RabbitMQ和Kafka进行下比较文章目录前言RabbitMQ架构队列消费队列生产Kafka本文小结前言开源社区有好多优秀的队列中间件，比如RabbitMQ和Kafka，每个队列都貌似有其特性
wh柒八九·2023-12-28 10:04

四、微服务技术栈有哪些

Consul、Zookeeper等服务调用Rest、RPC、gRPC服务熔断器Hystrix、Envoy等负载均衡Ribbon、Nginx等服务接口调用(客户端调用服务的简化工具)Feign等消息队列Kafka
菜小六·2023-12-28 08:34

从源码全面解析Java 线程池的来龙去脉

作者简介：大家好，我是爱敲代码的小黄，独角兽企业的Java开发工程师，CSDN博客专家，阿里云专家博主系列专栏：Java设计模式、Spring源码系列、Netty源码系列、Kafka源码系列、JUC源码系列如果感觉博主的文章还不错的话
爱敲代码的小黄·2023-12-28 08:56

Kafka

为什么要有Kafka？
_Levi__·2023-12-28 04:14

面试官：说说进程和线程的区别

最近整理了一份大厂面试资料《史上最全大厂面试题》，Springboot、微服务、算法、数据结构、Zookeeper、Mybatis、Dubbo、linux、Kafka、Elasticsearch、数据库等等获取方式
飞乐鸟·2023-12-28 03:05

kafka高吞吐量的原因

kafa吞吐量高的原因顺序读写kafka的消息是不断追加到文件中的，这个特性使kafka可以充分利用磁盘的顺序读写性能顺序读写不需要硬盘磁头的寻道时间，只需很少的扇区旋转时间，所以速度远快于随机读写零拷贝在
香港十大金曲·2023-12-27 23:59

聊聊 Kafka： 在 Linux 环境上搭建 Kafka

1CseCg3k56uE_tLTF4ckEBw，提取码:gw76zookeeper下载地址链接：https://pan.baidu.com/s/1zVc6Z-QqrIrn_FCvQ1s6wA，提取码:a196kafka
谁叫我土豆了·2023-12-27 19:37

Spring Boot学习（三十三）：集成kafka

前言下面是zookeeper和kafka的官网下载地址，大家可以学习下载zookeeper下载地址：http://zookeeper.apache.org/releases.htmlkafka下载地址：
way_more·2023-12-27 17:03

Debezium发布历史30

原文地址：https://debezium.io/blog/2018/03/08/creating-ddd-aggregates-with-debezium-and-kafka-streams/欢迎关注留言
大大蚊子·2023-12-27 17:55

安装kafka

静态文件安装（单机）解压到指定目录（解压到/usr）tar-zxfkafka_2.11-2.2.0.tgz-C/usr/到指定的解压目录下cd/usr/kafka_2.11-2.2.0/配置主机名查看是否配置了
跨海之梦·2023-12-27 17:41

Redis布隆过滤器BloomFilter

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring源码、JUC源码、Kafka原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪·2023-12-27 16:30

Redis案例实战之Bitmap、Hyperloglog、GEO

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring源码、JUC源码、Kafka原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪·2023-12-27 16:00

docker部署kafka zookeeper模式集群

单机模式链接：https://blog.csdn.net/wsdhla/article/details/133032238kraft集群模式链接：部署Kafka_kafka部署-CSDN博客zookeeper
wsdhla·2023-12-27 14:36

【Kafka中的leader选举】

文章目录Kafak集群中leader选举一、Kafka介绍1.Kafka的使用场景2.Kafka基本概念二.Kafka安装教程三.Kafka集群中leader节点的选举机制broker的leaderKafka
你有按下913的勇气吗·2023-12-27 14:25
上一页 28 29 30 31 32 33 34 35 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他