Kafka原理解析

Kafka系列之：Unexpected handshake request with client mechanism PLAIN, enabled mechanisms are []

Kafka系列之：UnexpectedhandshakerequestwithclientmechanismPLAIN,enabledmechanismsare[]一、完整报错二、错误原因三、解决方法一
最笨的羊羊·2024-02-09 15:41

深入浅出理解kafka原理系列之：自动提交和手动提交

深入浅出理解kafka原理系列之：自动提交和手动提交一、kafka消费者提交的内容二、自动提交三、自动提交代码示例四、手动提交五、手动同步提交代码示例六、手动异步提交代码示例一、kafka消费者提交的内容消费组
最笨的羊羊·2024-02-09 15:40

深入浅出理解kafka原理系列之：kafka消费者参数设置

深入浅出理解kafka原理系列之：kafka消费者参数设置1.max.poll.records2.max.poll.interval.ms3.enable.auto.commit4.heartbeat.interval.ms5
最笨的羊羊·2024-02-09 15:10

Kafka系列之：Kafka集群同时设置基于时间和日志大小两种方式保存Topic的数据

Kafka系列之：Kafka集群同时设置基于时间和日志大小两种方式保存Topic的数据一、基于日志大小二、基于时间大小三、参数设置四、设置命令一、基于日志大小"log.retention.bytes"是
最笨的羊羊·2024-02-09 15:09

初识kafka

[TOC]Kafka起初是由Linkedin公司采用Scala语言开发的一个多分区、多副本且基于ZooKeeper协调的分布式消息系统，现己被捐献给Apache基金会。
tracy_668·2024-02-09 14:07

69.Kudu、Spark2、Kafka安装—CDH

69.1演示环境介绍CDH集群运行正常操作系统版本为：CentOS6.5CM和CDH版本为：5.12.1CM管理员为：admin用户操作系统用户为：root用户69.2操作演示Kudu安装Kudu的Parcel部署下载Kudu的Parcel包：http://archive.cloudera.com/kudu/parcels/5.12.1/KUDU-1.4.0-1.cdh5.12.1.p0.10-e
大勇任卷舒·2024-02-09 14:55

spring boot 怎样集成kafka

SpringBoot可以使用SpringforApacheKafka库来集成Kafka。
low sapkj·2024-02-09 12:34

Spring Boot 集成 Kafka

SpringBoot作为主流微服务框架，拥有成熟的社区生态。市场应用广泛，为了方便大家，整理了一个基于springboot的常用中间件快速集成入门系列手册，涉及RPC、缓存、消息队列、分库分表、注册中心、分布式配置等常用开源组件，大概有几十篇文章，陆续会开放出来，感兴趣同学请提前关注&收藏消息通信有两种基本模型，即发布-订阅（Pub-Sub）模型和点对点（PointtoPoint）模型，发布-订阅
互联网全栈架构·2024-02-09 12:34

ELK环境搭建

Windows8.1elasticsearch：5.5.1logstash：2.0.0kibana：5.5.1注：由于实验性搭建，选择windows系统，但选择Linux系统效果更佳二、部署方案1.ELK+Redis2.ELK+Kafka
枯木风·2024-02-09 12:08

rust语言tokio库底层原理解析

目录1rust版本及tokio版本说明1tokio简介2tokio::main2.1tokio::main使用多线程模式2.2tokio::main使用单线程模式3builder.build()函数3.1build_threaded_runtime()函数新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内
ImSEten·2024-02-09 09:59

前端面试2021.4.9

答案：vue数据双向绑定实现原理解析4.请说一下vue的生命周期。
土鳖班长大大·2024-02-09 09:56

腾讯AI大佬详解Apache Kafka实战

内容简介1.ApacheKafka简介：ApacheKafka是由Apache软件基金会开发的一个开源消息系统项目，由Scala写成。Kafka最初是由LinkedIn开发，并于2011年初开源。
笑起来真好看LQQ·2024-02-09 08:53

Kafka消息传递的可靠性

kafka拥有以下可靠性保证：可以保证分区消息的顺序。
阿猫阿狗Hakuna·2024-02-09 07:14

SQL条件判断语句嵌套window子句的应用【易错点】--HiveSql面试题25

数据分析4小结0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
莫叫石榴姐·2024-02-09 06:00

HiveSQL——条件判断语句嵌套windows子句的应用

0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
爱吃辣条byte·2024-02-09 06:58

【stomp实战】websocket原理解析与简单使用

一、WebSocket原理WebSocket是HTML5提供的一种浏览器与服务器进行全双工通讯的网络技术，属于应用层协议。它基于TCP传输协议，并复用HTTP的握手通道。浏览器和服务器只需要完成一次握手，两者之间就直接可以创建持久性的连接，并进行双向数据传输。WebSocket的出现就解决了半双工通信的弊端。它最大的特点是：服务器可以向客户端主动推动消息，客户端也可以主动向服务器推送消息。WebS
suyukangchen·2024-02-09 06:57

Java多态原理

参考虚方法JVM杂记：对多态实现原理、虚方法表、虚方法、静态解析、动态链接的一些思考_多态和方法表的关系-CSDN博客静态分派与动态分派（JVM）Java虚拟机：静态分派&动态分派原理解析-掘金虚方法表
Sloent·2024-02-09 06:54

linux 消息发布工具-kafka

下载地址：https://mirrors.cnnic.cn/apache/kafka一、系统构成在整个消息发布流程中，kafka作为一个中间件对系统的运行提供了解耦、削峰、异步处理的能力。
强壮的向阳花·2024-02-09 05:53

【云原生进阶之PaaS中间件】第三章Kafka-4.3.2-broker网络模型

1kafka网络模型运行原理kafkabroker在启动的时候，会根据你配置的listeners初始化它的网络组件，用来接收外界的请求，这个listeners你可能没配置过，它默认的配置是listeners
江中散人·2024-02-09 05:19

【云原生进阶之PaaS中间件】第三章Kafka-4.3.3-broker的leader和follower工作机制

1leader和follower1.1kafka的副本kafka副本的作用就是提高数据的可靠性，系统默认副本数量是1，生产环境一般配置数量是2个，保证数据可靠性；否则副本太多会增加磁盘的存储空间，增加网络上的数据传输
江中散人·2024-02-09 05:19

2024最新Java面试题及答案！（ 2024年 1 月最新版，持续更新）

面试题大全~这套互联网Java工程师面试题包括了：Java面试、Spring、JVM、MyBatis、Redis、MySQL、并发编程、微服务、Linux、Springboot、SpringCloud、MQ、Kafka
程序一逸·2024-02-09 05:00

Kafka 入门介绍

目录一.前言二.使用场景三.分布式的流平台四.Kafka的基本术语4.1.主题和日志（Topic和Log）4.2.分布式（Distribution）4.3.异地数据同步技术（Geo-Replication
流华追梦·2024-02-09 00:43

iOS中KVC使用及原理解析

什么是KVC？KVC即Key-ValueCoding，意思键-值编码。iOS中键值编码机制是一种由NSKeyValueCoding非正式协议启用的机制，通过这个协议可以间接访问OC对象的属性。当一个对象符合键值编码时，它的属性可以利用字符串参数来寻址，通过一个简洁、统一的消息传递接口。这种间接访问机制补充了实例变量及其关联的访问方法所提供的直接访问。更多内容参考官方文档。KVC的使用通过官方文档我
希尔罗斯沃德_董·2024-02-08 23:28

Elasticsearch: 非结构化的数据搜索

singleDoc#《olap/clickhousekeeper一致性协调服务》)，kafka->redpanda(https://www.
SakamataZ·2024-02-08 22:48

Spring Cloud Gateway原理解析

1、网关介绍1、为什么产生了网关微服务架构下，随着服务的数量不断累加，当客户端访问这些微服务的时候，往往需要记住即使甚至上百个地址，这对于客户端而言，是非常复杂且难以维护的。数不清的微服务如果直接让客户端和各个微服务通信，存在如下问题，客户端会请求多个不同的服务，需要维护不同的请求地址，增加了开发难度跨域请求的问题加大身份认证的难度，每个微服务需要独立认证因此需要一种对外的统一集散地，类似于在所有
我从不砍柴·2024-02-08 22:22

Kafka实战(五) - Kafka的秘技"坂本"之争

只有顺应版本,才能成就王者不败神话也是能否用好Kafka的关键。
JavaEdge·2024-02-08 20:50

消息中间件：Puslar、Kafka、RabbigMQ、ActiveMQ

消息队列消息队列：它主要用来暂存生产者生产的消息，供后续其他消费者来消费。它的功能主要有两个：暂存（存储）队列（有序：先进先出从目前互联网应用中使用消息队列的场景来看，主要有以下三个：异步处理数据系统应用解耦业务流量削峰消息队列模型点对点模式多个生产者可以向同一个消息队列发送消息，一个消息只能被一个消费者消费，在被消费成功后，这条消息会被移除。如果消费者处理消息失败了，那么这条消息会重新被消费。发
Kingairy·2024-02-08 18:33

一探究竟，详解Kafka生产者和消费者的工作原理！

主题和日志对于每个主题，Kafka群集都会维护一个分区日志，如下所示：image.png每个分区（Partition）都是有序的(所以每一个Partition内部都是有序的)，不变的记录序列，这些记录连续地附加到结构化的提交日志中
废柴程序员·2024-02-08 17:42

flink消费kafka源

后来一通折腾，发现我当时消费的配置，是用FlinkKafkaConsu
MinaLing·2024-02-08 16:14

2.Kafka生产过程

三、Kafka生产过程分析1.写入方式producer采用推（push）模式将消息发布到broker，每条消息都被追加（append）到分区（patition）中，属于顺序写磁盘（顺序写磁盘效率比随机写内存要高
chongweiLin·2024-02-08 12:56

CV大（混合）模型之GLIP代码，原理解析

众所周知，随着NLP类的大模型问世，以chatgpt为代表，后续各大大厂相继出现自己的大模型，如百度的“文心一言”，华为的“盘古”，科大讯飞的“星火”，阿里的“通义千问”，商汤的“日日新”等，同样在CV领域也随之出现一系列包含检测，分割类的大模型，也称之为cv混合模型，在分割中现阶段较经典的有SAM，FasterSAM等。检测方面主要以CLIP，GLIP，DINO，GroundingDINO为代表
ywyErwin·2024-02-08 11:35

Spark streaming batch运行时间过长问题02

继续排查发现，在用Spark读取Kafka数据之后，由于数据通过Kafka读取后是逗号分隔的字符串，但是为了解决字符串某些字段中还有逗号的问题，只能使用正则表达式匹配，导致性能过慢。
kk_io·2024-02-08 10:01

Flink Checkpoint过程

Checkpoint使用了Chandy-Lamport算法流程1.正常流式处理（尚未Checkpoint）如下图，Topic有两个分区，并行度也为2，根据奇偶数我们假设任务从Kafka的某个Topic中读取数据
orange大数据技术探索者·2024-02-08 09:49

Flink Format系列(2)-CSV

Flink的csv格式支持读和写csv格式的数据，只需要指定'format'='csv'，下面以kafka为例。
sf_www·2024-02-08 09:48

storm整合kafka

maven4.0.0storm-kafka-mysqlstorm-kafka-mysql0.0.1-SNAPSHOTjarstorm-kafka-mysqlUTF-8javaxjavaee-api8.0providedorg.glassfish.webjavax.servlet.jsp.jstl1.2.2org.apache.stormstorm-core0.9.5provided
piziyang12138·2024-02-08 09:01

如何查看kafka的topic的消费者组有没有积压

Kafka自带的命令行工具kafka-consumer-groups.sh来查看消费者组的消费情况，包括是否有积压。具体步骤如下：打开命令行终端，进入Kafka安装目录下的bin文件夹。
不会吐丝的蜘蛛侠。·2024-02-08 08:29

大数据系列—数据迁移(Sqoop,Flume,DataX)对比学习（stage3）

个人大数据技术栈：DataX,Sqoop,Hadoop,Hive,Spark,Flink,Hbase,Kafka,Kettle,Azkaban,Airflow,Tableau…个人在学习领域：Python
道-闇影·2024-02-08 06:07

网络|使用 Wireshark 分析 TLS/SSL 协议

背景服务端(3.205)是开启SASL_SSL协议的9094端口的Kafka服务器客户端(77.20)连接9094端口的生产者。
thlzjfefe·2024-02-08 06:29

Install Kafka on Ubuntu 16

0准备模拟生产环境，安装Kafka，需要最少三台机器，如下主机名IPKafka-110.0.0.5Kafka-210.0.0.6Kafka-310.0.0.7Kafka是使用scala编写的运行与jvm
华阳_3bcf·2024-02-08 04:27

消息队列使用的四种场景介绍

使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ。二、消息队列应用场景以下介绍消息队列在实际应用中常用的使用场景。
Bin哥厉害7·2024-02-08 03:19

阅读《极客时间 | Kafka核心技术与实战》（一）【Kafka入门】

阅读《极客时间|Kafka核心技术与实战》为什么要学习Kafka消息引擎系统ABC一篇文章带你快速搞定Kafka术语我应该选择哪种Kafka？
_蓝天IT_·2024-02-08 01:13

2021，Java最全的分布式面试题合集附答案，共2w字！

分布式分为分布式缓存（Redis）、分布式锁（Redis或Zookeeper）、分布式服务（Dubbo或SpringCloud）、分布式服务协调（Zookeeper）、分布式消息队列（Kafka、RabbitMq
码农突围·2024-02-07 21:52

玩转RabbitMq

从消息组件来分类(两类):1.JMS组件:ActiveMq(慢)2.AMQP组件:协议组件(性能高):两个主要的开源项目|-RabbitMq==>速度快(十年加的一款产品)|-Kafka==>大数据时代产物
dreamer_0137·2024-02-07 21:51

SpringBoot集成Kafka

引入Kafka依赖org.springframework.kafkaspring-kafka修改配置文件spring:kafka:bootstrap-servers:127.0.0.1:9092,127.0.0.1
DanceDonkey·2024-02-07 20:41

SpringBoot集成kafka收发消息

传递消息为对象目前springboot整合后的kafka，因为序列化器是StringSerializer，这个时候如果需要传递对象可以有两种方式方式一：可以自定义序列化器，对象类型众多，这种方式通用性不强
慕容潇湘·2024-02-07 20:41

Springboot 集成KafkaAdmin

基础知识点(256条消息)看完这篇Kafka，你也许就会了Kafka_心的步伐的博客-CSDN博客需要注意消费者offset的配置，生产者ackdocker安装kafka和zookeeper记得修改ip
试验者·2024-02-07 20:10

Kafka整理

常用消息中间件对比Kafka是LinkedIn开源的分布式发布-订阅消息系统，目前归属于Apache定级项目。
瑜骐·2024-02-07 19:08

4、Kafka消费者-从Kafka读取数据

（2）Kafka两种模型提供单一消费者模型：消费者组。消费者用组名标记自己。Topic上消息发给此组中一个消费者。1）所有消费者在一个组中，变成队列。2）不同的组中，变成发布-订阅。
hedgehog1112·2024-02-07 19:04

日志收集系统ELK+kafka部署

日志收集系统ELK+kafka部署文章目录日志收集系统ELK+kafka部署一、系统准备1.1部署简介1.2升级内核1.3内核优化1.4安装NTP服务1.5关闭swap分区二、部署ISCSI2.1配置数据网络
MappleZF·2024-02-07 13:47

2020-11-23

Kafka-server启动报错ERRORProcessorgotuncaughtexception.ERRORProcessorgotuncaughtexception.
北大荒码农·2024-02-07 12:33
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他