Kafka知识总结

NSQ源码分析之概述

罗道文的私房菜消息队列在互联网公司使用非常普遍，因此也促使我去学习研究消息队列的原理以及细节问题；之前也有接触过消息队列，最主要就是在异步处理方面，当然消息队列还解耦，流量削峰等功能；目前消息队列产品也比较多，例如kafka
faunjoe·2024-02-13 12:29

PostgreSQL的学习心得和知识总结（一百二十八）|构建 PostgreSQL 负载测试器

目录结构注：提前言明本文借鉴了以下博主、书籍或网站的内容，其列表如下：1、参考书籍：《PostgreSQL数据库内核分析》2、参考书籍：《数据库事务处理的艺术：事务管理与并发控制》3、PostgreSQL数据库仓库链接，点击前往4、日本著名PostgreSQL数据库专家铃木启修网站主页，点击前往5、参考书籍：《PostgreSQL中文手册》6、参考书籍：《PostgreSQL指南：内幕探索》，点击
孤傲小二~阿沐·2024-02-13 12:06

dockerer-compose搭建单机clickhouse集群，工作中最新亲测能用，超详细

公司这几天让我搭建clickhouse集群，这一周我在公司的角色更像是运维人员搭建集群和服务，一个字干,另外kafka搭建点击这篇，zookeeper集群搭建点击这篇。
迷梦星河·2024-02-13 11:53

阿里云技术负责人首推：kafka从源码到实战一手掌握

2011年年初，美国领英公司（LinkedIn)开源了一款基础架构软件，以奥地利作家弗兰兹·卡夫卡(FranzKafka）的名字命名，之后LinkedIn将其贡献给Apache基金会，随后该软件于2012
java架构师联盟·2024-02-13 10:59

Flink SQL实战演练之CDC Connector

简介：公司实时项目组处理的业务数据以前是由业务团队把数据push到rabbitmq，然后我们通过flink转运到kafka，然后再做实时计算的，由于新业务逻辑变化会较大，导致推送过来的数据偶尔会出现偏差
Coder小咚·2024-02-13 10:43

Kafka 入门笔记

课程地址概述定义Kafka是一个分布式的基于发布/订阅模式的消息队列（MQ）发布/订阅：消息的发布者不会将消息直接发送给特定的订阅者，而是将发布的消息分为不同的类别，订阅者只接受感兴趣的消息消息队列消息队列应用场景
Daniel_187·2024-02-13 05:49

【架构】基于事件的 Kubernetes 弹性扩展

选择条件异步事件驱动的工作负载：KEDA特别适用于处理异步事件，如消息队列中的消息、Kafka主题中的事件等。它可以根据事件的数量和负载动态地调整工作
奔向理想的星辰大海·2024-02-13 04:05

Datax ETL工具源码研究

由于公司数据共享交换产品中需要用到数据交换工具，所以对数据交换工具进行了大量的研究，目前比较流行的数据交换工具有Kittle、Sqoop、KafkaConnect、DataX；以下是个人的一点比对结果：
Spring1985·2024-02-13 01:57

必须知道的C语言知识细节：左值和右值知识总结

C语言中左值和右值概念是来自赋值或复合赋值表达式。初学者会很容易迷惑，这里给出这两个概念总结。对于赋值表达式E1=E2，其中E1必须是可修改的左值，E2是右值。左值：简写lvalue,leftvalue右值：简写rvalue,rightvalue例如：intm=1;很明显m是左值，1是右值。左值是指向内存区域的对象，左值可以出现赋值表达式的左边或右边，当左值出现的右边时，自动转换为右值使用。右值是
明天会比今天更好·2024-02-12 22:52

三角函数章节大总结

【第四章知识结构图】一、基础知识总结1.1诱导公式1.1.1A组$$sin(a+2k*pi)=sina$$$$cos(a+2k*pi)=cosa$$$$tan(a+2k*pi)=tana$$1.1.2B
·2024-02-12 21:24

Ajax知识总结

流程：创建ajax引擎对象声明事件监听：监听ajax对象的属性readystate的值，一旦readystate的值发生改变就会触发声明的函数的执行ajax的状态码readyState的值：0:表示ajax引擎对象创建1:表示请求创建但是未发送ajax.open("get","my");2:请求发送ajax.send(null);3:请求处理完毕，正在接收响应状态4:响应内容接收完毕(重要状态)a
赌未来_e1e8·2024-02-12 11:27

Structured Streaming

StructuredStreaming和SparkSQL、SparkStreaming关系二、编写StructuredStreaming程序的基本步骤（一）实现步骤（二）运行测试三、输入源（一）File源（二）Kafka
Francek Chen·2024-02-12 11:44

Apache Kafka内核深度剖析

目前来说Kafka已经非常稳定，并且逐步应用更加广泛，已经算不得新生事物，但是不可否认Kafka一枝独秀如同雨后春笋，非常耀眼，今天我们仔细分解一下Kafka，了解一下它的内幕。以下
ThoughtWorks·2024-02-12 10:36

Oracle的学习心得和知识总结（三十二）|Oracle数据库数据库回放功能之论文四翻译及学习

目录结构注：提前言明本文借鉴了以下博主、书籍或网站的内容，其列表如下：1、参考书籍：《OracleDatabaseSQLLanguageReference》2、参考书籍：《PostgreSQL中文手册》3、EDBPostgresAdvancedServerUserGuides，点击前往4、PostgreSQL数据库仓库链接，点击前往5、PostgreSQL中文社区，点击前往6、OracleReal
孤傲小二~阿沐·2024-02-12 09:55

vue3初识—知识总结

看了视频的总结视频的总结前端小野森森-1·2020-7-10vue3提供了compositionAPIvue3兼容vue2，在vue3中也可以使用vue2的optionsAPIsetup函数setup中不能使用this,this指向undefined,setup中默认普通的数据不是响应式的，需要用reactive函数列举一个简单的例子，可以这样写import{ref,watch,reactive,
我就是你的语法糖️·2024-02-12 03:56

Kafka原理浅析

简介kafka是一个分布式消息队列。具有高性能、持久化、多副本备份、横向扩展能力。生产者往队列里写消息，消费者从队列里取消息进行业务逻辑。一般在架构设计中起到解耦、削峰、异步处理的作用。
long_c2b7·2024-02-12 03:45

[1132]Flink与Kafka版本对应关系

以下为Flink和Kafka的版本对照表Flink版本Kafka版本1.12.X2.4.11.11.X2.4.11.10.X2.2.11.9.X2.2.01.8.X2.0.11.7.X2.0.10.10
周小董·2024-02-12 01:47

【Flink】 Flink与Kafka版本对应关系

1.概述转载：Flink与Kafka版本对应关系转载这个主要是上次做flinkkafka版本升级，忘记记录了。
九师兄·2024-02-12 01:17

【Flink异常】flink与kafka版本匹配: NetworkClient$DefaultMetadataUpdater.handleServerDisconnect

文章目录1.异常详情2.报错原因及解决办法3.Flink与Kafka的版本匹配1.异常详情使用flink1.11的kafkaconnector读取0.9版本的kafka报错：[10:49:12:644]
search-lemon·2024-02-12 01:17

Flink Maven项目兼容多版本Kafka

主要有两种方法可以解决：修改jar包内部的包名或者使用自定义classloaderFlink需要导入kafka-clients来支持对kafka的生产和消费。
weixin_30855099·2024-02-12 01:47

zero-copy

zero-copy零拷贝在linux上kafka使用了两种手段实现零拷贝：mmap写入数据阶段sendfile读取数据阶段-其实通过transferTo()调用系统的sendfileOS中的零拷贝在没有
甜甜起司猫_·2024-02-12 01:21

实现订单到期关闭

目录一、被动关闭二、定时任务三、JDK自带的DelayQueue四、Netty的时间轮五、Kafka的时间轮六、RocketMQ延迟消息七、RabbitMQ死信队列八、RabbitMQ插件九、Redis
雾里有果橙·2024-02-11 22:56

clickhouse之表引擎

对于ck来说,目前位置包含了以下部分引擎:1.集成外部系统的表引擎,支持方式有kafka,JDBC,ODBC,HDFS等2.合并树家族(最为常用且重要)3.日志
落花流水i·2024-02-11 22:53

使用clickhouse kafka表引擎消费kafka写入clickhouse

系列文章目录1：seatunnel消费kafka数据写入clickhouse文章目录系列文章目录文章目录前言1.创建kafka引擎表2.创建clickhouseMergeTree表3.创建kafka物化视图写入结构表三
冰帆<·2024-02-11 22:22

SpringCloud微服务实战——搭建企业级开发框架（三十六）：使用Spring Cloud Stream实现消息中间件功能

  在以往消息队列的使用中，我们通常使用集成消息中间件开源包来实现对应功能，而消息中间件的实现又有多种，比如目前比较主流的ActiveMQ、RocketMQ、RabbitMQ、Kafka，Stream等
·2024-02-11 17:42

理财小知识总结

主动收入：通过向公司出售我们的时间和精力而获得的工作。被动收入：也叫“睡后收入”，啥也不用干睡觉就能有的收入。可能是出租房子产生的租金，或者是股票、基金赚的钱。资产:给你带来收入和价值的一切东西。资产的三个用途:卖钱、投资和使用。负债：欠了别人，需要偿还的。资产＝负债＋所有者权益所有者权益就是资产中真正属于你的那一部分，比如你花20块钱买了一只老母鸡，其中1块钱是向小明借的，老母鸡是你的资产，但是
邱晨程·2024-02-11 17:08

干货|为什么Kafka不支持读写分离

在Kafka中，生产者写入消息、消费者读取消息的操作都是与leader副本进行交互的，从而实现的是一种主写主读的生产消费模型。
Java机械师·2024-02-11 15:13

Kafka概念和基本架构

1、Kafka介绍Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多生产者、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx
悠然予夏·2024-02-11 12:38

kafka基础概念分享

一、目录1、MQ基础概念2、Kafka数据存储设计3、Kafka生产者设计4、Kafka消费者设计5、Kafka提交与移位6、Kafka消息保留策略二、MQ概念MQ是messagequeue,消息队列，
小豆腐和小豆浆·2024-02-11 12:38

kafka学习之基本概念

一、kafka常用基本概念producer：生产者，生产并发送消息的一方。consumer：消费者，接收消费消息的一方。topic：一类消息的集合。
侧身左睡·2024-02-11 12:08

Kafka概念类总结

Kafka概念类总结一、kafka定义二、优缺点优点缺点三kafka名词四consumer和topic五Kafka存储结构六Producer分区partition策略七Consumer消费方式partition
吃再多糖也不长胖·2024-02-11 12:38

kafka基本概念

绪论Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。
L.S.V.·2024-02-11 12:38

Elasticearch和Kafka概念对比

1、概念对比kafka集群包含多个broker，每个broker都是一个kafka实例。每个服务器会有多个broker，我们暂且认为每个服务器包含一个broker。
Yisnow.·2024-02-11 12:37

Kafka概念与安装

一、概念1.kafka主要由Producer、KafkaCluster、Consumer三部分构成2.KafkaCluster一般由多个服务器组成（至少需要2N+1，N>0），每个服务器有一个唯一的broker.id
35s·2024-02-11 12:37

kafka概念详述

【一】kafka基本概述具有发布和订阅消息流，以容错的方式记录消息流，以文件的方式来存储消息流，可以在消息发布的时候进行处理。
种棵红黑树·2024-02-11 12:37

kafka基础概念

简介Kafka是一个分布式、支持分区的（partition）、多副本的（replication）的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域。
大河院开心鸭·2024-02-11 12:37

Kafka概念图

盗一张图：取自：https://sookocheff.com/post/kafka/kafka-in-a-nutshell/
豪豪君在此·2024-02-11 12:07

Kafka 概念，安装，常用命令（一）

1、什么是KafkaKafka可以看成一个流平台，这个平台上可以发布和订阅数据流，并把他们保存起来，进行处理。
响彻天堂丶·2024-02-11 12:06

Kafka

第一章：Kafka的概述1.1、kafka是一个分布式的基于发布/订阅模型的消息队列，主要用于大数据实时处理领域。
小白鼠捉大猫咪·2024-02-11 12:06

Java面试题之：Kafka 概念

Java面试题之：Kafka概念Kafka概念Kafka概念  Kafka是一种高吞吐量、分布式、基于发布/订阅的消息系统，最初由LinkedIn公司开发，使用Scala语言编写，目前是Apache的开源项目
faramita_of_mine·2024-02-11 12:06

kafka的概念

它是Kafka中用于组织和存储消息的基本单元。一个Topic可以被看作是一个消息发布的地方，生产者将消息发布到一个特定的Topic，而消费者则订阅一个或多个Topic以接收消息。
可爱的小小小狼·2024-02-11 12:35

离线数仓（一）【数仓概念、需求架构】

前言今天开始学习数仓的内容，之前花费一年半的时间已经学完了Hadoop、Hive、Zookeeper、Spark、HBase、Flume、Sqoop、Kafka、Flink等基础组件。
让线程再跑一会·2024-02-11 11:58

使用 Kafka 和 MongoDB 进行 Go 异步处理

我还添加了Kafka为消息层服务，这样微服务就可以异步处理它自己关心的东西了。下面是这个使用了两个微服务的简单的异步处理示例的上层架构图。
跨过山河大海·2024-02-11 11:56

Redis与Kafka达成高并发更新库存与数据一致性保证

一.并发更新方案采用在Redis中判断并更新库存（库存值可增可减），由Redis保证库存的正确性，由Kafka与MongodDB数据库事务保证最终的一致性。
greatsharp·2024-02-11 11:56

消息队列原理和选型：Kafka、RocketMQ 、RabbitMQ 和 ActiveMQ

我有时会问同事，为啥你用RabbitMQ，不用Kafka，或者RocketMQ呢，他给我的回答“因为公司用的就是这个，大家都这么用”，如果你去面试，直接就被Pass，今天这篇文章，告诉你如何回答。
90后小伙追梦之路·2024-02-11 11:56

Kafka&Kafka manager本地搭建

1、brewinstallkafka（kafka依赖zookeeper）：image.png2、启动zookeeper&Kafka：如上述提示：zookeeper-server-start/usr/local
hellokitty小丸子·2024-02-11 10:57

数据采集系统的优化实战

1概述在历时2个月的不断优化过程中，将数据采集系统的处理能力(kafka一个topic)从2.5万提升到了10万，基本符合对下一次峰值的要求了。
易企秀工程师·2024-02-11 10:09

I/O Zero Copy是什么？看完这篇你绝对会了

前文我们介绍了JavaI/O的底层原理，想必大家都知道类似Netty、KafKa等大数据量高吞吐框架都会提到一个概念ZeroCopy（零拷贝），这是什么技术呢，今天我们来学习下。
老司机de程序人生·2024-02-11 09:28

RabbitMQ学习笔记

RabbitMQ笔记主流MQ简单了解衡量标准服务性能数据存储集群架构ActiveMQ适用于中小型企业，但在高并发情况下效率较低，不适用与并发Kafka高吞吐、速度快，但不支持事务，不能保证消息的可靠性一般用于日志传输
努力变优秀的Z·2024-02-11 06:05

RabbitMQ

MQ衡量指标：服务性能、数据存储、集群架构二、KafkaKafka是LinkedIn开源的分布式发布-订阅消息系统，目前归属于Apache顶级项
~Maple~·2024-02-11 06:05
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他