Kafka原理解析

Kafka服务端之网络模型

[TOC]在开始介绍Kafka服务端的代码之前，先从整体上对其架构了解一下。KafkaServer的架构如图4-1所示。
tracy_668·2024-01-12 03:42

分布式消息Kafka

Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能，但具有自己独特的设计。这个独特的设计是什么样的呢？
kuntoria·2024-01-12 01:15

数据同步工具chunjun(flinkx)-1.12.7 使用tips

并且记录与官网描述不符的地方，以减少学习成本1、在编写json的时候推荐使用在线json编辑器：2、类似MySQLMySQL这种需要编写带jdbcUrl的任务，注意reader和writer中jdbcUrl类型不一致3、以kafka
省略号的搬运工·2024-01-12 01:36

Vue 3 最详细的Reactivity 数据响应式原理解析

Vue3如火如荼，与其干等，不如花一个下午茶的时间来看下最新的响应式数据是如何实现的吧。在本文中，会写到vue3的依赖收集和proxy数据代理，以及副作用(effect)是如何进行工作的。基本差不多了，图有点小丑，也可以看比人比较全的图。QAQ前言好久没有接触Vue了，在前几天观看尤大的直播时谈论对于看源码的一些看法，是为了更好的上手vue?还是想要学习内部的框架思想？国内前端：面试，面试会问。在
前端劝退师·2024-01-12 01:56

kafka查看Topic列表及消费状态等常用命令

本文中的操作均基于kafka_1.3.3.0，且所有命令经过实际验证。2|0常用工具新建Topic.
码农九珍·2024-01-12 00:45

Kafka - Topic 消费状态常用命令

/kafka-topics--zookeeper166.188.xx.xx--create--topicflink_source--partitions1--replication-factor1replication-factor
放羊的牧码·2024-01-12 00:13

消息队列之推还是拉，RocketMQ 和 Kafka 是如何做的？

今天我们就来谈谈推拉模式，并且再来看看RocketMQ和Kafka是如何做的。推拉模式首先明确一下推拉模式到底是在讨论消息队列的哪一个步骤，一般而言我们在
yes的练级攻略·2024-01-12 00:55

1. kafka是什么

如果说谁最有资格定义kafka是什么，那么肯定是官方文档：ApacheKafka®isadistributedstreamingplatform.官方还对流平台进行了定义--流平台有三大关键能力（Astreamingplatformhasthreekeycapabilities
阿飞的博客·2024-01-12 00:47

问题解答：SAP UI5 应用设置禁止被其他应用嵌入运行的工作原理解析

本教程之前的文章解答了我的知识星球里朋友提出的问题：如何禁止SAPUI5应用被iframe嵌入到另一个前端页面并运行的设置：SAPUI5应用开发教程之一百八十-如何给SAPUI5应用设置背景图片也就是在SAPUI5应用的index.html文件里，添加一行代码：data-sap-ui-frameOptions='deny'之后有朋友提出疑问，并扔给我了下面这个网站：https://develope
汪子熙·2024-01-11 22:45

Flink 源码之 KafkaSource

针对这个新架构，Flink社区新推出了新的Kafkaconnector-KafkaSource。老版本的实现
AlienPaul·2024-01-11 21:53

初探并发包的基石AQS

CountDownLatch、ReentrantLock、Semaphore、和ReentrantReadWriteLock等包中都是直接或间接的继承了AQS，所以AQS也可以称之为JUC的基石AQS原理解析在
砌月东谷·2024-01-11 21:43

RabbitMQ入门到实战——基础篇

调用链超长，可改成异步MQ技术对比kafka日志收集RabbitMQ整体架构快速入门交换机只负责路由消息，没有消息保存能⼒发信息前，queue需要binding绑定交换机数据隔离给每个项目创建自己的用户
伏尔加河的卷毛·2024-01-11 21:37

常见5种消息队列介绍及入门教程ActiveMQ、kafka、RabbitMQ等

消息队列是分布式应用间交换信息的重要组件，消息队列可驻留在内存或磁盘上,队列可以存储消息直到它们被应用程序读走。通过消息队列，应用程序可以在不知道彼此位置的情况下独立处理消息，或者在处理消息前不需要等待接收此消息。所以消息队列可以解决应用解耦、异步消息、流量削锋等问题，是实现高性能、高可用、可伸缩和最终一致性架构中不可以或缺的一环。现在比较常见的消息队列产品主要有ActiveMQ、RabbitMQ
程序员面试吧·2024-01-11 21:37

ActiveMQ消费消息原理解析

ActiveMQ消费消息有两种方式。一种是使用同步阻塞的MessageConsumer.receive()方法；另一种是使用消息监听器MessageListener。这里需要注意的是，在同一个session下，只能选择其中一种方式。消费消息流程图消费消息源码分析ActiveMQMessageConsumer.receive，消费端同步接收消息的源码入口：publicMessagereceive()
匠丶·2024-01-11 19:52

Kafka 除了用作消息队列还能干吗？

Kafka除了用作消息队列还能干吗？本文转自公众号ByteByteGo，如有侵权，请联系，立即删除Kafka最初是为大规模处理日志而构建的。
xwhking·2024-01-11 19:55

KAFKA高级应用

kafka高级应用一些kafka的基础使用以及说明请参考上一篇文章kafka的基础入门。这篇文章主要是写kafka的一些高级特性、存储结构以及原理。
竺竺牧牧·2024-01-11 18:11

KAFKA基本使用

Kafka基础入门1.kafka定义kafka以前的定义是一个分布式的基于发布订阅的消息队列，现在的kafka的定义已经是一个分布式的流处理平台，用于数据通道处理，数据流分析，数据集成等现在消息队列只是
竺竺牧牧·2024-01-11 18:10

Kafka集群部署 (KRaft模式集群)

KRaft模式是Kafka在3.0版本中引入的新模式。KRaft模式使用了Raft共识算法来管理Kafka集群元数据。Raft算法是一种分布式共识算法，具有高可用性、可扩展性和安全性等优势。
野猪佩挤·2024-01-11 17:02

《PySpark大数据分析实战》-27.数据可视化图表Pyecharts介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-11 16:21

【算法Hot100系列】解数独

推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,kafka,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂·2024-01-11 15:55

Linux搭建Kafka详细一步一步指南(linux启动kafka脚本)

一、下载到kafka的官网，去下载想用的kafka包：http://kafka.apache.org/downloads我这里下载的是：kafka_2.12-3.4.1.tgz再将安装包传送到服务器并解压
雾里看花_·2024-01-11 15:48

Laravel 使用rdkafka_laravel详细教程（实操避坑）

一、选择rdkafka首先要看版本兼容问题，我的是Laravel5.6，PHP是7.3.13，所以需要下载兼容此的rdkafka，去Packagist搜索kafka，我用的是Packagist选择里面0.10.5
雾里看花_·2024-01-11 14:07

【MQTT】MQTT协议与指令下发；MQTT与Kafka比较

LastWillandTestament（遗嘱消息）：6.适用场景和优势：7.消息格式：8.安全性：9.开源实现和协议版本：二、指令下发指令下发流程三、使用MQTT实现指令下发具体步骤代码案例四、MQTT数据和数据库数据五、MQTT和Kafka
嘚嘚嘚嘚嘚嘚哒·2024-01-11 14:35

【Kafka每日一问】Kafka重平衡逻辑是什么样的?

在Kafka中，消费者重平衡（ConsumerRebalance）是指消费者加入或退出消费者组时，以及消费者组内的消费者发生宕机、重启等异常情况时，通过重新分配分区（Partition）来实现消费者负载均衡的过程
jianjun_fei·2024-01-11 14:03

分布式消息服务kafka

分布式消息队列DMS什么是消息中间件？消息中间件是分布式系统中重要的组件，本质就是一个具有接收消息、存储消息、分发消息的队列，应用程序通过读写队列消息来通信。例如：在淘宝购物时，订单系统处理完订单后，把订单消息发送到消息中间件中，由消息中间件将订单消息分发到下游子系统(如物流、积分、通知等)，订单系统和下游子系统通过消息中间件进行通信，减少他们之间的耦合，增加系统稳定性。主流的消息中间件有哪些？类
单某人是猪·2024-01-11 14:31

红黑树原理解析以及Java实现

转自：https://blog.csdn.net/u010853261/article/details/54312932红黑树本文的主要内容：1、红黑树的基本概念以及最重要的5点规则。2、红黑树的左旋转、右旋转、重新着色的原理与Java实现；3、红黑树的增加结点、删除结点过程解析；1.红黑树的基本概念与数据结构表示首先红黑树来个定义：红黑树定义：红黑树又称红-黑二叉树，它首先是一颗二叉树，它具体二
xk_一步一步来·2024-01-11 13:45

Spring原理-7.切点与切面

作者简介：大家好，我是爱吃芝士的土豆倪，24届校招生Java选手，很高兴认识大家系列专栏：Spring原理、JUC原理、Kafka原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪·2024-01-11 13:09

JS案例25-addEventListener( )事件原理解析

源码：赋诗varbtn=document.getElementsByTagName("button")[0];//btn.addEventListener("click",fn1);//btn.addEventListener("click",fn2);fn("click",fn1,btn);fn("click",fn2,btn);fn("click",fn3,btn);functionfn1()
hi__world·2024-01-11 13:17

Apache Flink 和 Paimon 在自如数据集成场景中的使用

业务背景自如目前线上有基于Hive的离线数仓和基于Flink、Kafka的实时数仓，随着业务发展，我们也在探索引入湖仓一体的架构更好的支持业务，我们对比了Iceberg、Hudi、Paimon后，最终选择
Apache Flink·2024-01-11 13:09

Golang实现Kafka消息发送、接收

一：核心概念kafka是消息中间件的一种，是一种分布式流平台，是用于构建实时数据管道和流应用程序。具有横向扩展，容错，wickedfast（变态快）等优点。
姚文08·2024-01-11 08:21

Kafka测试初探【Go】

上周分享了Kafka性能测试初探的Java版本，有读者留言说太简单，内容比较水。这里澄清一下，是我学得比较水。
爱吃 香菜·2024-01-11 08:50

go kafka入门教程，docker启动kafka环境

gokafka入门教程，dockerkafka本地环境搭建在本文中，您将学习：使用docker启动本地环境kafka使用go-kafka链接本地kafka进行消息生产和消费获取本文代码https://github.com
司darling·2024-01-11 08:47

不背锅运维：消息队列概念、kafka入门、Kafka Golang客户端库

消息队列是什么消息队列是一种在应用程序之间进行通信的技术，允许将消息从一个应用程序发送到另一个应用程序，而无需明确的连接这些应用程序。消息队列中的消息被存储在一种称为队列的数据结构中，这些消息在队列中保留，直到被消费者接收。这使得消息的发送者和接收者能够异步地通信，而不必等待对方的响应，从而提高了系统的可伸缩性和弹性。消息队列还可以通过实现各种模式（例如发布/订阅模式、请求/响应模式等）来支持不同
不背锅运维·2024-01-11 08:46

Kafka(Go)教程(一)---通过docker-compose 安装 Kafka

本文记录了如何通过docker-compose快速启动kafka，部署一套开发环境。1.概述Kafka是由Apache软件基金会旗下的一个开源消息引擎系统。
lililidahaoren·2024-01-11 08:43

28.windows安装kafka，Go操作kafka示例（sarama库）

文章目录一:打开Kafka官网进行下载Kafka二:下载完毕之后进行解压三：三、启动Zookeeper四：启动Kafka五:测试kafka1.创建topic2.创建生产者生产数据3.创建消费者消费数据4
百里守约学编程·2024-01-11 08:11

kafka的搭建

kafka的搭建一、kafka介绍kafka是一个分布式数据流平台，可以运行在单台服务器上，也可以在多台服务器上部署形成集群。
Bob drudgery·2024-01-11 08:07

依赖Kafka的Go单元测试例解

Kafka[1]是Apache基金会开源的一个分布式事件流处理平台，是Java阵营(最初为Scala)中的一款杀手级应用，其提供的高可靠性、高吞吐量和低延迟的数据传输能力，让其到目前为止依旧是现代企业级应用系统以及云原生应用系统中使用的重要中间件
Tony Bai·2024-01-11 08:05

Zookeeper+Kafka概述

一Zookeeper1.1Zookeeper定义Zookeeper是一个开源的、分布式的，为分布式框架提供协调服务的Apache项目。1.2Zookeeper特点Zookeeper：一个领导者（leader），多个跟随者（Follower）组成的集群。Zookeeper：集群中只要有半数以上节点存活，Zookeeper集群就正常服务，所以Zookeeper适合安装奇数台服务器。全局数据一致：每个S
峡谷在逃戚风·2024-01-11 07:02

Kafka事务

Kafka事务是2017年Kafka0.11.0.0引入的新特性。类似于数据库的事务。Kafka事务指的是生产者生产消息以及消费者提交offset的操作可以在一个原子操作中，要么都成功，要么都失败。
无语堵上西楼·2024-01-11 07:02

kafka基本操作

Kafka中所有的消息都是保存在主题中，要生产消息到Kafka，首先必须要有一个确定的主题。
无语堵上西楼·2024-01-11 07:32

Java编程操作Kafka

同步生产消息到Kafka中接下来，我们将编写Java程序，将1-100的数字消息写入到Kafka中。
无语堵上西楼·2024-01-11 07:32

Kafaka之架构

Kafka重要概念broker一个Kafka的集群通常由多个broker组成，这样才能实现负载均衡、以及容错broker是无状态（Sateless）的，它们是通过ZooKeeper来维护集群状态一个Kafka
无语堵上西楼·2024-01-11 07:28

基于Flume、Kafka和Storm实现企业大数据平台的实时数据采集

近年来，随着企业信息化建设的飞速发展，大数据应用的问题越来越备受关注。很多企业投入大量的人力、物力和财力建设企业大数据平台，平台建设工作涵盖数据采集、数据处理、数据存储、数据服务、数据展示以及数据质量管理各个环节。而数据采集作为企业大数据平台建设的首要环节，是企业大数据平台建设的根本所在，如果数据采集环节技术体系架构可靠性不高、稳定性不强且不易扩展，企业大数据平台建设就失去了意义。尤其是面对数据量
皮皮杂谈·2024-01-11 07:26

分布式必学的消息中间件---Kafka篇（想不出好名字了＞ ＜）

12.Kafka篇文章目录12.Kafka篇12.1什么是消息中间件？12.2kafka是什么？有什么作用？12.3生产者发送消息有哪些
CodingLemon.·2024-01-11 06:53

【Kafka-3.x-教程】-【六】Kafka 外部系统集成 【Flume、Flink、SpringBoot、Spark】

【Kafka-3.x-教程】专栏：【Kafka-3.x-教程】-【一】Kafka概述、Kafka快速入门【Kafka-3.x-教程】-【二】Kafka-生产者-Producer【Kafka-3.x-教程
bmyyyyyy·2024-01-11 06:50

【Kafka-3.x-教程】-【一】Kafka 概述、Kafka 快速入门

【Kafka-3.x-教程】专栏：【Kafka-3.x-教程】-【一】Kafka概述、Kafka快速入门【Kafka-3.x-教程】-【二】Kafka-生产者-Producer【Kafka-3.x-教程
bmyyyyyy·2024-01-11 06:19

【Kafka-3.x-教程】-【二】Kafka-生产者-Producer

【Kafka-3.x-教程】专栏：【Kafka-3.x-教程】-【一】Kafka概述、Kafka快速入门【Kafka-3.x-教程】-【二】Kafka-生产者-Producer【Kafka-3.x-教程
bmyyyyyy·2024-01-11 06:19

【Kafka-3.x-教程】-【三】Kafka-Broker、Kafka-Kraft

【Kafka-3.x-教程】专栏：【Kafka-3.x-教程】-【一】Kafka概述、Kafka快速入门【Kafka-3.x-教程】-【二】Kafka-生产者-Producer【Kafka-3.x-教程
bmyyyyyy·2024-01-11 06:19

【Kafka-3.x-教程】-【五】Kafka-监控-Eagle

【Kafka-3.x-教程】专栏：【Kafka-3.x-教程】-【一】Kafka概述、Kafka快速入门【Kafka-3.x-教程】-【二】Kafka-生产者-Producer【Kafka-3.x-教程
bmyyyyyy·2024-01-11 06:19

Kafka-基础(同步消息、异步消息、事务消息、分区规则、Leader选举、分区副本、分区分配策略、消息消费)

Kafka-基础Kafka是基于发布/订阅的消息队列，主要用于大数据实时处理领域，Kafka是一个开源的分布式事件流平台，被数千家公式用于高性能数据管道、流分析、数据集成、关键任务应用等消息队列类型目前在企业中比较常见的消息队列重排主要有
JolyouLu·2024-01-11 06:18
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他