深入理解Kafka

深入浅出理解kafka原理系列之：kafka消费者参数设置

深入浅出理解kafka原理系列之：kafka消费者参数设置1.max.poll.records2.max.poll.interval.ms3.enable.auto.commit4.heartbeat.interval.ms5
最笨的羊羊·2024-02-09 15:10

Kafka系列之：Kafka集群同时设置基于时间和日志大小两种方式保存Topic的数据

Kafka系列之：Kafka集群同时设置基于时间和日志大小两种方式保存Topic的数据一、基于日志大小二、基于时间大小三、参数设置四、设置命令一、基于日志大小"log.retention.bytes"是
最笨的羊羊·2024-02-09 15:09

【C语言】C实现C++类（以String类为例）

掌握C语言有助于我们学习其他编程语言，甚至可以深入理解如何提高开发的效率。C++、C#、Java、P
Yeah__binbin·2024-02-09 14:46

初识kafka

[TOC]Kafka起初是由Linkedin公司采用Scala语言开发的一个多分区、多副本且基于ZooKeeper协调的分布式消息系统，现己被捐献给Apache基金会。
tracy_668·2024-02-09 14:07

69.Kudu、Spark2、Kafka安装—CDH

69.1演示环境介绍CDH集群运行正常操作系统版本为：CentOS6.5CM和CDH版本为：5.12.1CM管理员为：admin用户操作系统用户为：root用户69.2操作演示Kudu安装Kudu的Parcel部署下载Kudu的Parcel包：http://archive.cloudera.com/kudu/parcels/5.12.1/KUDU-1.4.0-1.cdh5.12.1.p0.10-e
大勇任卷舒·2024-02-09 14:55

spring boot 怎样集成kafka

SpringBoot可以使用SpringforApacheKafka库来集成Kafka。
low sapkj·2024-02-09 12:34

Spring Boot 集成 Kafka

SpringBoot作为主流微服务框架，拥有成熟的社区生态。市场应用广泛，为了方便大家，整理了一个基于springboot的常用中间件快速集成入门系列手册，涉及RPC、缓存、消息队列、分库分表、注册中心、分布式配置等常用开源组件，大概有几十篇文章，陆续会开放出来，感兴趣同学请提前关注&收藏消息通信有两种基本模型，即发布-订阅（Pub-Sub）模型和点对点（PointtoPoint）模型，发布-订阅
互联网全栈架构·2024-02-09 12:34

ELK环境搭建

Windows8.1elasticsearch：5.5.1logstash：2.0.0kibana：5.5.1注：由于实验性搭建，选择windows系统，但选择Linux系统效果更佳二、部署方案1.ELK+Redis2.ELK+Kafka
枯木风·2024-02-09 12:08

深入理解拓扑排序：从基础到应用

深入理解拓扑排序：从基础到应用I.引言A.拓扑排序的定义与背景拓扑排序是图论中一项重要的算法，主要用于处理有向图中节点之间的依赖关系。
一休哥助手·2024-02-09 09:56

【MySQL】：深入理解并掌握DML和DCL

屿小夏：个人主页个人专栏：MySQL从入门到进阶莫道桑榆晚，为霞尚满天！文章目录前言一.DML1.1添加数据1.2修改数据1.3删除数据二.DCL2.1管理用户2.2权限控制前言在数据库管理中，数据操作语言（DML）和数据控制语言（DCL）是至关重要的概念。DML使我们能够对数据库中的数据进行增加、修改和删除操作，而DCL则允许我们管理用户和控制数据库的访问权限。本文将深入探讨这两个关键领域的核心
屿小夏·2024-02-09 09:20

深入理解ES的倒排索引

目录数据写入过程词项字典termdictionary倒排表postinglistFOR算法RBM算法ArrayContainerBitMapContainer词项索引termindex在Elasticsearch中，倒排索引的设计无疑是惊为天人的，下面看下倒排索引的结构。倒排索引分为词项索引【termindex】、词项字典【termdictionary】、倒排表【postinglist】数据写入过
林犀居士·2024-02-09 08:38

腾讯AI大佬详解Apache Kafka实战

内容简介1.ApacheKafka简介：ApacheKafka是由Apache软件基金会开发的一个开源消息系统项目，由Scala写成。Kafka最初是由LinkedIn开发，并于2011年初开源。
笑起来真好看LQQ·2024-02-09 08:53

30天自制操作系统（第10-11天）

按照《深入理解linux内核》的介绍，内存页大小为4k。所以下面构建申请和释放4k大小的内存：1.申请内存的大小必须是4k的倍数，所以需
Amnesiac_seven·2024-02-09 07:03

30天自制操作系统（第12天）

第12天定时器（1）12.1使用定时器根据定时器分配的中断号为IRQ0（《深入理解linux内核》P158页），将中断周期设定为11932，换算成16进制为0x2e9c。
Amnesiac_seven·2024-02-09 07:03

Kafka消息传递的可靠性

kafka拥有以下可靠性保证：可以保证分区消息的顺序。
阿猫阿狗Hakuna·2024-02-09 07:14

SQL条件判断语句嵌套window子句的应用【易错点】--HiveSql面试题25

数据分析4小结0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
莫叫石榴姐·2024-02-09 06:00

HiveSQL——条件判断语句嵌套windows子句的应用

0需求分析需求：表如下user_idgood_namegoods_typerk1hadoop1011hive1221sqoop2631hbase1041spark1351flink2661kafka1471oozie108
爱吃辣条byte·2024-02-09 06:58

【前端】NodeJS 部署到 Window 并以 EXE 文件运行

文章目录前言基本思路基本使用安装打包工具配置打包工具打包客户端代码服务端配置网站配套项目地址效果视频前言前面介绍了NodeJs服务器连接数据库的基本操作，为了满足企业人可以便捷地使用，不必深入理解源代码以及复杂的部署
hjhcos·2024-02-09 06:16

linux 消息发布工具-kafka

下载地址：https://mirrors.cnnic.cn/apache/kafka一、系统构成在整个消息发布流程中，kafka作为一个中间件对系统的运行提供了解耦、削峰、异步处理的能力。
强壮的向阳花·2024-02-09 05:53

【云原生进阶之PaaS中间件】第三章Kafka-4.3.2-broker网络模型

1kafka网络模型运行原理kafkabroker在启动的时候，会根据你配置的listeners初始化它的网络组件，用来接收外界的请求，这个listeners你可能没配置过，它默认的配置是listeners
江中散人·2024-02-09 05:19

【云原生进阶之PaaS中间件】第三章Kafka-4.3.3-broker的leader和follower工作机制

1leader和follower1.1kafka的副本kafka副本的作用就是提高数据的可靠性，系统默认副本数量是1，生产环境一般配置数量是2个，保证数据可靠性；否则副本太多会增加磁盘的存储空间，增加网络上的数据传输
江中散人·2024-02-09 05:19

【免费培训】Python从入门到进阶（直播：2023.5.7）

课程背景Python粉们都知道，想要学好高大上的Python大法，首要一步就是熟悉Python编程的基础知识，深入理解何为面向对象的编程，理解函数定义、模块、语法等知识。
茗创科技·2024-02-09 05:10

2024最新Java面试题及答案！（ 2024年 1 月最新版，持续更新）

面试题大全~这套互联网Java工程师面试题包括了：Java面试、Spring、JVM、MyBatis、Redis、MySQL、并发编程、微服务、Linux、Springboot、SpringCloud、MQ、Kafka
程序一逸·2024-02-09 05:00

【c语言】深入理解指针（2）

1.字符指针变量可以利用字符指针存放字符数组来间接存放字符串。intmain(){chararr[10]="abcdef";char*p=arr;printf("p=%s\n",p);return0;}那我们可不可以直接给字符指针存放字符串呢？intmain(){char*p1="abcdef";printf("p1=%s\n",p1);return0;}我们来看一下结果：可以看到是可以直接给字符
Code Warrior·2024-02-09 05:55

深入理解Java内存模型

CPU与缓存一致性问题我们都应该知道线程是CPU调度的最小单位，线程中的字节码指令最终都是在CPU中执行的。CPU在执行的时候，免不了要和各种数据打交道，而Java中所有数据都是存放在主内存（RAM）当中的，这一过程可以参考下图：但是随着CPU技术的发展，CPU的执行速度越来越快。而由于内存的技术并没有太大的变化，所以从内存中读取和写入数据的过程和CPU的执行速度比起来差距就会越来越大,这就导致C
Joker_Wan·2024-02-09 03:58

深入理解Netty及核心组件使用—上

目录Netty的优势为什么Netty使用NIO而不是AIO？Netty基本组件Bootstrap、EventLoop(Group)、Channel事件和ChannelHandler、ChannelPipelineChannelFutureNetty入门程序服务端代码客户端代码运行结果Netty的优势1.API使用简单，开发门槛低。2.功能强大，预置了多种编解码功能，支持多种主流协议。3.定制能力强
山鸟与鱼！·2024-02-09 01:36

Kafka 入门介绍

目录一.前言二.使用场景三.分布式的流平台四.Kafka的基本术语4.1.主题和日志（Topic和Log）4.2.分布式（Distribution）4.3.异地数据同步技术（Geo-Replication
流华追梦·2024-02-09 00:43

Nginx: a little source code

Nginx源码比较多，本文只看几个重要的模块，更详细的内容请参考《深入理解nginx模块开发与架构》，这本书内容很全，本文只能是跟在后面做一点东施效颦的解读了。
SakamataZ·2024-02-08 22:20

Elasticsearch: 非结构化的数据搜索

singleDoc#《olap/clickhousekeeper一致性协调服务》)，kafka->redpanda(https://www.
SakamataZ·2024-02-08 22:48

Kafka实战(五) - Kafka的秘技"坂本"之争

只有顺应版本,才能成就王者不败神话也是能否用好Kafka的关键。
JavaEdge·2024-02-08 20:50

消息中间件：Puslar、Kafka、RabbigMQ、ActiveMQ

消息队列消息队列：它主要用来暂存生产者生产的消息，供后续其他消费者来消费。它的功能主要有两个：暂存（存储）队列（有序：先进先出从目前互联网应用中使用消息队列的场景来看，主要有以下三个：异步处理数据系统应用解耦业务流量削峰消息队列模型点对点模式多个生产者可以向同一个消息队列发送消息，一个消息只能被一个消费者消费，在被消费成功后，这条消息会被移除。如果消费者处理消息失败了，那么这条消息会重新被消费。发
Kingairy·2024-02-08 18:33

【C语言】深入理解指针

目录1.字符指针2.指针数组3.数组指针4.数组传参与指针传参一维数组传参二维数组传参一级指针传参二级指针传参5.函数指针6.函数指针数组7.指向函数指针数组的指针（了解即可）8.回调函数回调函数的应用：库函数qsort模拟实现库函数qsort1.字符指针允许用字符串来初始化字符指针char*p="abcdef"这个语句是正确的，他表示把后面字符串首元素地址放到指针变量p里面去。其中abcdef是
米糕.·2024-02-08 17:39

一探究竟，详解Kafka生产者和消费者的工作原理！

主题和日志对于每个主题，Kafka群集都会维护一个分区日志，如下所示：image.png每个分区（Partition）都是有序的(所以每一个Partition内部都是有序的)，不变的记录序列，这些记录连续地附加到结构化的提交日志中
废柴程序员·2024-02-08 17:42

常用虚拟机性能监控故障处理工具

参考文献:深入理解jvm第三版1.jpsjps作用可以列出正在运行的虚拟机进程，并显示虚拟机执行主类（MainClass，main()函数所在的类）名称以及这些进程的本地虚拟机唯一ID（LVMID，LocalVirtualMachineIdentifier
丶_62f3·2024-02-08 17:40

flink消费kafka源

后来一通折腾，发现我当时消费的配置，是用FlinkKafkaConsu
MinaLing·2024-02-08 16:14

深入理解Spark的前世今生

文章来源：https://blog.csdn.net/qq_42107047/article/details/80239094感谢大神分享~~~~~一：大数据的概述1.1Spark是什么？ Spark，是一种通用的大数据计算框架，正如传统大数据技术Hadoop的MapReduce、Hive引擎，以及Storm流式实时计算引擎等。Spark包含了大数据领域常见的各种计算框架：比如SparkCore用
闲云野鹤~~~·2024-02-08 14:01

【Spark重点难点】你以为的Shuffle和真正的Shuffle

我在B站读大学，大数据专业【Spark重点难点01】你从未深入理解的RDD和关键角色通俗解释上节课我们讲了DAGScheduler划分Stage的原理:DAGScheduler调度时会根据是否需要经过Shuffle
王知无(import_bigdata)·2024-02-08 14:00

深入理解Spark BlockManager：定义、原理与实践

深入理解SparkBlockManager：定义、原理与实践1.定义Spark是一个开源的大数据处理框架，其主要特点是高性能、易用性以及可扩展性。
涤生大数据·2024-02-08 14:57

2.Kafka生产过程

三、Kafka生产过程分析1.写入方式producer采用推（push）模式将消息发布到broker，每条消息都被追加（append）到分区（patition）中，属于顺序写磁盘（顺序写磁盘效率比随机写内存要高
chongweiLin·2024-02-08 12:56

cpp11新特性之智能指针（下）：深入理解现代cpp中的智能指针shared_ptr、unique_ptr 以及 weak_ptr

今天给大家带来的是对于shared_ptr、unique_ptr以及weak_ptr的深入理解，通过测试案例和源码剖析对这三种重要的智能指针的使用方法，注意事项以及适用范围进行了全面的总结，相信经过这些测试大家对于智能指针的理解会更上一层楼
unknown C++ beginner·2024-02-08 10:37

探索Python日志：深入理解LogRecord对象

源码分享https://docs.qq.com/sheet/DUHNQdlRUVUp5Vll2?tab=BB08J2在Python的日志系统中，LogRecord对象扮演着中心角色。每当我们在代码中使用日志记录方法，如.debug(),.info(),.warning(),.error()或.critical()，底层日志模块会创建一个LogRecord实例，该实例封装了所有与日志事件相关的信息。
web安全工具库·2024-02-08 10:49

Spark streaming batch运行时间过长问题02

继续排查发现，在用Spark读取Kafka数据之后，由于数据通过Kafka读取后是逗号分隔的字符串，但是为了解决字符串某些字段中还有逗号的问题，只能使用正则表达式匹配，导致性能过慢。
kk_io·2024-02-08 10:01

Flink Checkpoint过程

Checkpoint使用了Chandy-Lamport算法流程1.正常流式处理（尚未Checkpoint）如下图，Topic有两个分区，并行度也为2，根据奇偶数我们假设任务从Kafka的某个Topic中读取数据
orange大数据技术探索者·2024-02-08 09:49

Flink Format系列(2)-CSV

Flink的csv格式支持读和写csv格式的数据，只需要指定'format'='csv'，下面以kafka为例。
sf_www·2024-02-08 09:48

元宵节：做一名“元宵”党员

同时，要不断加强学习，用习近平新时代中国特色社会主义思想武装头脑，深入理解和践行党的宗
辉组轩·2024-02-08 09:06

storm整合kafka

maven4.0.0storm-kafka-mysqlstorm-kafka-mysql0.0.1-SNAPSHOTjarstorm-kafka-mysqlUTF-8javaxjavaee-api8.0providedorg.glassfish.webjavax.servlet.jsp.jstl1.2.2org.apache.stormstorm-core0.9.5provided
piziyang12138·2024-02-08 09:01

深入理解Python多线程：方法解析与实践案例

案例1：l1=[1,2,3,4,5,6]foriinl1:要求1：print(i)要求2：每一个线程的频率不一样，time.sleep(i)总结：创建多个线程，每个线程打印频率不一样；为了便于区分，每次打印的时候，可以加一个前缀，类似“线程1”、“线程2”、“线程3”…1.使用threading.Thread类我们可以创建threading.Thread类的实例来表示一个线程，然后调用它的star
the_beginner·2024-02-08 08:53

如何查看kafka的topic的消费者组有没有积压

Kafka自带的命令行工具kafka-consumer-groups.sh来查看消费者组的消费情况，包括是否有积压。具体步骤如下：打开命令行终端，进入Kafka安装目录下的bin文件夹。
不会吐丝的蜘蛛侠。·2024-02-08 08:29

图像处理入门：OpenCV的基础用法解析

图像处理入门：OpenCV的基础用法解析引言OpenCV的初步了解深入理解OpenCV：计算机视觉的开源解决方案什么是OpenCV？
kadog·2024-02-08 07:14

深入理解原码、反码和补码

文章目录前言原码反码补码原码、反码、补码之间的转换为什么需要反码和补码？前言在计算机领域，经常会听到原码、反码和补码这些概念。这些概念是计算机中对数值进行存储和运算的基础。本文将深入探讨这些概念，解释它们的定义、特点以及在计算机中的重要性。原码、反码、补码都是二进制的一种表示形式，但它们在表示有符号整数时引入了符号位，这是为了区分正数和负数。它们与普通的二进制表示有一些区别，主要在于引入了符号位和
墨辰JC·2024-02-08 06:49
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他