Kafka源码分析

Spring框架AOP源码分析(二)

AOP编程使用1.注解版本实现AOP开启事物注解权限@Aspect指定一个类为切面类@Pointcut("execution(*com.itmayiedu.service.UserService.add(..))")指定切入点表达式@Before("pointCut_()")前置通知:目标方法之前执行@After("pointCut_()")后置通知：目标方法之后执行（始终执行）@AfterRet
Mark_ZSQ·2024-02-06 10:18

RTthread线程间通信(邮箱,消息队列,信号/软件中断)---03信号(软件中断)源码分析

信号实际使用看这一个#ifdefined(RT_USING_SIGNALS)rt_sigset_tsig_pending;/**sig_vectors==RT_NULL){//这一个线程之前没有安转过rt_thread_alloc_sig(tid);}if(tid->sig_vectors){old=tid->sig_vectors[signo];if(handler==SIG_IGN)tid->
唐·柯里昂798·2024-02-06 09:15

Kafka配置Kerberos安全认证及与Java程序集成

Background本文主要介绍在Kafka中如何配置Kerberos认证，以及java使用JAAS来进行Kerberos认证连接。本文演示为单机版。
WaiSaa·2024-02-06 09:44

2024年了，如何更好的搭建Kafka集群？

Kafka的Kraft模式简单来说就是基于raft协议重新实现了zookeeper的功能。传统的zookeeper集群已经被标记为弃用，将在kafka4.0中完全移除。
程序饲养员·2024-02-06 09:36

从Kafka系统中读取消息数据——消费

从Kafka系统中读取消息数据——消费消费Kafka集群中的主题消息检查消费者是不是单线程主题如何自动获取分区和手动分配分区subscribe实现订阅（自动获取分区）assign（手动分配分区）反序列化主题消息反序列化一个类
_蓝天IT_·2024-02-06 09:33

netty-websocket扩展协议及token鉴权补充

文章源码：gitee源码部分可以看上一篇文章中的源码分析netty-websocket鉴权token及统一请求和响应头（鉴权控制器）最近刚好没事，看到有朋友说自定义协议好搞，我就想了想，发现上面那种方式实现确实麻烦
离别又见离别·2024-02-06 08:12

c++之std::unique_lock, std::lock, std::scoped_lock及std::condition_variable

可用的第二个参数有三种，而lock_guard只有一种unique_lock的析构需要判断_M_owns，而lock_guard无需判定条件变量的传参为unique_lock说什么都不如源码来的简单明了1.1源码分析
liuge·2024-02-06 08:12

flume+Kafka+flink实时统计实战(单机版)

下面有些命令由于Kafka版本原因可能会报下面这种错误，请注意：ApacheKafka:bootstrap-serverisnotarecognizedoption2.5.0之前的版本使用broker-list2.5.0
xiaolege_·2024-02-06 08:30

FlinkCDC-Hudi:Mysql数据实时入湖全攻略五：FlinkSQL同时输出到kafka与hudi的几种实现

前序：FlinkCDC-Hudi系列文章：FlinkCDC-Hudi:Mysql数据实时入湖全攻略一：初试风云FlinkCDC-Hudi:Mysql数据实时入湖全攻略二：Hudi与Spark整合时所遇异常与解决方案FlinkCDC-Hudi:Mysql数据实时入湖全攻略三：探索实现FlinkCDCmysql主从库同步高可用FlinkCDC-Hudi:Mysql数据实时入湖全攻略四：两种FlinkS
大数据点灯人·2024-02-06 08:25

Flink CDC 与 Kafka 集成：State Snapshot 还是 Changelog？Kafka 还是 Upsert Kafka？

我们知道，尽管FlinkCDC可以越过Kafka，将关系型数据库中的数据表直接“映射”成数据湖上的一张表（例如Hudi等），但从整体架构上考虑，维护一个Kafka集群作为数据接入的统一管道是非常必要的，
　Laurence·2024-02-06 08:52

xv6（RISC-V）操作系统源码分析第六节——锁

一、程序并发执行带来的问题及解决方案（一）并发执行带来的问题程序的并发执行提高了程序执行的效率，这是大多数内核所追求的，xv6也是这样。xv6采用两种方式实现程序的并发执行：采用多处理器架构在一个CPU上实现多线程机制xv6采用多处理器架构（硬件系统具有多个CPU独立执行）来实现程序的并发执行。这些CPU共享同一个DRAM，这种共享就带了问题：一个CPU在读取一个数据的同时，另一个CPU正在更新它
MCQSLW·2024-02-06 08:05

xv6（RISC-V）操作系统源码分析第一节——操作系统接口

一、内核与进程xv6使用传统形式内核（一个向其他运行中的程序提供服务的特殊程序）。每一个正在运行的程序称为进程，进程拥有自己的指令、数据与栈的内存空间。它们的功能如下：指令：实现程序的运算数据：用于运算过程的变量栈：管理程序的过程调用一个计算机通常有许多进程，但只有一个内核。二、进程调用内核服务的方式——系统调用进程通过调用系统调用来调用内核的服务。系统调用是操作系统接口中的一个调用。系统调用会进
MCQSLW·2024-02-06 08:34

xv6（RISC-V）操作系统源码分析第二节——操作系统组织

一、一个操作系统的基本要求一个操作系统至少需要满足以下三个要求：多路复用进程隔离进程通信（一）多路复用硬件CPU的数量有限，且往往少于同时存在的进程数量。而操作系统需要支持进程的并发执行，所以操作系统应该能使多个进程分时共享计算机的资源。（二）进程隔离一个进程的运行，应当具有一定的独立性，这个独立性指该进程在一定程度上不受其他进程的影响。这可以保证出了bug的程序不会严重影响其他程序的正常运行。（
MCQSLW·2024-02-06 08:34

xv6（RISC-V）操作系统源码分析第三节——地址映射与内存分配

一、xv6页表的作用物理内存指DRAM中的存储单元。物理存储器的一个字节有一个地址，称为物理地址。当指令操作虚拟地址时，分页硬件会将其翻译成物理地址，然后发送给DRAM硬件以读写。而分页硬件操作的核心数据结构就是页表。页表在物理内存中。通过页表机制，xv6为每个进程提供各自私有的地址空间和内存。页表决定了内存地址的含义与物理内存的哪些部分可以被访问。页表提供了一个间接层次，允许xv6实现如下技巧：
MCQSLW·2024-02-06 08:34

xv6（RISC-V）操作系统源码分析第五节——中断与设备驱动

一、驱动程序驱动程序是操作系统中管理特定设备的代码，它的功能包括：配置设备相关的硬件控制设备的执行处理设备产生的中断与等待设备I/O的进程进行交互驱动程序会与它所管理的设备并发执行。驱动程序必须了解设备的硬件接口。设备可以产生设备中断，在xv6中，内核中的devintr程序会处理这个中断。许多设备驱动程序会在两个上下文（context）中执行代码。这两个上下文分别是：上半部分（tophalf）：在
MCQSLW·2024-02-06 08:34

Kafka 使用手册

kafka3.0文章目录kafka3.01.什么是kafka？
@lihewei·2024-02-06 08:01

kafka基本概念

文章目录前言为什么需要KafkaKafka的优势Kafka应用场景Kafka消费模式Kafka的基础架构前言我们小猿在学习到kafka这门技术的时候，相信大家已经学习过其它消息队列中间件，例如RabbitMq
欲无缘·2024-02-06 07:58

Semaphore源码分析

1.Semaphore定义Semaphore主要用于限量控制并发执行代码的工具类,其内部通过一个permit来进行定义并发执行的数量,其实可以理解为一个限制数量的ReadLock获取.Semaphore主要特点:Semaphore方法的实现通过Sync(AQS的继承类)代理来实现2.支持公平与非公平模式,都是在AQS的子类里面进行,主要区分在tryAcquire里面先看一个简单的demoimpor
铁甲依然在_978f·2024-02-06 07:12

ReentrantLock源码分析、LockSuppor、ReentrantReadWriteLock、锁优化的方法

ReentrantLock类图我们看一下重入锁ReentrantLock类关系图，它是实现了Lock接口的类。NonfairSync和FairSync都继承自抽象类Sync，在ReentrantLock中有非公平锁NonfairSync和公平锁FairSync的实现。在重入锁ReentrantLock类关系图中，我们可以看到NonfairSync和FairSync都继承自抽象类Sync，而Sync
_蓝天IT_·2024-02-06 07:12

k8s的Deployment部署策略线上踩坑

线上问题我们有个服务,专门做t-1日的增量数据入仓的.入仓流程:每日0点系统新建个csv文件,通过kafka监听增量数据,实时数据写入该csv文件,供下游数仓次日取数.每日产生数据50G(1.8亿条)左右
吴free·2024-02-06 07:41

Kafka SASL_SSL双重认证

文章目录1.背景2.环境3.操作步骤3.1生成SSL证书3.2配置zookeeper认证3.3配置kafka安全认证3.4使用kafka客户端进行验证3.5使用Java端代码进行认证1.背景kafka提供了多种安全认证机制
@lihewei·2024-02-06 06:39

开源组件Kafka Connect推荐

KafkaConnect简介KafkaConnect是Kafka的开源组件Confluent提供的功能，用于实现Kafka与外部系统的连接。
佛系小懒·2024-02-06 05:07

RocketMQ和Kafka的区别，以及如何保证消息不丢失和重复消费

消息队列RocketMQ和Kafka的区别性能（单台）语言多语言支持客户端优缺点RocketMQ十万级javajava模型简单、接口易用，在阿里有大规模应用文档少，支持的语言少Kafka百万级服务端scala
Marciaguoguo·2024-02-06 04:38

MySQL进阶垫脚石：线程长时间处于killed状态怎么破？

二、源码分析1、MySQL执行流程简介MySQL的启
程序员与Python·2024-02-06 03:36

架构师五分钟带你读懂，Volatile的作用及原理

架构师五分钟带你读懂，Volatile的作用及原理文章简介分析volatile的作用以及底层实现原理，这也是大公司喜欢问的问题内容导航volatile的作用什么是可见性volatile源码分析一、volatile
勤奋的码农·2024-02-06 00:17

《Python 网络爬虫简易速速上手小册》第8章：分布式爬虫设计（2024 最新版）

文章目录8.1分布式爬虫的架构8.1.1重点基础知识讲解8.1.2重点案例：使用Scrapy和Scrapy-Redis构建分布式爬虫8.1.3拓展案例1：使用Kafka作为消息队列8.1.4拓展案例2：
江帅帅·2024-02-05 23:47

消息中间件之RocketMQ源码分析(五)

消费进度保存机制消费者启动时会同时启动位点管理器，RocketMQ设计了远程位点管理和本地位点管理两种位点管理方式.集群消费时，位点由客户端提交给Broker保存.广播消费时，位点保存在消费者本地磁盘上OffsetStore接口核心方法voidload():加载位点信息voidupdateOffset():更新缓存位点信息longreadOffset():读取本地位点信息voidpersistAl
coffee_babe·2024-02-05 20:57

启动Maxwell报这个错了，怎么办

Lr123456'--host='node02'--producer=kafka--kafka.bootstrap.servers=node01:9092--kafka_topic=maxwellUsingkafkaversio
初恋880·2024-02-05 19:26

AMH面板如何安装与公网远程访问本地面板界面

推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,kafka,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂·2024-02-05 18:42

SpringBoot Security安全认证框架初始化流程&认证流程之源码分析

SpringBootSecurity安全认证框架初始化流程&认证流程之源码分析以RuoYi-Vue前后端分离版本为例分析SpringBootSecurity安全认证框架初始化流程&认证流程的源码分析目录
老杜095·2024-02-05 18:04

kafka_2.13-2.8.0

kafka_2.13-2.8.0下载kafka启动zookeeperzookeeper.propertieszookeeper是否启动成功lsof-i:2181ps-aux|grepzookeeper启动
qq_26264237·2024-02-05 17:57

Kafka2.13集群搭建

hosts172.17.0.2   node0172.17.0.3   node1172.17.0.4   node2在其中一台服务器中搭建Zookeeper（单机或集群都可以）Zookeeper集群搭建参考链接下载Kafka​wget
咩哥无敌·2024-02-05 17:57

DPDK系列之四十一数据收发整体流程源码分析之一整体流程

一、说明在前面的分析中基本介绍了DPDK中的各种模块的技术架构，从这篇开始，就从头开始对整个代码的流程进行分析，然后在此基础上，初步掌握了DPDK的代码架构和功能分析后，再对基于DPDK的上层应用进行分析。这是一个从分到合，从基础到应用的过程。在这个过程中需要不断的回顾和补充原来的知识。二、数据包流程在前面详细分析过数据包的转运流程，其实做一种IO接口，一定是分成两部分，即数据的接收和发送。从宏观
fpcc·2024-02-05 17:18

SOFABolt 源码分析13 - Connection 事件处理机制的设计

image.pngConnection事件处理相关类ConnectionEventType：定义了三种Connection相关事件ConnectionEventHandler：Connection事件处理器，处理两类事件Netty定义的事件：例如connect，channelActive等SOFABolt定义的事件：事件类型ConnectionEventTypeRpcConnectionEvent
原水寒·2024-02-05 16:48

ROS-I simple_message 源码分析：SmplMsgConnection

SmplMsgConnection类定义了一些接口和常用的方法，用于SimpleMessage消息的发送，它做了两个假设：连接能够发送原始字节数据（封装在simplemessage之中）提供显示的connect方法来建立连接（相应的也要有一个disconnect），对于无连接的通信，比如UDP，则可以不用实现connect方法（作为一个空操作）此处的连接(connection)是代表的抽象连接，也
play_robot·2024-02-05 16:23

LinkedList集合

LinkedList集合1.概述2.方法2.1特有方法2.2代码示例3.遍历方法4.注意事项5.源码分析其他集合类父类List类祖父类Collection类具体信息请查看API帮助文档1.概述LinkedList
酷小洋·2024-02-05 15:47

2019年需要学习的专业知识

接下来的学习计划软件知识体系结构基础知识C/C++编程语言数据结构算法分析与实现中级知识编译器原理操作系统网络编程高级知识Linux内核源码分析硬件知识体系结构基础知识电路知识模拟电路数字电路计算机组成原理处理器体系架构实现应用性知识
大道而至简·2024-02-05 15:13

了解Vue2全局API这一篇就够了

复习完之后小哆啦也会跟着大佬去学习vue的源码分析，在总结的时候小哆啦也尽量去理解大佬的设计思想。
故梦867·2024-02-05 14:56

Kafka配置类参数设置

newProperties();props.put("bootstrap.servers","localhost:9092");props.put("key.serializer","org.apache.kafka.common.serialization.StringSerializer
大大大大肉包·2024-02-05 14:27

SpringBoot自动装配原理源码分析（详细）

SpringBoot自动装配原理源码分析1.前言2.SpringBoot源码2.1@SpringBootApplication注解2.2@EnableAutoConfiguration注解2.2.1selectImports
coderedma·2024-02-05 13:55

SpringCloud-消息驱动(Stream、生产者、消费者)

StreamSpringCloudStream，的诞生是为了解决各种消息中间件之间的兼容性问题，学习过消息中间件的同学都知道现在市面上流行的消息中间件有ActiveMQ、RabbitMQ、RocketMQ、Kafka
JolyouLu·2024-02-05 12:30

trinitycore 魔兽服务器源码分析(一) 网络

trinitycore是游戏服务器的开源代码许多玩家使用魔兽的数据来进行测试,使用它来假设魔兽私服。官方网址https://www.trinitycore.org/类似的还有mangos和kbengine不过mangos使用庞大的ACE网络框架kbengine使用自写网络库两者均使用了多语言进行开发作为trinitycore主要使用c++。代码比较好读，就开启本篇这个代码阅读的坑代码要求具备c++
weixin_30781107·2024-02-05 12:03

Nacos 源码分析

Nacos源码分析1.下载Nacos源码并运行要研究Nacos源码自然不能用打包好的Nacos服务端jar包来运行，需要下载源码自己编译来运行。
萧曵 丶·2024-02-05 11:55

Sentinel 源码分析

Sentinel源码分析项目源码1.Sentinel的基本概念Sentinel实现限流、隔离、降级、熔断等功能，本质要做的就是两件事情：统计数据：统计某个资源的访问数据（QPS、RT等信息）规则判断：判断限流规则
萧曵 丶·2024-02-05 11:55

SpringMVC精简知识点

数据格式化基本数据类型和字符串自动转换特殊数据类型和字符串自动转换验证及国际化应用实例注意事项和使用细节注解的结合使用数据类型转换校验核心类-DatBinder取消某个属性的绑定中文乱码解决处理json和HttpMessageConverter作业布置SpringMVC文件上传自定义拦截器异常处理SpringMVC执行流程-源码分析作业布置数据格式化
~ 小团子·2024-02-05 10:22

使用两种多线程模式消费Kafka数据

使用两种多线程模式消费数据KafkaProducer是线程安全的,然而KafkaConsumer却是非线程安全的。
魏春雨·2024-02-05 10:24

Spring Boot与Kafka集成教程

当然可以，这里为您提供一个简化版的SpringBoot与Kafka集成教程：新建SpringBoot项目使用SpringInitializr或您喜欢的IDE（如IntelliJIDEA,Eclipse等
MarkHD·2024-02-05 09:12

Springboot使用kafka的两种方式

在SpringBoot中使用ApacheKafka主要有两种方式：使用SpringKafka项目和使用SpringBoot的spring-boot-starter-kafka。
MarkHD·2024-02-05 09:12

kafka之auto-offset-reset

官方文档解释auto.offset.reset:WhattodowhenthereisnoinitialoffsetinKafkaorifthecurrentoffsetdoesnotexistanymoreontheserver
driver_ab·2024-02-05 09:05

【Kafka面试】Kafka的高可用机制有了解吗？

一、集群模式Kafka集群由多个broker组成，每个broker就是Kafka实例。假如某个broker宕机，在集群中其他的broker依然可以对外提供服务，这个就是集群能够保证高可用性。
TAIKEMAN·2024-02-05 09:44
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他