E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【Kafka源码解读】
Spring是如何解析XML并组装BeanDefinition存入BeanDefinitionMap的?
源码解读
入口Demo.javapublicstaticvoidmain(String[]args){//从这里进入ClassPathXmlApplicationContextcontext=newClassPathXmlAppli
后端开发萌新
·
2024-01-03 04:50
死磕Spring源码系列
spring
xml
java
Linux Page Cache调优在
Kafka
中的应用
mp.weixin.qq.com/s/MaeXn-kmgLUah78brglFkg作者:YangYijun本文主要描述LinuxPageCache优化的背景、PageCache的基本概念、列举之前针对
Kafka
vivo互联网技术
·
2024-01-02 22:05
SpringBoot2.2.6启动run方法之prepareContext
源码解读
进度首先我们的源码阅读进度publicConfigurableApplicationContextrun(String...args){//用于记录启动时间Sto
噼咔丘
·
2024-01-02 14:15
88、Spark Streaming之输入DStream之
Kafka
数据源实战(基于Direct的方式)
替代掉使用Receiver来接收数据后,这种方式会周期性地查询
Kafka
,来获得每个topic+partition的最新的offset,从而定义每个batch的offset的范围。
ZFH__ZJ
·
2024-01-02 13:25
Kafka
高性能架构设计
1、概述
Kafka
是大数据领域无处不在的消息中间件,目前广泛使用在企业内部的实时数据管道,并帮助企业构建自己的流计算应用程序。
FourtySeven
·
2024-01-02 10:18
Kafka
提交offset机制
3sPGFihkBbhc41jSaAzCwPnANCbs1z56_l4a1eXnhRtd2XxT5B4r7_2HB3wJT2IhoGMzpD858l_RKRrU8TDQm_&wd=&eqid=e88a5ce70002861e000000035d4cdc76在
kafka
北洋同学
·
2024-01-02 05:04
PiflowX组件-ReadFromUpsert
Kafka
ReadFromUpsert
Kafka
组件组件说明upsert方式从
Kafka
topic中读取数据。
暗影八度
·
2024-01-01 23:06
大数据
spark
big
data
flink
hadoop
PiflowX组件-WriteToUpsert
Kafka
WriteToUpsert
Kafka
组件组件说明以upsert方式往
Kafka
topic中写数据。
暗影八度
·
2024-01-01 23:05
PiflowX
大数据
spark
flink
数据库
hdfs
etl
Debezium日常分享系列之:向 Debezium 连接器发送信号
Debezium日常分享系列之:向Debezium连接器发送信号一、概述二、激活源信号通道三、信令数据集合的结构四、创建信令数据集合五、激活
kafka
信号通道六、数据格式七、激活JMX信号通道八、自定义信令通道九
最笨的羊羊
·
2024-01-01 23:32
日常分享专栏
Debezium日常分享系列
向Debezium连接器
发送信号
Azure Service Bus(一)入门简介
一,引言今天开始学习新的内容AzureServiceBus(服务总线),其实也叫”云消息服务“,和RabbitMQ,
KafKa
的一样都是作为消息通信服务,但是它们直接还有有很多区别的,我这里就不过多解释了
贠乾
·
2024-01-01 22:11
FairyGUI-Cocos Creator官方Demo
源码解读
博主在学习CocosCreator的时候,发现了一款免费的UI编辑器FairyGUI。这款编辑器的能力十分强大,但是网上的学习资源比较少,坑比较多,主要学习方式就是阅读官方文档和练习官方Demo。这里博主进行官方Demo的解读。从gitee上克隆项目到本地,用cocos打开后,发现场景里只有一个DemoEnter,并且项目目录很干净。用vscode打开DemoEnter上挂载的脚本。进来之后是这个
飞猪0_0
·
2024-01-01 22:51
cocos2d
【
Kafka
】10道不得不会的
Kafka
面试题
博主介绍:自媒体JavaPub独立维护人,全网粉丝15w+,csdn博客专家、java领域优质创作者,51ctoTOP10博主,知乎/掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java技术领域和副业。公众号:JavaPub⭐⭐简历模板、学习资料、面试题库等都给你关注公众号【JavaPub】,回复:最少必要面试题,获取《10万字301道Java经典面试题总结(附答案)》pdf,背题更方便
JavaPub
·
2024-01-01 19:38
JAVA面试题分享二百四十四:彻底理解零拷贝技术( DMA、PageCache)
目录DMAmmap+writesendfile
kafka
和Nginx都使用了零拷贝技术大文件传输:异步IO+直接IO总结DMA直接内存访问(DirectMemoryAccess)什么是DMA?
之乎者也·
·
2024-01-01 18:00
JAVA
面试题分享
java
面试
开发语言
论最强IO:MappedByteBuffer VS FileChannel
最近一直在研究MQ,开源社区中有很多高性能MQ:
kafka
、RocketMQ、ActiveMQ,抛开网络传输方式、数据结构设计、文件存储方式...等因素。
布道
·
2024-01-01 18:59
Java
FileChannel
同城容器集群多活及弹性扩容方案
部署模式相同业务容器集群,按照1:1资源配比,创建两个k8s集群,分别部署在同地域不同可用区,两个容器集群,共用一套数据库部署说明按照1:1资源配比在不同可用区分别创建k8s集群redis/
kafka
在不同可用区分别创建一套实例
行者深蓝
·
2024-01-01 13:18
PHP
kafka
初步测试
1.Mac安装
Kafka
并启动
kafka
brewinstall
kafka
==>Downloadinghttps://homebrew.bintray.com/bottles/
kafka
-2.2.0.high_sierra.bottle.tar.gzAlreadydownloaded
鸿雁长飞光不度
·
2024-01-01 12:54
Nebula Graph
源码解读
系列 | Vol.03 Planner 的实现
NebulaGraph
源码解读
系列|Vol.03Planner的实现上篇我们讲到Validator会将由Parser生成的抽象语法树(AST)转化为执行计划,这次,我们来讲下执行计划是如何生成的。
NebulaGraph
·
2024-01-01 12:46
Flink
Kafka
[输入/输出] Connector
本章重点介绍生产环境中最常用到的Flink
kafka
connector。使用Flink的同学,一定会很熟悉
kafka
,它是一个分布式的、分区的、多副本的、支持高吞吐的、发布订阅消息系统。
程序猿进阶
·
2024-01-01 11:58
Flink
flink
kafka
linq
大数据
java
面试
后端
KAFKA
、RABBITMQ、ROCKETMQ等消息中间件的介绍和对比
前言在分布式系统中,我们广泛运用消息中间件进行系统间的数据交换,便于异步解耦。现在开源的消息中间件有很多,前段时间产品RocketMQ(MetaQ的内核)也顺利开源,得到大家的关注。概念MQ简介MQ,Messagequeue,消息队列,就是指保存消息的一个容器。具体的定义这里就不类似于数据库、缓存等,用来保存数据的。当然,与数据库、缓存等产品比较,也有自己一些特点,具体的特点后文会做详细的介绍。现
公号:java高级架构师
·
2024-01-01 10:18
Kafka
、RabbitMQ、RocketMQ等 消息中间件 介绍和对比
3.1、
Kafka
3.2、RabbitMQ3.3、RocketMQ4、测试4.1、测试目的4.2、测试场景4.2.1、
Kafka
4.2.2、RocketMQ4.2.3、RabbitMQ4.3、测试结论5
weixin_30559481
·
2024-01-01 10:17
数据库
运维
java
Kafka
、RabbitMQ、RocketMQ等消息中间件的介绍和对比 侵删
前言在分布式系统中,我们广泛运用消息中间件进行系统间的数据交换,便于异步解耦。现在开源的消息中间件有很多,前段时间产品RocketMQ(MetaQ的内核)也顺利开源,得到大家的关注。概念MQ简介MQ,Messagequeue,消息队列,就是指保存消息的一个容器。具体的定义这里就不类似于数据库、缓存等,用来保存数据的。当然,与数据库、缓存等产品比较,也有自己一些特点,具体的特点后文会做详细的介绍。现
心神沫沫
·
2024-01-01 10:47
网文干货
Kafka
、RabbitMQ、RocketMQ等消息中间件的介绍和对比
前言在分布式系统中,我们广泛运用消息中间件进行系统间的数据交换,便于异步解耦。现在开源的消息中间件有很多,前段时间产品RocketMQ(MetaQ的内核)也顺利开源,得到大家的关注。概念MQ简介MQ,Messagequeue,消息队列,就是指保存消息的一个容器。具体的定义这里就不类似于数据库、缓存等,用来保存数据的。当然,与数据库、缓存等产品比较,也有自己一些特点,具体的特点后文会做详细的介绍。现
lxw1844912514
·
2024-01-01 10:14
PostgreSQL
源码解读
(28)- 查询语句#13(查询优化-上拉子链接#3)
一、
源码解读
上一节介绍了ANY子链接,本节介绍了EXISTS子链接.为便于方便解析,根据日志分析,得出查询树如下图所示:查询树convert_EXISTS_sublink_to_join函数源码:/**
EthanHe
·
2024-01-01 06:16
Java程序员:世界有三个伟大的发明「火、轮子、
kafka
」
一、
Kafka
是什么?有人说世界上有三个伟大的发明:火,轮子,以及
Kafka
。
Java旺
·
2024-01-01 04:17
go
源码解读
-sync.pool
goversion1.19.7sync.pool是go内置的对象池技术,管理临时对象,这些对象可以单独保存和检索,减少GC次数特点:1、池不可以指定大小2、Get没有的话会新生成一个对象3、对象的周期取决于GC的周期从godoc可以看到sync.pool主要暴露Get和Put两个方法,以及一个New。使用:用New初始化pool一个实例,获取的调用Get,释放资源的时候调用PutC:\Users\
Q_X_Q 慶
·
2024-01-01 03:47
go语言
golang
go
源码解读
sync.RWMutex
sync.RWMutex简介源码结构RLockRUnlockUnlockgo运行时方法简介简述sync包中读写锁的源码。(go-version1.21)读写锁(RWMutex)是一种并发控制机制,用于在多个goroutine之间对共享资源进行读写操作。它提供了两种锁定方式:读锁和写锁。读锁(RLock):多个goroutine可以同时持有读锁,而不会阻塞彼此。只有当没有写锁被持有时,读锁才会被授予
Q_X_Q 慶
·
2024-01-01 03:46
go语言
golang
Spring 框架
源码解读
9
title:Spring框架
源码解读
9date:2020/04/1820:12开场今天我们先把昨天的ConfigurationClassPostProcessor仔细讲一讲,然后再开始今天要学的内容。
想54256
·
2024-01-01 01:22
【Java基础系列】body参数前后端不一致
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2024-01-01 01:56
s1
java基础
java
开发语言
Kafka
安装及简单使用介绍
java系列技术分享(持续更新中…)初衷:一起学习、一起进步、坚持不懈如果文章内容有误与您的想法不一致,欢迎大家在评论区指正希望这篇文章对你有所帮助,欢迎点赞收藏⭐留言更多文章请点击文章目录一、什么是
Kafka
Dream_sky分享
·
2024-01-01 00:25
mq
kafka
分布式
接收
Kafka
数据并消费至Hive表
1Hive客户端方案将
Kafka
中的数据消费到Hive可以通过以下简单而稳定的步骤来实现。这里假设的数据是以字符串格式存储在
Kafka
中的。
程序终结者
·
2023-12-31 23:49
Hadoop生态
Flink
kafka
hive
linq
Kafka
_01_
Kafka
初识
Kafka
_01_
Kafka
初识
Kafka
基础概念延迟任务
Kafka
Kafka
:ZooKeeper协调的分布式消息系统基于Scala语言编写的高性能、多分区、多副本
Kafka
高性能的原因:页缓存、顺序IO
爱喝可乐的w
·
2023-12-31 20:48
Kafka
kafka
分布式
Kafka
系列3-
Kafka
架构
一.工作流程
Kafka
中消息是以topic进行分类的,Producer生产消息,Consumer消费消息,都是面向topic的。
只是甲
·
2023-12-31 19:15
深度剖析
Kafka
/RocketMQ 顺序消息的一些坑
我不记得有多少人问过以下这个问题了:我觉得这个问题问得很频繁,而且非常经典,在这里我就以
Kafka
为例子,说说我对
Kafka
顺序消息的一些理解吧,如有理解不对的地方麻烦留言指点一下。
fumi106
·
2023-12-31 19:14
sparkstreamnig实时处理入门
工程创建导入maven依赖 org.apache.spark spark-streaming_2.12 3.1.2 org.apache.spark spark-streaming-
kafka
Guff_hys
·
2023-12-31 18:47
spark
大数据
分布式
开发语言
后端
css3
jquery
kafka
的零拷贝原理
文章目录
kafka
的零拷贝原理今天来跟大家聊聊
kafka
的零拷贝原理是什么?
皮皮攻城狮
·
2023-12-31 16:19
kafka
kafka
分布式
Redis经典五大类型源码及底层实现(二)
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-31 11:38
数据库技术
redis
数据库
缓存
Flink 内容分享(十六):Flink中的容错机制
1.2状态一致性1.2.1一致性的概念和级别1.2.2端到端的状态一致性1.3端到端精确一次(end-to-endexactly-once)1.3.1输入端保证1.3.2输出端保证1.3.3Flink和
Kafka
之乎者也·
·
2023-12-31 11:50
Flink
内容分享
大数据(Hadoop)内容分享
flink
大数据
33、Spark内核源码深度剖析之SparkContext原理剖析与源码分析
原理剖析SparkContext原理剖析.png
源码解读
本系列文章spark版本为1.3.0入口org.apache.spark.SparkContextSparkContext要点TaskScheduler
ZFH__ZJ
·
2023-12-31 10:38
支付MQ消费场景改造
前言:这是一个MQ消费程序的业务优化改造场景,我们支付服务的消费方,主要功能是根据规则过滤一些消息,继而处理剩下的消息消息来源:框架监听binlog后向
kafka
中写入消息(只监听新增)背景:现有一个topicA
北i
·
2023-12-31 10:31
java
rocketmq
kafka
Kafka
集群详解
Kafka
介绍
Kafka
集群介绍
Kafka
集群特点
Kafka
集群搭建在这里插入图片描述
Kafka
集群如何进行故障切换
Kafka
集群Leader的选举
Kafka
集群如何快速横向拓展
Kafka
集群搭建最佳实践
有梦想的攻城狮
·
2023-12-31 10:00
架构设计
kafka
kafka集群
Python Request
源码解读
之 adapters.py
requests.adapters是requests库中的一个子模块,它包含了一些用于处理HTTP请求的适配器类。这些适配器类主要用于处理与HTTP请求相关的各种细节,例如超时、重试、连接池管理等。以下是requests.adapters中一些主要的类:HTTPAdapter:这是所有适配器的基类。它提供了一些基本的适配器功能,如重试机制、连接池管理等。HTTPConnectionPool:这个类
老虎爱代码
·
2023-12-31 10:39
Python
Request源码学习
intellij-idea
Python Request
源码解读
之api.py
api.py这个模块定义了一个名为request的函数,该函数接收一个HTTP方法(如GET、POST等)、一个URL和一些可选的关键字参数(kwargs),然后构建并发送一个HTTP请求。#-*-coding:utf-8-*-"""requests.api~~~~~~~~~~~~ThismoduleimplementstheRequestsAPI.:copyright:(c)2012byKenn
老虎爱代码
·
2023-12-31 10:39
python
开发语言
kafka
-python简单生产消费数据
kafka
-python使用手册
kafka
-python1.生产者同步发送数据#生产者同步发送数据from
kafka
import
Kafka
Producerfrom
kafka
.errorsimport
Kafka
Errorproducer
高过蓝天的云
·
2023-12-31 08:12
kafka
python
分布式
Redis经典五大类型源码及底层实现(一)
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-31 08:11
数据库技术
redis
数据库
缓存
Canal的学习
Canal基本概念整合SpringBoot基本概念Canal是一个基于MySQL数据库增量日志解析,提供增量数据订阅和消费,支持将增量数据投递到下游消费者(如
Kafka
、RocketMQ等)或者存储(如
kk变色龙13
·
2023-12-31 08:08
android
微服务
rabbitmq
java
SpringAMQP的使用方式
比较常见的MQ实现:ActiveMQRabbitMQRocketMQ
Kafka
几种常见MQ的对比:RabbitMQActiveMQRocketMQ
Kafka
公司/社区RabbitApache阿里Apache
Winter.169
·
2023-12-31 07:51
微服务
rabbitmq
Spark编程实验四:Spark Streaming编程
目录一、目的与要求二、实验内容三、实验步骤1、利用SparkStreaming对三种类型的基本数据源的数据进行处理2、利用SparkStreaming对
Kafka
高级数据源的数据进行处理3、完成DStream
Francek Chen
·
2023-12-31 06:24
Spark编程基础
spark
大数据
分布式
Spark
Streaming
kafka
(基础)
kafka
优点:1.解耦:原本单一的处理过程一拆为二,相当于你可以独立扩展和修改(遵循同样的接口约束)2.可恢复性:即使消息进程挂了,仍可在系统恢复后被处理3.缓冲:可以理解为生产消息的速度和消费速度不一致
斯莫奇
·
2023-12-31 05:42
java
java
kafka
分布式消息队列RocketMQ&
Kafka
-- 消息的“顺序消费”-- 一个看似简单的复杂问题
但实际情况却是:无论RocketMQ,还是
Kafka
,缺省都不保证消息的严格有序消费!这个特性看起来很简单,但为什么缺省他们都不保证呢?
秋名山车神_f776
·
2023-12-31 05:59
kafka
.zookeeper.ZooKeeperClientTimeoutException: Timed out waiting for connection while in state
kafka
.zookeeper.ZooKeeperClientTimeoutException:Timedoutwaitingforconnectionwhileinstate:CONNECTING
spencer_tseng
·
2023-12-31 04:46
tomcat
上一页
29
30
31
32
33
34
35
36
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他