E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
MQ~kafka
大数据技术之
Kafka
大数据技术之
Kafka
文章目录大数据技术之
Kafka
第1章
Kafka
概述1.1定义1.2消息队列1.2.1传统消息队列的应用场景1.2.2消息队列的两种模式1.3
Kafka
基础架构第2章
Kafka
快速入门
efzy
·
2024-02-20 07:26
大数据
大数据
kafka
分布式
消息队列-Rabbit
MQ
MQ
(MessageQueue)消息队列,是基础数据结构中“先进先出”的一种数据结构。
林在闪闪发光
·
2024-02-20 07:26
消息中间件
java-rabbitmq
rabbitmq
java
SpringBoot+
Kafka
文章目录一、依赖二、配置文件三、API1、生产者2、消费者一、依赖org.springframework.
kafka
spring-
kafka
2.5.1.RELEASE二、配置文件spring:
kafka
kimi-001
·
2024-02-20 07:55
Kafka
kafka
分布式
Rabbit
Mq
相关面试题
Rabbit
mq
:1.什么是Rabbit
MQ
?它的作用是什么?
努力奋斗的JAVA小余
·
2024-02-20 07:23
RabbitMq
rabbitmq
分布式
Rabbit
mq
入门与应用(六)-rabbit
mq
的消息确认机制
rabbit
mq
的消息确认机制确认消息是否发送给交换机配置server:port:11111spring:rabbit
mq
:port:5672host:192.168.201.81username:adminpassword
自信人间三百年
·
2024-02-20 07:52
rabbitmq
rabbitmq
ruby
分布式
java
Python操作
Kafka
基础教程
01Python操作
Kafka
基础教程创建ZooKeeper容器dockerrun-d--namezookeeper-p2181:2181-v/etc/localtime:/etc/localtimewurstmeister
Python私教
·
2024-02-20 07:52
Kafka
python
kafka
开发语言
Rabbit
mq
入门与应用(二)-Rabbit
MQ
工作模型
Rabbit
MQ
工作模型Rabbit
MQ
Tutorials—Rabbit
MQ
BrokerRabbit
MQ
服务。Connection生产者或是服务者都需要与Broker建立的TCP连接。
自信人间三百年
·
2024-02-20 07:22
rabbitmq
rabbitmq
ruby
分布式
Java目录
乐观锁和悲观锁分布式锁hashmap原理Redis及其分布式DDD领域驱动设计IO、多线程
Kafka
设计模式之??Elasticsearch
快乐的木子李
·
2024-02-20 07:20
#
Java基础
java
深入学习
Kafka
之概念解析
文章目录0.
Kafka
是什么1.基本概念1.1生产者(Producer)1.2消费者(Consumer)1.3服务代理节点(Broker)1.4控制器(Controller)1.5主题Topic1.6分区
圆师傅
·
2024-02-20 07:16
kafka
Kafka
的介绍
文章目录一、介绍二、消息队列通信的模式三、特性四、使用场景五、核心概念一、介绍
kafka
是一个分布式的发布订阅消息系统基于Zookeeper协调最初由Linkedin公司开发,于2010年贡献给了Apache
kimi-001
·
2024-02-20 07:45
Kafka
kafka
分布式
消息队列-Rabbit
MQ
:
MQ
作用分类、Rabbit
MQ
核心概念及消息生产消费调试
1、
MQ
的相关概念1)什么是
MQ
MQ
(messagequeue),从字面意思上看,本质是个队列,FIFO先入先出,只不过队列中存放的内容是message而已,还是一种跨进程的通信机制,用于上下游传递消息
666-LBJ-666
·
2024-02-20 07:44
RabbitMQ
rabbitmq
消息队列
spring
boot
基于SpringBoot+Dubbo构建的电商平台-微服务架构、商城、电商、微服务、高并发、
kafka
、Elasticsearc+源代码+文档说明
文章目录项目用到的技术前端使用的技术后端使用的技术项目模块说明项目搭建方式项目开发进度源码下载地址项目基于springboot2.1.6.RELEASE+Dubbo2.7.3来构建微服务。业务模块划分,尽量贴合互联网公司的架构体系。所以,除了业务本身的复杂度不是很高之外,整体的架构基本和实际架构相差无几。但实际上,真实的生产级的项目由于用户量以及业务的复杂度,会变得非常复杂。所以我们会让更多的人参
ldxxxxll
·
2024-02-20 07:44
架构
spring
boot
dubbo
解决:FLINK1.12.0 Upsert
Kafka
SQL Connector 无法识别scan.startup.mode的问题
问题描述:在升级Flink1.12.0以后Upsert
Kafka
SQLConnector不支持scan.startup.mode、scan.startup.specific-offsets、scan.startup.timestamp-millis
zengjinbo
·
2024-02-20 07:43
Flink
flink
java
实时大数据
【天衍系列 05】Flink集成
Kafka
Sink组件:实现流式数据的可靠传输 & 高效协同
文章目录01
Kafka
Sink版本&导言02
Kafka
Sink基本概念03
Kafka
Sink工作原理1.初始化连接2.定义序列化模式3.创建
Kafka
Sink算子4.创建数据源5.将数据流添加到
Kafka
Sink6
浅夏的猫
·
2024-02-20 07:41
Flink专栏
flink
大数据
kafka
java
apache
Docker部署
Kafka
单机版
01Docker部署
Kafka
单机版创建ZooKeeper容器dockerrun-d--namezookeeper-p2181:2181-v/etc/localtime:/etc/localtimewurstmeister
Python私教
·
2024-02-20 07:36
Kafka
docker
kafka
容器
flink sql upsert
kafka
对于changelogNormalize state解读
flinksqlupsert
kafka
对于changelogNormalizestate解读原文:https://www.jianshu.com/p/5ffe5aa0dc59这里说一点:flinksql-upsert
kafka
minchowang
·
2024-02-20 07:36
Flink
2024.2.19 阿里云Flink
乱序和延迟Stateful:有状态Flink的三个部分Source:Transactions,logs,iot,clicksTransformation:事件驱动,ETL,批处理Sink:输出HDFS,
Kafka
Flink
白白的wj
·
2024-02-20 07:05
flink
大数据
Flink Upsert
Kafka
SQL Connector 介绍
这个时候,须要将
Kafka
记录的key当成主键解决,用来确定一条数据是应该作为插入、删除还是更新记录来解决。
大数据AI
·
2024-02-20 07:00
大数据从入门到精通
flink
kafka
Rabbit
MQ
与Spring Boot集成示例
Rabbit
MQ
与SpringBoot集成示例在现代应用程序开发中,消息队列是一种常见的解决方案,用于实现异步通信、解耦和消息传递。
琴剑飘零西复东
·
2024-02-20 06:50
java-rabbitmq
rabbitmq
spring
boot
Linux Rabbit
MQ
安装及卸载
一、安装1、前景Rabbit
MQ
是用Erlang编写的,所以需要先安装Erlang的编译环境注意Erlang和Rabbit
MQ
的版本是有一些版本匹配关系的,如果不匹配会导致Rabbit
MQ
无法启动2、安装
李三不四
·
2024-02-20 06:19
linux
linux
rabbitmq
erlang
spring boot rabbit
mq
常用配置
直接上代码packagecom.example.demo;importorg.aopalliance.aop.Advice;importorg.springframework.a
mq
p.rabbit.annotation.RabbitListenerConfigurer
hjnjmjkj
·
2024-02-20 06:47
spring
boot
java-rabbitmq
spring
boot
rabbitmq
【高效开发工具系列】PyCharm使用
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2024-02-20 06:09
s0
常用工具
pycharm
ide
python
Rocket
MQ
消息存储
消息存储由ConsumeQueue和CommitLog配合完成。CommitLog是消息的物理存储文件,ConsumeQueue是消息的逻辑队列,类似数据库索引文件,存储物理存储位置,每个MessageQueue对应一个ConsumeQueue文件,每台机器上的CommitLog被本机器所有ConsumeQueue共享。为保证CommitLog和ConsumeQueue的一致性,CommitLog
SlowGO
·
2024-02-20 06:57
怎么用ETL工具实现
MQ
消息同步
怎么用ETL工具实现
MQ
消息同步随着企业业务的不断扩张和数据量的不断增加,消息队列(
MQ
)已经成为了很多企业进行异步消息传递和数据同步的首选方案。
RestCloud
·
2024-02-20 06:30
ETL
数据集成
MQ
多平台轻量级消息推送系统msgd
目前常用的消息推送机制有:基于HTTP的轮循、基于XMPP、基于
MQ
TT及第三方的推送系统(如极光、云巴等),每种机制都有其优劣,具体可网上搜索或
yunjinwang
·
2024-02-20 05:57
IOT
消息推送
物联网
c语言
esp8266
mqtt
Rabbit
MQ
消息可靠性投递与ACK确认机制
1.Rabbit
MQ
的消息可靠性投递什么是消息的可靠性投递保证消息百分百发送到消息队列中去保证
MQ
节点成功接收消息消息发送端需要接收到
MQ
服务端接收到消息的确认应答完善的消息补偿机制,发送失败的消息可以再感知并二次处理
水宝的滚动歌词
·
2024-02-20 04:32
RabbitMQ
rabbitmq
kafka
命令行操作
kafka
命令行操作:配置环境变量:exportJAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdkexportJRE_HOME=${JAVA_HOME}/jreexportCLASSPATH
叶惠美zz
·
2024-02-20 04:32
kafka
springboot整合Rabbit
MQ
1.Spring-A
MQ
P概念什么是Spring-A
MQ
PSpring框架的A
MQ
P消息解决方案,提供模板化的发送和接收消息的抽象层,提供基于消息驱动的POJO的消息监听等提供不依赖于任何特定的A
MQ
P
水宝的滚动歌词
·
2024-02-20 04:31
RabbitMQ
springboot
spring
boot
rabbitmq
SpringBoot 整合 Rabbit
MQ
上一篇我们介绍了如何使用Javaclient操作Rabbit
MQ
,这种方式是基础、更接近本质,但是用起来还是有些麻烦,实际的开发中更多的会和Spring框架整合来提高开发效率,本文将介绍如何在SpringBoot
SheHuan
·
2024-02-20 04:07
Kafka
数据清理机制
Apache
Kafka
中数据清理机制涉及的主要概念有两个:基于时间或大小的日志保留策略,以及日志压缩。这些特性允许
Kafka
管理其存储空间,保留有用的数据,同时清除过时或重复的数据。
辞暮尔尔-烟火年年
·
2024-02-20 03:21
消息中间件
kafka
linq
分布式
2020-11-18
Rabbit
MQ
最常用的3大模式!所有发送到DirectExchange的消息被转发到RouteKey中指定的Queue。
钟意小宝宝
·
2024-02-20 02:07
optee imx8mm
总仓库gitclonehttps://github.com/Xsyin/imx8
mq
evk.git-bcontainer_region替换imx8
mq
evk中的optee-clientgitclonehttps
Hola_ya
·
2024-02-20 00:28
信息安全
安全架构
MQ
TT协议笔记之连接和心跳
MQ
TT有关字符串部分采用的修改版的UTF-8编码,CONNECT可变头部中协议名称、消息体都是采用修改版的UTF-8编码。
XLsn0w
·
2024-02-20 00:07
Rabbit
MQ
-Java客户端API指南-上
Rabbit
MQ
-Java客户端API指南-上客户端API严格按照A
MQ
P0-9-1协议规范进行建模,并提供了易于使用的附加抽象。
全能程序猿
·
2024-02-20 00:21
Windows下安装Rabbit
MQ
方式一:使用windowschocolatey自动安装chocoinstallrabbit
mq
方式二:官网手动安装Rabbit
MQ
官网->https://www.rabbit
mq
.com/#getstarted
GaoJamie
·
2024-02-20 00:40
开发工具
java-rabbitmq
rabbitmq
分布式
Spring Cloud Alibaba 实战(八) - 审核业务的分布式事务处理实现
Github博客地址本文主要讲解Rabbit
MQ
的介绍和安装,SpringCloudStream核心概念,SpringCloudAlibabaRocket
MQ
学习,异步消息推送与消费1审核业务的实现com
JavaEdge
·
2024-02-19 23:30
Rocket
MQ
-面试题
1、Rocket
MQ
的特点灵活可扩展性海量消息堆积能力:采用零拷贝原理实现超大的消息的堆积能力支持顺序消息:可以保证消息消费者按照消息发送的顺序对消息进行消费支持事务消息回溯消息2、Rocket
MQ
架构阿里开源的消息中间件
HBryce24
·
2024-02-19 23:00
中间件
java
java-rocketmq
通过
kafka
学习数据一致性
kafka
哪些环节存在数据不一致数据复制数据从主节点(leader)复制到从节点(follower)的过程中,由于网络延迟、节点故障或其他原因可能导致从节点未能及时获取或处理主节点的数据变更,从而产生数据不一致消息提交消息提交涉及多个阶段
~kiss~
·
2024-02-19 23:48
kafka
学习
分布式
Kafka
面试小结一:
Kafka
如何保证消息不丢失?
Kafka
通过以下几种方式来保证消息不丢失:异步发送改为同步发送:
Kafka
生产者默认使用异步发送消息,这意味着生产者会立即继续执行后续操作,而不等待消息发送的结果。
之乎者也·
·
2024-02-19 22:41
Kafka
面试题分享
MQ(Message
Queue)消息队列
内容分享
kafka
分布式
Kafka
Producer/Consumer 关系解释及测试demo
文章目录Producer/Consumer1.餐厅的故事2.
Kafka
的工作方式3.生动的场景4.测试Demo4.1
Kafka
Producer4.2
Kafka
ConsumerProducer/Consumer
Kafka
莫余
·
2024-02-19 22:11
服务器
kafka
分布式
【
MQ
】
kafka
(三)——如何保证消息不丢失?如何解决?
这篇博客,就向大家介绍一下
kafka
在什么情况下会出现消息丢失以及解决方案。二、什么情况会丢失消息?首先我们还是要看一下,
kafka
的架构图:因为我们有三个角色:生产者,broker,消费者。消费
你个佬六
·
2024-02-19 22:09
------【MQ】
kafka
java
分布式
001
kafka
源码项目gradle报错UnsupportedClassVersionError-
kafka
-报错-大数据学习
1报错提示java.lang.UnsupportedClassVersionError:org/eclipse/jgit/lib/AnyObjectIdhasbeencompiledbyamorerecentversionoftheJavaRuntime(classfileversion55.0),thisversionoftheJavaRuntimeonlyrecognizesclassfile
gaog2zh
·
2024-02-19 22:39
大数据
kafka
大数据
kafka
-面试题
1、消息队列如何保证消息可靠性消息不重复生产者控制消费者幂等消息不丢失生产者发送,要确认broker收到并持久化broker确认消费者消费完,再删除消息2、
kafka
是什么
Kafka
是一种高吞吐量、分布式
HBryce24
·
2024-02-19 22:08
java
kafka
Kafka
King 推荐一款漂亮、现代、实用的
kafka
客户端
Kafka
King一个漂亮、现代、实用的
kafka
客户端,使用pythonflet、flutter构建。
bronya0
·
2024-02-19 22:08
kafka
分布式
[AIGC_coze]
Kafka
的主题分区之间的关系
Kafka
的主题分区之间的关系在
Kafka
中,主题(Topics)和分区(Partitions)是两个重要的概念,它们之间存在着密切的关系。主题是
Kafka
中用于数据发布和订阅的逻辑单元。
程序员三木
·
2024-02-19 22:37
AI
AIGC
kafka
分布式
kafka
如何保证消息不丢?
概述我们知道
Kafka
架构如下,主要由Producer、Broker、Consumer三部分组成。一条消息从生产到消费完成这个过程,可以划分三个阶段,生产阶段、存储阶段、消费阶段。
半亩方塘立身
·
2024-02-19 22:07
kafka
中间件
面试
java
消息中间件之Rocket
MQ
源码分析(七)
并行消费和顺序消费ConsumeMessageService是一个通用的消费服务接口,它包含两个实现类org.apache.rocket
mq
.client.impl.consumer.ConsumeMessageConcurrentlyService
coffee_babe
·
2024-02-19 22:58
消息中间件
rocketmq
java
消息中间件
Rocket
MQ
订阅关系不一致和不能消费时如何排查?
可以通过消息id、消息key、消息时间段等任意一个条件在社区提供的Rocket
MQ
Console查找消息。如果查到消息,说明问题在消费者自身。此时消费者
coffee_babe
·
2024-02-19 22:58
消息中间件
rocketmq
java
中间件
消息中间件之Rocket
MQ
源码分析(九)
NamesrvNamesrv核心数据结构和API.Namesrv中保存的数据被称为Topic路由信息,Topic路由决定了Topic消息发送到哪些Broker,消费者从哪些Broker消费消息,那么路由信息都包含哪些数据呢?路由数据结构的实现代码都在RouteInfoManager类中BROKER_CHANNEL_EXPIRED_TIME:Broker存活的事件周期,默认为120stopicQUe
coffee_babe
·
2024-02-19 22:58
消息中间件
rocketmq
java
消息中间件之Rocket
MQ
源码分析(二)
生产者的消息发送流程业务层:通常指直接调用Rocket
MQ
Client发送API的业务代码消息处理层:指Rocket
MQ
Client获取业务发送的消息对象后,一系列的参数检查、消息发送准备、参数包装等操作通信层
coffee_babe
·
2024-02-19 22:57
消息中间件
rocketmq
java
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他