E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
MQ~kafka
SpringA
MQ
P的使用
1.简介:SpringA
MQ
P是基于Rabbit
MQ
封装的一套模板,并且还利用SpringBoot对其实现了自动装配,使用起来非常方便。
盖盖衍上
·
2024-01-16 10:31
中间件
rabbitmq
spring
Rabbit
MQ
详解(值得珍藏)
1.基本概念Rabbit
MQ
是一款开源,使用Erlang编写的,基于A
MQ
P协议的消息中间件;提到Rabbit
MQ
,就不得不提A
MQ
P协议。A
MQ
P协议是具有现代特征的二进制协议。
孤蓬&听雨
·
2024-01-16 10:28
知识库
rabbitmq
ruby
分布式
mq
Kafka
系列(一)
组件概念broker一个
Kafka
的集群通常由多个broker组成,这样才能实现负载均衡、以及容错broker是无状态(Sateless)的,它们是通过ZooKeeper来维护集群状态一个
Kafka
的broker
happystudy_neu
·
2024-01-16 10:20
kafka
分布式
Kafka
用法总结
Kafka
用法总结一、
Kafka
是什么
Kafka
是一个分布式的基于发布/订阅模式的消息队列(MessageQueue),主要应用于大数据实时处理领域。
天选之子123
·
2024-01-16 10:19
kafka
分布式
kafka
系列(二)
本章承接
kafka
一内容,文章在本人博客主页都有,可以自行点击浏览。幂等性请求执行多次,但执行的结果是一致的。如果,某个系统是不具备幂等性的,如果用户重复提交了某个表格,就可能会造成不良影响。
happystudy_neu
·
2024-01-16 10:48
kafka
分布式
Kafka
入门基本概念(详细)
什么是
kafka
Kafka
是一种高吞吐量的分布式发布订阅消息系统(消息引擎系统),它可以处理消费者在网站中的所有动作流数据。
学会用脚编程
·
2024-01-16 10:17
kafka
分布式
10、
Kafka
------ 消费者组 和 消费者实例,分区 和 消费者实例 之间的分配策略
目录消费者组和消费者实例★消费者组★分区和消费者实例★分配分区(分区和消费者实例之间的分配策略)3种分配策略★range策略★round-robin策略(轮询)★stick策略如何指定分配分区的策略:消费者组和消费者实例★消费者组形象来说:你可以把主题内的多个分区当成多个子任务、多个子任务组成项目,每个消费者实例就相当于一个员工,假如你们team包含2个员工。项目主题team(2个员工)5个子任务
_L_J_H_
·
2024-01-16 10:17
Kafka
系列
kafka
分布式
基于Netty实现
Mq
tt客户端(一)-环境搭建
前言在Android开发中,之前一直使用org.eclipse.paho.client.
mq
ttv3包来开发
mq
tt客户端,随之就遇到了线程不回收的难搞问题,还伴随其他一些莫名其妙的问题。
猿小二
·
2024-01-16 09:37
Netty-Mqtt
mqtt
netty
android
java
Android使用
MQ
TT订阅及发布消息((一)初步了解
Mq
tt以及实现Android操作
mq
tt服务)
Android使用
MQ
TT订阅及发布消息((一)初步了解
Mq
tt以及实现Android操作
mq
tt服务)关于
MQ
TT介绍
MQ
TT协议实现方式
MQ
TT服务器
MQ
TT协议中的订阅、主题、会话
MQ
TT协议中的方法
雪の星空朝酱
·
2024-01-16 09:05
研究
android
MQTT
kotlin
即时通讯
消息协议
Android中连接
MQ
TT服务器实现订阅主题并接收消息推送在通知栏显示(附代码下载)
场景Windows上
Mq
tt服务器搭建与使用客户端工具
Mq
ttBox进行测试:https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/112305328SpringBoot
霸道流氓气质
·
2024-01-16 09:35
Android
mqtt
Android 12+
MQ
TT适配
3.gradle导入://
MQ
TTimplementation'org.eclipse.paho:org.eclipse.paho.client.
mq
ttv3:1.2.5'im
奔跑的_迷彩狼
·
2024-01-16 09:34
android
android
mqtt
嵌入式物联网单片机项目开发实例-4G DTU边缘数据采集网关开发
4GCAT1网络TCP和UDP的透传字符串][2.EC200S_STM32F103_4GCAT1网络TCP和UDP的透传十六进制包含0x00][3.EC200S_STM32F103_4GCAT1通过外置
MQ
TT
vx349014857
·
2024-01-16 09:59
产品代码合集
物联网
单片机
嵌入式硬件
开发语言
JVM工作原理与实战(十六):运行时数据区-Java虚拟机栈
专栏导航JVM工作原理与实战Rabbit
MQ
入门指南从零开始了解大数据目录专栏导航前言一、运行时数据区二、Java虚拟机栈1.栈帧的组成2.局部变量表3.操作数栈4.帧数据总结前言JVM作为Java程序的运行环境
橘子-青衫
·
2024-01-16 08:30
JVM工作原理与实战
jvm
java
后端
【设计模式-05】Facade门面Mediator调停者 | Decorator装饰器 | Chain Of Responsibility责任链
Facade门面Mediator调停者1、Facade门面图解2、Mediator调停者一般是系统内部相互交错,比如消息中间件(
MQ
)就是这种设计模式,对各个功能或系统之间进行解耦。
飞鸽FlyGo
·
2024-01-16 08:49
MCA
#
设计模式
设计模式
门面模式
装饰器模式
责任链模式
Flink(十三)【Flink SQL(上)】
今天开始学习Flink最后一部分FlinkSQL,完了还有不少框架得学:
Kafka
、Flume、ClickHouse、Hudi、Azkaban、OOzie...有的算是小工具,不费劲,但是学完得复习啊,
让线程再跑一会
·
2024-01-16 08:33
Flink
flink
大数据
【消息队列
MQ
专栏】Rabbit
MQ
市面上的消息队列产品有很多,比如老牌的Active
MQ
、Rabbit
MQ
,目前我看最火的
Kafka
,还有Zero
MQ
,去年底阿里巴巴捐赠给Apache的Rocket
MQ
,连redis这样的NoSQL数据库也支持
豆奶快攻
·
2024-01-16 07:01
消息队列
消息队列之 Rocket
MQ
简介Rocket
MQ
特点Rocket
MQ
是阿里巴巴在2012年开源的分布式消息中间件,目前已经捐赠给Apache软件基金会,并于2017年9月25日成为Apache的顶级项目。
豆奶快攻
·
2024-01-16 07:31
消息队列
Spring Boot中使用Rabbit
MQ
MessageBroker与A
MQ
P简介MessageBroker是一种消息验证、传输、路由的架构模式,其设计目标主要应用于下面这些场景:消息路由到一个或多个目的地消息转化为其他的表现方式执行消息的聚集
豆奶快攻
·
2024-01-16 07:31
消息队列
Rabbit
MQ
实战-在服务中配置Rabbit
MQ
实现消息发送
加入rabbit
MQ
所需要的依赖:org.springframework.bootspring-boot-starter-a
mq
p同时,我也添加了一些常用依赖org.springframework.bootspring-boot-devtoolsru
豆奶快攻
·
2024-01-16 07:31
消息队列
Rocket
MQ
联合创始人:选择
MQ
时,要注意的有哪些?
Rocket
MQ
是一个来自阿里巴巴的分布式消息中间件,于2012年开源,并在2017年正式成为Apache顶级项目。
豆奶快攻
·
2024-01-16 07:01
消息队列
消息中间件选型分析
消息中间件选型分析——从
Kafka
与Rabbit
MQ
的对比来看全局有很多网友留言:公司要做消息中间件选型,该如何选?你觉得哪个比较好?消息选型的确是一个大论题,实则说来话长的事情又如何长话短说。
豆奶快攻
·
2024-01-16 07:01
消息队列
分布式开放消息系统(Rocket
MQ
)的原理与实践
而谈到消息系统的设计,就回避不了两个问题:消息的顺序问题消息的重复问题Rocket
MQ
作为阿里开源的一款高性能、高吞吐量的消息中间件,它是怎样来解决这两个问题的?Rocket
MQ
有哪些关键特性?
豆奶快攻
·
2024-01-16 07:01
消息队列
Spark Structured Streaming +
Kafka
+Json
org.apache.spark spark-sql-
kafka
-0-10_2.11 2.1.1 org.apache.spark spark-sql_2.11 2.1.1importorg.apache.spark.sql.SparkSessionobjectMyTest
zhangxl-jc
·
2024-01-16 07:00
kafka
spark
spark
kafka
json
StructStreaming整合
Kafka
操作
StructStreaming整合
Kafka
操作Maven依赖org.apache.sparkspark-sql-
kafka
-0-10_2.123.3.1实时数据ETL准备数据/***模拟产生基站日志数据
健鑫.
·
2024-01-16 07:29
spark
kafka
scala
spark
Structured Streaming 整合
Kafka
指南
用于
Kafka
0.10的结构化流式处理集成,用于从
Kafka
读取数据和写入数据。
鸭梨山大哎
·
2024-01-16 07:27
kafka
kafka
Kafka
消费流程
Kafka
消费流程消息是如何被消费者消费掉的。其中最核心的有以下内容。
llp1110
·
2024-01-16 07:24
Kafka
kafka
linq
分布式
PySpark Structured Streaming
kafka
示例
PySparkStructuredStreaming
kafka
示例直接上代码:#!
张行之
·
2024-01-16 07:52
大数据
pyspark
structured
streaming
kafka
python
StructuredStreaming整合
kafka
&Mysql
前言大家好,我是DJ丶小哪吒,我又来跟你们分享知识了。对软件开发有着浓厚的兴趣。喜欢与人分享知识。做博客的目的就是为了能与他人知识共享。由于水平有限。博客中难免会有一些错误。如有纰漏之处,欢迎大家在留言区指正。小编也会及时改正。DJ丶小哪吒续更了。上回简单带领大家简单了解了一下StructuredStreaming,那么这一回,我们就来使用StructuredStreaming整合一些其他的技术。
小哪吒的BD
·
2024-01-16 07:18
大数据
spark
大数据
spark
Structured Streaming配置
Kafka
参数
overridedefstream():DataFrame={val
kafka
Conf=new
Kafka
Configurationvalspark=GxSparkSession().session()valdf
sunyang098
·
2024-01-16 07:18
spark
spark
streaming
kafka
配置
Structured Streaming整合
Kafka
实时统计
StructuredStreaming整合
Kafka
实时统计一、实时ETL启动Zookeeper和
kafka
#启动zookeeperbin/zkServer.shstart#启动
kafka
bin/
kafka
-server-start.sh-daemonconfig
Joker_Jiang3
·
2024-01-16 07:47
大数据
kafka
大数据
kafka
spark
structured streaming+
kafka
异常处理
由于使用structuredstreaming+
kafka
处理数据,任务运行一段时间后就会出现
Kafka
数据无法消费,任务运行正常,但是从日志中看到Thismemberwillleavethegroup
嘘、不语
·
2024-01-16 07:46
kafka
如何保证
Kafka
不丢失消息
生产者丢失消息的情况消费者丢失消息的情况
Kafka
弄丢了消息生产者丢失消息的情况生产者(Producer)调用send方法发送消息之后,消息可能因为网络问题并没有发送过去。
豆奶快攻
·
2024-01-16 06:15
Kafka
消息队列
分布式
kafka
linq
数据库
Structured_Streaming和
Kafka
整合
结构化编程模型输出终端/位置默认情况下,Spark的结构化流支持多种输出方案:1-consolesink:将结果数据输出到控制台。主要是用在测试中,并且支持3种输出模式2-Filesink:输出到文件。将结果数据输出到某个目录下,形成文件数据。只支持append模式3-foreachsink和foreachBatchsink:将数据进行遍历处理。遍历后输出到哪里,取决于自定义函数。并且支持3种输出
小希 fighting
·
2024-01-16 06:14
kafka
分布式
spark
大数据
Kafka
集群的安装与配置
一、安装JDK1、在usr目录下新建Java目录,然后将下载的JDK拷贝到这个新建的Java目录中1创建目录命令:mkdir/usr/java2、进入到Java目录中解压下载的JDK解压命令:tar-zxvfjdk-18_linux-x64_bin.tar.gz在1主机上,将安装包分发到其他机器scp-r/opt/jdk1.8/node2:/opt/3、设置环境变量设置命令:vim/etc/pro
ole_triangle_java
·
2024-01-16 06:05
kafka
分布式
rabbit
mq
基础3——配置文件、参数策略Parameter和Policy、Federation插件、联邦交换器
文章目录一、rabbit
mq
配置1.1环境变量1.1.1默认内置规则1.1.2Shell环境变量1.1.3常见环境变量1.2配置文件1.2.1rabbit
mq
.conf文件下载流程1.2.2常用配置项1.2.2.1
百慕卿君
·
2024-01-16 06:23
rabbitmq
rabbitmq
分布式
linux
运维
python示例中讲解_Python中qutip用法示例详解
一、N原子系综自旋概率分布fro
mq
utipimport*importnumpyasnpimportma
weixin_39689394
·
2024-01-16 06:04
python示例中讲解
Clickhouse引擎之
kafka
Clickhouse
kafka
引擎需要结合
kafka
使用,需要确保已经安装clickhouse和
kafka
实战环境:Clickhouse-server版本:22.4.5
Kafka
版本:
kafka
_2.13
pokefade
·
2024-01-16 05:15
kafka
clickhouse
java
clickhouse MergeTree 常用表引擎
CollapsingMergeTreeVersionedCollapsingMergeTreeAggregatingMergeTreeSummingMergeTreeRelacingMergeTreeReplicationReplicatedMergeTree集成引擎
kafka
guaoran
·
2024-01-16 05:41
ClickHouse
数据库
clickhouse
Clickhouse集成离线hive、实时
kafka
数据实操
Clickhouse集成hive一、官网介绍:1、clickhouse集成hive、
kafka
官网介绍:2、clickhouse支持的数据类型:二、创建对应hive的clickhouse表1、利用clickhouse
静听枫语
·
2024-01-16 05:11
大数据
hive
数据仓库
big
data
kafka
seatunnel 消费
kafka
数据写入clickhouse
今天使用seatunnel消费
kafka
topic数据写入clickhouseseatunnel:2.1.0spark:2.4.
冰帆<
·
2024-01-16 05:41
seatunel
大数据
大数据
Rabbit
MQ
交换机(2)-Direct
1.Direct直连(路由)交换机,生产者将消息发送到交换机,并指定消息的RoutingKey(路由键)。交换机会将RoutingKey与队列绑定进行匹配,如果匹配成功,则将该消息路由到对应的队列中。如果没有匹配成功,该消息将被丢弃或返回给生产者。在Direct模式中,每个消息只能被一个消费者接收。通过使用Exchange和RoutingKey来进行消息传输,Direct模式实现了消息的有选择性地
Java小生不才
·
2024-01-16 05:39
中间件
Spring
Boot
Java
rabbitmq
java
关于Spring Boot中spring-boot-starter依赖包和应用
2、spring-boot-starter-a
mq
p是通过spring-rabbit来支持A
MQ
P协议(AdvancedMessageQueuingProtocol)3、spring-boot-starter-aop
CopyLower
·
2024-01-16 05:32
Java
spring
boot
java
Kafka
和Flink:构建高吞吐量的实时数据流处理系统
Apache
Kafka
和ApacheFlink是两个非常重要的开源项目,它们分别是一个分布式流处理平台和一个流处理框架。
OpenChat
·
2024-01-16 05:20
AI大模型应用入门实战与进阶
AI大模型企业级应用开发实战
LLM大模型落地实战指南
大数据
人工智能
语言模型
AI
LLM
Java
Python
架构设计
Agent
RPA
Rocket
MQ
-消息存储基本架构及存储流程
文章目录整体架构存储文件介绍设计思路存储流程写入MappedFile消息刷盘主从同步消息存储是Rocket
MQ
中最为复杂和最为重要的一部分,本文会简单介绍下Rocket
MQ
的消息存储整体架构、以及发送一条消息时的基本存储流程整体架构存储文件介绍消息存储的架构设计中
hosaos
·
2024-01-16 05:44
RocketMQ
RocketMq
存储
commitlog
全网最细Rocket
MQ
源码四:消息存储
SendMessageProcessor.processRequestprivateCompletableFutureasyncSendMessage(ChannelHandlerContextctx,RemotingCommandrequest,SendMessageContext
mq
traceCon
上海第一shen 深情
·
2024-01-16 05:11
#
精通RocketMQ
rocketmq
Kafka
部署及使用
kafka
四个核心概念:producer、consumer、broker、topic启动zk下载zkzookeeper-3.4.5-cdh5.7.0.tar.gz解压:tar-zxvfzookeeper
Sx_Ren
·
2024-01-16 05:15
定位消息
寻找最新的offsetdefget_latest_offset():topic=f'{get_env_tag()}_broker_rateRule'_consumer=
Kafka
Consumer(bootstrap_servers
Mr韩_xianfeng
·
2024-01-16 03:37
Rabbit
MQ
消息队列Android的实现方式之接收(二)
上一期说了Rabbit
MQ
发送消息的方法,这部分发一下接收和关闭连接的方法实现,废话少说直接上代码。
自由自在_Android
·
2024-01-16 03:16
zookeeper 从是啥到咋用
2、zookeeper下载安装下载安装参考之前搭建
Kafka
集群的博客:
kafka
丢弃zookeeper,使用kraft架构-CSDN博客3、zookeeper几种状态1)、LOOKING:参加竞选状态
知其_所以然
·
2024-01-16 03:05
java技术
zookeeper
zookeeper
Kafka
之生产者(Producer)
main线程将消息发送给RecordAccumulator,Sender线程不断从RecordAccumulator中拉取消息发送到
Kafka
Broker。
知其_所以然
·
2024-01-16 03:05
kafka
分布式
上一页
50
51
52
53
54
55
56
57
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他