pulsar消息队列消息中间件

Apache Pulsar 在腾讯 Angel PowerFL 联邦学习平台上的实践

腾讯AngelPowerFL联邦学习平台联邦学习作为新一代人工智能基础技术，通过解决数据隐私与数据孤岛问题，重塑金融、医疗、城市安防等领域。腾讯AngelPowerFL联邦学习平台构建在Angel机器学习平台上，利用Angel-PS支持万亿级模型训练的能力，将很多在Worker上的计算提升到PS（参数服务器）端；AngelPowerFL为联邦学习算法提供了计算、加密、存储、状态同步等基本操作接口，
StreamNative·2024-02-07 11:24

牛逼哄哄的消息队列到底有什么用？

在面试大型互联网公司的时候，经常被问到消息队列的三个问题：1、在何种场景下使用了消息中间件？2、为什么要在系统里引入消息中间件？3、如何实现幂等？想解决这些问题？那咱们继续看下看。
Java机械师·2024-02-07 10:13

一篇文章理解 “进程间通信“

一个进程需要向另一个或一组进程发送消息，通知它（它们）发生了某种事件（如进程终止时要通知父进程）进程控制：有些场景下需要一个进程去控制另外一个进程进程间通信的分类管道匿名管道pipe命名管道SystemVIPCsystemV消息队列
高高__·2024-02-07 09:04

spring cloud stream

背景主要解决不同消息中间件切换问题。实现不同中间件的代码解耦。链接:支持的中间件后文使用kafka测试。
此剑之势丶愈斩愈烈·2024-02-07 08:56

【中间件学习】什么是中间件

什么是中间件前言业务系统中非业务逻辑的通用性核心功能出来，逐步形成中间件服务中间件：介于操作系统和应用软件之间，为应用软件提供服务功能的软件，有消息中间件，通信中间件，应用服务器。
少写代码少看论文多多睡觉·2024-02-07 08:12

RocketMQ消息发送的设计

具体的可查看：RocketMQ的主要组件及其功能在接下来的关于RocketMQ的消息发送的文章中，可以带着几个问题来阅读：1、RocketMQ的消息队列是如何负载的？
NullzzZ·2024-02-07 07:53

写出三种进程间通信的代码示例

目录无名管道共享内存消息队列无名管道#includeintmain(intargc,constchar*argv[]){//定义进程号变量pid_tpid=-1;//定义存放管道文件描述符的数组intpipefd
腾飞810·2024-02-07 05:37

IdleHandler的简单认识

主线程的空闲时间通常是在处理完当前的UI事件和消息队列后，等待下一个事件到来之前的时间段。IdleHandler适用于一些不紧急、不影响用户体验的后台任务。
呆咖啡·2024-02-07 02:08

【云栖风向标】VOL.5：横空出世！热修复方案Sophix

【资料合集】2017云栖大会·上海峰会回顾合集：PDF下载+现场视频3.CCAI讲师专访|TobyWalsh：用AI提高器官移植的成功率4.Aliware-MQ消息队列
weixin_34228617·2024-02-07 00:09

开发中Docker常用容器记录

开发中Docker常用容器记录概览分享工作学习中常用的Docker容器使用：比如常用数据库的使用消息队列类的使用用于服务发现的容器使用还有其他工作学习中使用到的持续更新：https://juejin.cn
_萧_·2024-02-07 00:37

Apache Kafka: 强大消息队列系统的介绍与使用

在这样的背景下，诞生了一系列分布式消息队列系统，其中ApacheKafka无疑是最受欢迎和广泛应用的之一。本文将深入介绍ApacheKafka的基本概念、核心架构以及在实际应用中的使用。一、
达芬奇要当程序员·2024-02-06 22:53

消息队列：分布式系统中的重要组件

目录摘要引言1.1什么是消息队列1.2消息队列的重要性消息队列的特点2.1异步通信2.2解耦合2.3持久性消息队列的应用场景3.1异步任务处理3.2系统解耦3.3流量削峰常见的消息队列系统4.1RabbitMQ4.2ApacheKafka4.3ActiveMQ
达芬奇要当程序员·2024-02-06 22:52

RabbitMQ：分布式系统中的高效消息队列

目录摘要RabbitMQ简介1.1背景与起源1.2核心概念RabbitMQ的基本工作原理2.1生产者和消费者2.2队列2.3交换机和绑定RabbitMQ的使用3.1安装与配置3.2生产者示例3.3消费者示例3.4异常处理与监控RabbitMQ在实际应用中的场景4.1消息通知4.2任务队列4.3日志收集RabbitMQ的优势与挑战5.1优势5.2挑战未来展望6.1发展趋势6.2社区和生态系统结论摘要
达芬奇要当程序员·2024-02-06 22:22

redis订阅发布模式、持久化、事务

redis订阅发布模式redis可以做消息中间件（MQ=messagequeue）,通常通过订阅发布模式来实现（消息订阅发布模式），还可以基本数据类型Lists实现（点到点模式，可以使用lpush,rpop
...狂风...·2024-02-06 21:12

初识RabbitMQ

一、消息队列1、消息队列的介绍在介绍RabbitMQ之前，首先来介绍下消息队列。消息队列是生产者-消费者模型的一个典型的代表，由一端往消息队列中不断的写入消息，而另一端则可以读取或者订阅队列中的消息。
姚舜禹_12140·2024-02-06 21:33

Redis 持久化对性能有何影响？

Redis持久化对性能的影响Redis是一个高性能的内存数据存储系统，通常被用于缓存、消息队列和数据存储等方面。由于Redis是基于内存的，因此它的读写速度非常快，可以满足高并发、低延迟的应用需求。
恒创HengHost·2024-02-06 21:54

程序员小白需要看哪些书

Java基础篇书单专题二：代码优化篇书单专题三：计算机网络篇书单专题四：操作系统&&计算机底层书单专题五：数据结构与算法篇书单专题六：缓存篇书单专题七：数据库书单专题八：微服务&&分布式篇书单专题九：消息中间件书单专题十
程序猿的果壳·2024-02-06 16:21

第3节-Redis数据类型介绍以及应用

RedisStream主要用于消息队列（MQ，Message
白给的阿威·2024-02-06 14:53

Spring和Spring Boot的区别

复杂性：Spring是一个庞大且功能丰富的框架，它提供了大量的功能和模块，包括依赖注入、AOP、JDBC、消息队列、事务管理等等。
独木人生·2024-02-06 12:58

Linux中有名管道和无名管道

无名管道基础进程间通信介绍常用通信方式无名管道（pipe）有名管道（fifo）信号（signal）共享内存(mmap)套接字（socket）过时的IPC通信方式SystemVIPC共享内存（sharememory）消息队列
程序猿莫悔·2024-02-06 12:54

关于RabbitMQ面试题汇总

什么是消息队列？消息队列有什么用？消息队列是一种在应用程序之间传递消息的通信机制。它是一种典型的生产者-消费者模型，其中生产者负责生成消息并将其发送到队列中，而消费者则从队列中获取消息并进行处理。
lose_rose777·2024-02-06 09:28

RabbitMQ-1.介绍与安装

1.2.2.队列1.2.3.绑定关系1.2.4.发送消息1.2.数据隔离1.2.1.用户管理1.2.3.virtualhost1.RabbitMQ1.0.技术选型消息Broker，目前常见的实现方案就是消息队列
中二Espresso·2024-02-06 09:25

RabbitMQ高级篇

消息队列在使用过程中，面临着很多实际问题需要思考：一、消息可靠性消息从发送，到消费者接收，会经历多个过程：其中的每一步都可能导致消息丢失，常见的丢失原因包括：发送时丢失：生产者发送的消息未送达exchange
希昂的学习日记·2024-02-06 09:22

RTthread线程间通信(邮箱,消息队列,信号/软件中断)---03信号(软件中断)源码分析

信号实际使用看这一个#ifdefined(RT_USING_SIGNALS)rt_sigset_tsig_pending;/**sig_vectors==RT_NULL){//这一个线程之前没有安转过rt_thread_alloc_sig(tid);}if(tid->sig_vectors){old=tid->sig_vectors[signo];if(handler==SIG_IGN)tid->
唐·柯里昂798·2024-02-06 09:15

kafka基本概念

文章目录前言为什么需要KafkaKafka的优势Kafka应用场景Kafka消费模式Kafka的基础架构前言我们小猿在学习到kafka这门技术的时候，相信大家已经学习过其它消息队列中间件，例如RabbitMq
欲无缘·2024-02-06 07:58

TCP和UDP的区别经典面试题

在收发数据前必须和对方建立可靠的连接，建立连接的3次握手、断开连接的4次挥手，为数据传输打下可靠基础;UDP是一个面向无连接的协议，数据传输前，源端和终端不建立连接，发送端尽可能快的将数据扔到网络上，接收端从消息队列中读取消息段
光影少年·2024-02-06 07:13

C#进程间消息传递

C#提供了多种方式来进行进程间消息传递，包括管道、共享内存、消息队列等。在本文中，我们将介绍C#中的进程间消息传递的一些常用方法和技巧。首先，让我们来简要介绍一下进程间消息传递的概念。
华山自控编程·2024-02-06 07:02

Linux操作系统下安装消息中间件RabbitMQ_00000

下载在官网下载Linux版RabbitMQ安装文件。erlang-21.3-1.el7.x86_64.rpmrabbitmq-server-3.8.8-1.el7.noarch.rpm安装1、将文件上传至Linux系统中。上传到/usr/local/software目录下（如果没有software目录，则创建。）。2、安装文件（按照以下顺序安装。）。rpm-ivherlang-21.3-1.el7
wisdom_a·2024-02-06 06:12

0203作业

3.消息队列（MessageQueue）：-优点：可以实现异步通信，不需要进程阻塞等待。4.共享内存（SharedMemory）：-优点：高效的数据传输，不需要进行数据复制。
JeromeSahara·2024-02-06 06:05

0204作业

向消息队列中写入数据#include//定义一个发送消息的结构体类型structmsgbuf{longmtype;//消息类型charmtext[1024];//消息正文大小};//宏定义消息正文的大小
JeromeSahara·2024-02-06 06:05

RocketMQ和Kafka的区别，以及如何保证消息不丢失和重复消费

消息队列RocketMQ和Kafka的区别性能（单台）语言多语言支持客户端优缺点RocketMQ十万级javajava模型简单、接口易用，在阿里有大规模应用文档少，支持的语言少Kafka百万级服务端scala
Marciaguoguo·2024-02-06 04:38

RabbitMQ 和 com.google.common.cache 的用法

1、RabbitMQ实时监听消费消息队列2、使用缓存减轻数据库压力packagecom.chinaso.modules.rank.mq;importcom.alibaba.fastjson.JSONObject
程博颖·2024-02-06 00:03

《Python 网络爬虫简易速速上手小册》第8章：分布式爬虫设计（2024 最新版）

文章目录8.1分布式爬虫的架构8.1.1重点基础知识讲解8.1.2重点案例：使用Scrapy和Scrapy-Redis构建分布式爬虫8.1.3拓展案例1：使用Kafka作为消息队列8.1.4拓展案例2：
江帅帅·2024-02-05 23:47

MQ,RabbitMQ,SpringAMQP的原理与实操

而如果不需要对方的结果，且吞吐量，并发量较高则需要使用异步通信MQ常见框架MQ(MessageQueue)，消息队列，字面来看就是存放消息的队列，也就是事件驱动架构中的Broker消息：就是事件，比如支付成功了这个事件
程序员老周666·2024-02-05 23:03

消息中间件之RocketMQ源码分析(五)

消费进度保存机制消费者启动时会同时启动位点管理器，RocketMQ设计了远程位点管理和本地位点管理两种位点管理方式.集群消费时，位点由客户端提交给Broker保存.广播消费时，位点保存在消费者本地磁盘上OffsetStore接口核心方法voidload():加载位点信息voidupdateOffset():更新缓存位点信息longreadOffset():读取本地位点信息voidpersistAl
coffee_babe·2024-02-05 20:57

消息队列实现进程之间通信

1.消息队列号100进程端#include//消息结构体structmsgbuf{longintmtype;//消息类型charmtext[1024];//消息内容};不需要消息类型的大小#defineMSGSIZEsizeof
sadjjkj·2024-02-05 19:07

解决Android11上无法通过AIDL传递MQDescriptor从而无法使用FMQ快速消息队列的方法

前言在使用FMQ快速消息队列时，一端创建了消息队列后，需要获得MQDescriptorSync或MQDescriptorUnsync对象并传递给另一端。
汤圆拓海·2024-02-05 19:52

RocketMQ消息队列（一）—— 基本概念和消息类型

  RocketMQ是一个来自阿里巴巴的分布式消息中间件，于2012年开源，并在2017年正式成为Apache顶级项目。
断剑zou天涯·2024-02-05 18:05

2024.2.2 模拟实现 RabbitMQ —— 需求分析

目录引言生产者消费者模型作用消息队列核心概念BrokerServer内部关键概念BrokerServer核心API交换机（Exchange）类型关于持久化关于网络通信总结引言问题：什么是消息队列（MessageQueue
茂大师·2024-02-05 12:05

2024.2.4 模拟实现 RabbitMQ —— 实现核心类

实体类引言上图为模块设计图此处实现核心类为了简便，我们引用Lombok（可点击下方链接了解Lombok的使用）IDEA配置Lombok创建SpringBoot项目1、创建一个SpringBoot项目并创建相应的目录结构注意：消息队列中存在下列比较核心的概念交换机
茂大师·2024-02-05 12:02

SpringCloud-消息驱动(Stream、生产者、消费者)

SpringCloud消息驱动StreamSpringCloudStream，的诞生是为了解决各种消息中间件之间的兼容性问题，学习过消息中间件的同学都知道现在市面上流行的消息中间件有ActiveMQ、RabbitMQ
JolyouLu·2024-02-05 12:30

python Celery 中处理 Redis 消息队列中的死信

在Celery中处理Redis消息队列中的死信（DeadLetter），您可以使用Celery的任务重试和消息死信队列功能。
田猿笔记·2024-02-05 11:54

go消息队列RabbitMQ - 订阅模式-topic

1.介绍话题模式，一个消息被多个消费者获取，消息的目标queue可用BindingKey以通配符，（#：一个或多个词，*：一个词）的方式指定Topic类型的Exchange与Direct相比，都是可以根据RoutingKey把消息路由到不同的队列。只不过Topic类型Exchange可以让队列在绑定Routingkey的时候使用通配符！通配符规则：#：匹配一个或多个词*：匹配不多不少恰好1个词举例
流光影下·2024-02-05 11:57

go消息队列RabbitMQ - 订阅模式-direct

1.发布订阅在Fanout模式中，一条消息，会被所有订阅的队列都消费。但是，在某些场景下，我们希望不同的消息被不同的队列消费。这时就要用到Direct类型的Exchange。在Direct模型下：队列与交换机的绑定，不能是任意绑定了，而是要指定一个RoutingKey（路由key）消息的发送方在向Exchange发送消息时，也必须指定消息的RoutingKey。Exchange不再把消息交给每一个
流光影下·2024-02-05 11:55

go消息队列RabbitMQ - 订阅模式-fanout

1、发布订阅订阅模式，消息被路由投递给多个队列，一个消息被多个消费者获取。1）可以有多个消费者2）每个消费者有自己的queue（队列）3）每个队列都要绑定到Exchange（交换机）4）生产者发送的消息，只能发送到交换机，交换机来决定要发给哪个队列，生产者无法决定。5）交换机把消息发送给绑定过的所有队列6）队列的消费者都能拿到消息。实现一条消息被多个消费者消费相关场景:邮件群发,群聊天,广播(广告
leellun·2024-02-05 10:49

kafka高可用(集群)

这是天然的分布式消息队列。实时上rabbitmq并不分布式消息队列，他就是传统的消息对了，只不过提供了一些集群，HA的机制而已，因为
GoslingWu·2024-02-05 09:13

消息队列三｜Kafka 如何做到高可用？

我们在之前的文章中，聊到了redis的高可用机制。本篇文章中我们聊聊Kafka如何做到高可用副本？说到Kafka的高可用保障，自然都会想到副本。什么是副本呢？副本是分布式系统对数据和服务提供的一种冗余方式。Kafka从0.8版本开始为分区引入了多副本的机制，通过增加副本数量来提升数据容灾的能力。并且通过多副本机制实现故障的自动转移，在kafka集群中某个broker节点失效的情况下仍然能保持服务可
不落叶的榕树·2024-02-05 09:11

kafka基本原理

一、kafka概述1、定义kafka是一个分布式的基于发布订阅模式的消息队列，主要用于大数据实时处理灵越2、消息队列【1】应用场景用于异步、削峰、解耦【2】两种模式（1）点对点模式一对一，消费者主动拉取数据
会飞的大鱼吃小鱼·2024-02-05 08:59

异步八种方式提高性能

异步的八种实现方式线程ThreadFuture异步框架CompletableFutureSpring注解@AsyncSpringApplicationEvent事件消息队列第三方异步框架，比如Hutool
A尘埃·2024-02-05 08:33

MQTT环境搭建

MQTT（MessageQueuingTelemetryTransport，消息队列遥测传输）。MQTT是ISO标准（ISO/IECPRF20922）下基于发布/订阅范式的消息协议。
乐观的lishan·2024-02-05 06:17
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他