消息队列&日志处理第7页

RocketMQ消息发送的设计

具体的可查看：RocketMQ的主要组件及其功能在接下来的关于RocketMQ的消息发送的文章中，可以带着几个问题来阅读：1、RocketMQ的消息队列是如何负载的？

NullzzZ·2024-02-07 07:53

写出三种进程间通信的代码示例

目录无名管道共享内存消息队列无名管道#includeintmain(intargc,constchar*argv[]){//定义进程号变量pid_tpid=-1;//定义存放管道文件描述符的数组intpipefd

腾飞810·2024-02-07 05:37

IdleHandler的简单认识

主线程的空闲时间通常是在处理完当前的UI事件和消息队列后，等待下一个事件到来之前的时间段。IdleHandler适用于一些不紧急、不影响用户体验的后台任务。

呆咖啡·2024-02-07 02:08

【云栖风向标】VOL.5：横空出世！热修复方案Sophix

【资料合集】2017云栖大会·上海峰会回顾合集：PDF下载+现场视频3.CCAI讲师专访|TobyWalsh：用AI提高器官移植的成功率4.Aliware-MQ消息队列

weixin_34228617·2024-02-07 00:09

开发中Docker常用容器记录

开发中Docker常用容器记录概览分享工作学习中常用的Docker容器使用：比如常用数据库的使用消息队列类的使用用于服务发现的容器使用还有其他工作学习中使用到的持续更新：https://juejin.cn

_萧_·2024-02-07 00:37

Apache Kafka: 强大消息队列系统的介绍与使用

在这样的背景下，诞生了一系列分布式消息队列系统，其中ApacheKafka无疑是最受欢迎和广泛应用的之一。本文将深入介绍ApacheKafka的基本概念、核心架构以及在实际应用中的使用。一、

达芬奇要当程序员·2024-02-06 22:53

消息队列：分布式系统中的重要组件

目录摘要引言1.1什么是消息队列1.2消息队列的重要性消息队列的特点2.1异步通信2.2解耦合2.3持久性消息队列的应用场景3.1异步任务处理3.2系统解耦3.3流量削峰常见的消息队列系统4.1RabbitMQ4.2ApacheKafka4.3ActiveMQ

达芬奇要当程序员·2024-02-06 22:52

RabbitMQ：分布式系统中的高效消息队列

目录摘要RabbitMQ简介1.1背景与起源1.2核心概念RabbitMQ的基本工作原理2.1生产者和消费者2.2队列2.3交换机和绑定RabbitMQ的使用3.1安装与配置3.2生产者示例3.3消费者示例3.4异常处理与监控RabbitMQ在实际应用中的场景4.1消息通知4.2任务队列4.3日志收集RabbitMQ的优势与挑战5.1优势5.2挑战未来展望6.1发展趋势6.2社区和生态系统结论摘要

达芬奇要当程序员·2024-02-06 22:22

初识RabbitMQ

一、消息队列1、消息队列的介绍在介绍RabbitMQ之前，首先来介绍下消息队列。消息队列是生产者-消费者模型的一个典型的代表，由一端往消息队列中不断的写入消息，而另一端则可以读取或者订阅队列中的消息。

姚舜禹_12140·2024-02-06 21:33

Redis 持久化对性能有何影响？

Redis持久化对性能的影响Redis是一个高性能的内存数据存储系统，通常被用于缓存、消息队列和数据存储等方面。由于Redis是基于内存的，因此它的读写速度非常快，可以满足高并发、低延迟的应用需求。

恒创HengHost·2024-02-06 21:54

第3节-Redis数据类型介绍以及应用

RedisStream主要用于消息队列（MQ，Message

白给的阿威·2024-02-06 14:53

springboot项目个人博客总结

SpringBoot个人博客1、需求与功能1.1用户故事1.2功能规划2、页面设计与开发2.1设计2.1.1首页2.2页面开发2.3插件集成3、框架搭建3.1构建与配置3.2异常处理thymeleft头引用3.3日志处理

m78探索者·2024-02-06 14:31

Spring和Spring Boot的区别

复杂性：Spring是一个庞大且功能丰富的框架，它提供了大量的功能和模块，包括依赖注入、AOP、JDBC、消息队列、事务管理等等。

独木人生·2024-02-06 12:58

Linux中有名管道和无名管道

无名管道基础进程间通信介绍常用通信方式无名管道（pipe）有名管道（fifo）信号（signal）共享内存(mmap)套接字（socket）过时的IPC通信方式SystemVIPC共享内存（sharememory）消息队列

程序猿莫悔·2024-02-06 12:54

关于RabbitMQ面试题汇总

什么是消息队列？消息队列有什么用？消息队列是一种在应用程序之间传递消息的通信机制。它是一种典型的生产者-消费者模型，其中生产者负责生成消息并将其发送到队列中，而消费者则从队列中获取消息并进行处理。

lose_rose777·2024-02-06 09:28

RabbitMQ-1.介绍与安装

1.2.2.队列1.2.3.绑定关系1.2.4.发送消息1.2.数据隔离1.2.1.用户管理1.2.3.virtualhost1.RabbitMQ1.0.技术选型消息Broker，目前常见的实现方案就是消息队列

中二Espresso·2024-02-06 09:25

RabbitMQ高级篇

消息队列在使用过程中，面临着很多实际问题需要思考：一、消息可靠性消息从发送，到消费者接收，会经历多个过程：其中的每一步都可能导致消息丢失，常见的丢失原因包括：发送时丢失：生产者发送的消息未送达exchange

希昂的学习日记·2024-02-06 09:22

RTthread线程间通信(邮箱,消息队列,信号/软件中断)---03信号(软件中断)源码分析

信号实际使用看这一个#ifdefined(RT_USING_SIGNALS)rt_sigset_tsig_pending;/**sig_vectors==RT_NULL){//这一个线程之前没有安转过rt_thread_alloc_sig(tid);}if(tid->sig_vectors){old=tid->sig_vectors[signo];if(handler==SIG_IGN)tid->

唐·柯里昂798·2024-02-06 09:15

kafka基本概念

文章目录前言为什么需要KafkaKafka的优势Kafka应用场景Kafka消费模式Kafka的基础架构前言我们小猿在学习到kafka这门技术的时候，相信大家已经学习过其它消息队列中间件，例如RabbitMq

欲无缘·2024-02-06 07:58

TCP和UDP的区别经典面试题

在收发数据前必须和对方建立可靠的连接，建立连接的3次握手、断开连接的4次挥手，为数据传输打下可靠基础;UDP是一个面向无连接的协议，数据传输前，源端和终端不建立连接，发送端尽可能快的将数据扔到网络上，接收端从消息队列中读取消息段

光影少年·2024-02-06 07:13

C#进程间消息传递

C#提供了多种方式来进行进程间消息传递，包括管道、共享内存、消息队列等。在本文中，我们将介绍C#中的进程间消息传递的一些常用方法和技巧。首先，让我们来简要介绍一下进程间消息传递的概念。

华山自控编程·2024-02-06 07:02

0203作业

3.消息队列（MessageQueue）：-优点：可以实现异步通信，不需要进程阻塞等待。4.共享内存（SharedMemory）：-优点：高效的数据传输，不需要进行数据复制。

JeromeSahara·2024-02-06 06:05

0204作业

向消息队列中写入数据#include//定义一个发送消息的结构体类型structmsgbuf{longmtype;//消息类型charmtext[1024];//消息正文大小};//宏定义消息正文的大小

JeromeSahara·2024-02-06 06:05

RocketMQ和Kafka的区别，以及如何保证消息不丢失和重复消费

消息队列RocketMQ和Kafka的区别性能（单台）语言多语言支持客户端优缺点RocketMQ十万级javajava模型简单、接口易用，在阿里有大规模应用文档少，支持的语言少Kafka百万级服务端scala

Marciaguoguo·2024-02-06 04:38

RabbitMQ 和 com.google.common.cache 的用法

1、RabbitMQ实时监听消费消息队列2、使用缓存减轻数据库压力packagecom.chinaso.modules.rank.mq;importcom.alibaba.fastjson.JSONObject

程博颖·2024-02-06 00:03

《Python 网络爬虫简易速速上手小册》第8章：分布式爬虫设计（2024 最新版）

文章目录8.1分布式爬虫的架构8.1.1重点基础知识讲解8.1.2重点案例：使用Scrapy和Scrapy-Redis构建分布式爬虫8.1.3拓展案例1：使用Kafka作为消息队列8.1.4拓展案例2：

江帅帅·2024-02-05 23:47

MQ,RabbitMQ,SpringAMQP的原理与实操

而如果不需要对方的结果，且吞吐量，并发量较高则需要使用异步通信MQ常见框架MQ(MessageQueue)，消息队列，字面来看就是存放消息的队列，也就是事件驱动架构中的Broker消息：就是事件，比如支付成功了这个事件

程序员老周666·2024-02-05 23:03

消息队列实现进程之间通信

1.消息队列号100进程端#include//消息结构体structmsgbuf{longintmtype;//消息类型charmtext[1024];//消息内容};不需要消息类型的大小#defineMSGSIZEsizeof

sadjjkj·2024-02-05 19:07

解决Android11上无法通过AIDL传递MQDescriptor从而无法使用FMQ快速消息队列的方法

前言在使用FMQ快速消息队列时，一端创建了消息队列后，需要获得MQDescriptorSync或MQDescriptorUnsync对象并传递给另一端。

汤圆拓海·2024-02-05 19:52

RocketMQ消息队列（一）—— 基本概念和消息类型

RocketMQ是一个来自阿里巴巴的分布式消息中间件，于2012年开源，并在2017年正式成为Apache顶级项目。据了解，包括阿里云上的消息产品以及收购的子公司在内，阿里集团的消息产品全线都运行在RocketMQ上，并且最近几年的双十一大促中，RocketMQ都有十分优秀的表现。ApacheRocketMQ4.3以后得版本正式支持事务消息，为分布式事务实现提供便利性支持。一、RocketMQ

断剑zou天涯·2024-02-05 18:05

2024.2.2 模拟实现 RabbitMQ —— 需求分析

目录引言生产者消费者模型作用消息队列核心概念BrokerServer内部关键概念BrokerServer核心API交换机（Exchange）类型关于持久化关于网络通信总结引言问题：什么是消息队列（MessageQueue

茂大师·2024-02-05 12:05

2024.2.4 模拟实现 RabbitMQ —— 实现核心类

实体类引言上图为模块设计图此处实现核心类为了简便，我们引用Lombok（可点击下方链接了解Lombok的使用）IDEA配置Lombok创建SpringBoot项目1、创建一个SpringBoot项目并创建相应的目录结构注意：消息队列中存在下列比较核心的概念交换机

茂大师·2024-02-05 12:02

python Celery 中处理 Redis 消息队列中的死信

在Celery中处理Redis消息队列中的死信（DeadLetter），您可以使用Celery的任务重试和消息死信队列功能。

田猿笔记·2024-02-05 11:54

go消息队列RabbitMQ - 订阅模式-topic

1.介绍话题模式，一个消息被多个消费者获取，消息的目标queue可用BindingKey以通配符，（#：一个或多个词，*：一个词）的方式指定Topic类型的Exchange与Direct相比，都是可以根据RoutingKey把消息路由到不同的队列。只不过Topic类型Exchange可以让队列在绑定Routingkey的时候使用通配符！通配符规则：#：匹配一个或多个词*：匹配不多不少恰好1个词举例

流光影下·2024-02-05 11:57

go消息队列RabbitMQ - 订阅模式-direct

1.发布订阅在Fanout模式中，一条消息，会被所有订阅的队列都消费。但是，在某些场景下，我们希望不同的消息被不同的队列消费。这时就要用到Direct类型的Exchange。在Direct模型下：队列与交换机的绑定，不能是任意绑定了，而是要指定一个RoutingKey（路由key）消息的发送方在向Exchange发送消息时，也必须指定消息的RoutingKey。Exchange不再把消息交给每一个

流光影下·2024-02-05 11:55

go消息队列RabbitMQ - 订阅模式-fanout

1、发布订阅订阅模式，消息被路由投递给多个队列，一个消息被多个消费者获取。1）可以有多个消费者2）每个消费者有自己的queue（队列）3）每个队列都要绑定到Exchange（交换机）4）生产者发送的消息，只能发送到交换机，交换机来决定要发给哪个队列，生产者无法决定。5）交换机把消息发送给绑定过的所有队列6）队列的消费者都能拿到消息。实现一条消息被多个消费者消费相关场景:邮件群发,群聊天,广播(广告

leellun·2024-02-05 10:49

kafka高可用(集群)

这是天然的分布式消息队列。实时上rabbitmq并不分布式消息队列，他就是传统的消息对了，只不过提供了一些集群，HA的机制而已，因为

GoslingWu·2024-02-05 09:13

消息队列三｜Kafka 如何做到高可用？

我们在之前的文章中，聊到了redis的高可用机制。本篇文章中我们聊聊Kafka如何做到高可用副本？说到Kafka的高可用保障，自然都会想到副本。什么是副本呢？副本是分布式系统对数据和服务提供的一种冗余方式。Kafka从0.8版本开始为分区引入了多副本的机制，通过增加副本数量来提升数据容灾的能力。并且通过多副本机制实现故障的自动转移，在kafka集群中某个broker节点失效的情况下仍然能保持服务可

不落叶的榕树·2024-02-05 09:11

Kafka 高可用原理

作者：智哥导读：笔者所在的是一家金融科技公司，但公司内部并没有采用在金融支付领域更为流行的RabbitMQ，而是采用了设计之初就为日志处理而生的Kafka。我一直很好奇Kafka的高可用实现和保障。

dmlcq·2024-02-05 09:08

kafka基本原理

一、kafka概述1、定义kafka是一个分布式的基于发布订阅模式的消息队列，主要用于大数据实时处理灵越2、消息队列【1】应用场景用于异步、削峰、解耦【2】两种模式（1）点对点模式一对一，消费者主动拉取数据

会飞的大鱼吃小鱼·2024-02-05 08:59

异步八种方式提高性能

异步的八种实现方式线程ThreadFuture异步框架CompletableFutureSpring注解@AsyncSpringApplicationEvent事件消息队列第三方异步框架，比如Hutool

A尘埃·2024-02-05 08:33

MQTT环境搭建

MQTT（MessageQueuingTelemetryTransport，消息队列遥测传输）。MQTT是ISO标准（ISO/IECPRF20922）下基于发布/订阅范式的消息协议。

乐观的lishan·2024-02-05 06:17

Linux下的IPC与ITC

IPC：消息队列，共享内存，信号集，管道，套接字，内存映射，信号；前3个如果没有显示销毁，程序结束时仍旧不会被销毁，除非重启或者显示销毁；共享内存和内存映射要保证进程的同步互斥，方法可以使用其它的IPC

international321·2024-02-05 06:08

Redis：操作命令和使用方式

Redis是一款高性能的开源内存数据库，被广泛应用于缓存、消息队列和实时统计等场景。本文将介绍Redis的一些常用命令、用例以及注意事项，帮助读者更好地理解和使用Redis。

lizz666·2024-02-05 06:02

关于Linux和消息队列常见的十道面试题

实际工作中如何排查CPU飙升问题？在实际工作中，我们可以通过以下步骤来排查CPU飙升的问题：使用系统监控工具：首先，我们可以使用系统监控工具，如top命令，来查看所有进程占系统CPU的排序。这样可以帮助我们快速定位到占用CPU资源最多的进程查看具体进程的CPU占用情况：接着，我们可以执行top-Hp进程号命令，查看该进程下的所有线程占CPU的情况查看耗CPU的线程：然后，我们可以执行printf\

lose_rose777·2024-02-05 03:51

大数据左右手·2024-02-04 22:22

Kafka、ActiveMQ、RabbitMQ、RocketMQ 都有什么优点和缺点

1MQ面试1.1问题引入为什么使用消息队列？消息队列有什么优点和缺点？Kafka、ActiveMQ、RabbitMQ、RocketMQ都有什么区别，以及适合哪些场景？

上善若泪·2024-02-04 18:12

1.3.。

有名管道：与无名管道类似，但该特殊文件能在文件系统中查看，并且时候亲缘和非亲缘进程间的通信；3、信号：是Linux内核实现的，模拟底层硬件的中断操作，可以进程间发送信号，也可以给进程自身发送信号；4、消息队列

来日可期げ·2024-02-04 17:33

手搓一个C++11的线程池（含测试）

实现首先要有线程池这个结构体：互斥锁条件变量消息队列关闭标志位structPool{std::mutexmtx;std::condition_variablecond;std::queue>tasks;

半路杀出来的小黑同学·2024-02-04 12:44

MQ知识点整理

1、为什么使用消息队列？其实就是问问你消息队列都有哪些使用场景，然后你项目里具体是什么场景，说说你在这个场景里用消息队列是什么？

妳嘚是个瓜怂·2024-02-04 11:14

推荐频道

消息队列&日志处理