消息队列RocketMQ 第28页

linux查询kafka日志,利用Rsyslog进行日志收集到Kafka

项目需要将日志收集起来做存储分析，数据的流向为rsyslog(收集)->kafka(消息队列)->logstash(清理)->es、hdfs；今天我们先将如何利用rsyslog进行日志收集到kafka。

李玉北·2023-12-30 05:37

ELK+kafka集群实战

术语1、kafka是一个消息队列服务器。kafka服务称为bro

ALAVVY·2023-12-30 05:36

企业日志大数据分析系统ELK+KAFKA实现【转】

背景：最近线上上了ELK，但是只用了一台Redis在中间作为消息队列，以减轻前端es集群的压力，Redis的集群解决方案暂时没有接触过，并且Redis作为消息队列并不是它的强项；所以最近将Redis换成了专业的消息信息发布订阅系统

weixin_30449453·2023-12-30 05:36

RabbitMQ详解

AMQP：AdvancedMessageQueue，高级消息队列协议。它是应用层协议的一个开放标准，为面向消息的中间件设计，基于此协议的客户端与消息中间件可传递消息，并不受产品、开发语言等条件的限制。

武昌库里写JAVA·2023-12-30 05:08

4.14多线程--模式之生产者消费者

定义要点与保护性暂停GuardedObject不同，不需要产生结果和消费结果的线程一一对应消费队列可以用来平衡生产和消费的线程资源生产者仅负责产生结果数据，不关心数据该如何处理，而消费者专心处理结果数据消息队列事由容量限制的

一笑看见·2023-12-30 03:09

消息队列的设计与Redis Stream详解为例

文章目录1.为什么会设计Stream2.消息队列功能2.1解耦2.2最终一致性2.3广播2.4错峰与流控2.5综述3.设计消息队列实现队列基本功能3.1RPC通信协议3.2高可用3.3服务端承载消息堆积的能力

LdLtd66·2023-12-30 02:41

消息队列基础知识

/details/125946812https://blog.csdn.net/qq_46119575/article/details/129794304导航小助手生产者-消费者模型消息幂等性主流MQ消息队列的应用

开心星人·2023-12-30 00:24

3个mq的对比

几种MQ产品说明：ZeroMQ:扩展性好，开发比较灵活，采用C语言实现，实际上他只是一个socket库的重新封装，如果我们做为消息队列使用，需要开发大量的代码RabbitMQ:结合erlang语言本身的并发优势

Cherry300·2023-12-29 23:32

Spring Boot整合RabbitMQ入门指南（适合初学者）

本文适合没有接触过RabbitMq的同学，通过一个简单的demo体验一下消息队列，想要更多的了解MQ还是需要了解MQ更多的一些架构或者概念。

不务专业的程序员--阿飞·2023-12-29 23:45

第十二节：Stream（消息驱动）和Sleuth（分布式请求链路跟踪）

一、Stream（消息驱动）消息驱动概述：MQ（消息中间件）：ActiveMQ、RabbitMQ、RocketMQ、kafkaMQ解决问题：多种MQ适配（切换、维护、开发）屏蔽底层消息中间件的差异，降低切换成本

逆流而上jiao·2023-12-29 21:52

第八章 springcloud消息驱动与链路跟踪笔记

一、SpringCloudStream消息驱动SpringCloudStream看名字就知道他和消息队列相关，但它又不是消息队列，准确来说它类似于硬件里面的驱动程序，也就是前面说的适配器模式的体现。

Hankin晚风·2023-12-29 21:50

SpringCloud第十一节内容精简，SpringCloud Stream消息驱动

平时用的消息组件有，RabbitMQ，RocketMQ，Kafka，ActiveMQ用消息驱动是为了屏蔽底层消息中间件的差异，降低切换版本，统一消息的编程模型举个例子，你不需要学习mysql，sqlserver

bailaoshi666·2023-12-29 21:19

第十一章 Stream消息驱动

Stream消息驱动gitee:springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列（异步通信

我愿为一粒沙·2023-12-29 21:18

消息队列考点梳理 + 高频面试题

你好，本文我将和你一起梳理面试中消息队列的高频考点，做到温故知新。面试中如何考察消息队列消息队列作为日常开发中应用最高频的基础组件之一，相关的问题自然也是面试中的常客。

小小哭包·2023-12-29 21:45

分布式存储考点梳理 + 高频面试题

面试中如何考察分布式存储广义的分布式存储根据不同的应用领域，划分为以下的类别：分布式协同系统分布式文件系统分布式任务调度框架分布式NoSQL存储分布式关系数据库各种消息队列MQ流式计算框架当然，这只是一种划分方式

小小哭包·2023-12-29 21:15

第十章 Bus信息总线

Bus信息总线gitee:springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列（异步通信

我愿为一粒沙·2023-12-29 20:27

第八章 Gateway网关

Gateway网关gitee:springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列（异步通信

我愿为一粒沙·2023-12-29 20:57

第十三章 Nacos服务注册和配置中心

Nacos服务注册和配置中心gitee：springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列

我愿为一粒沙·2023-12-29 19:07

第十四章 Sentinel实现熔断与限流

Sentinel实现熔断与限流gitee：springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列

我愿为一粒沙·2023-12-29 19:32

系列十（实战）、发送 & 接收批量消息（Java操作RocketMQ）

一、发送&接收批量消息1.1、概述批量消息是指RocketMQ可以把一组消息集合一次性发送，这一组消息会被当做一个消息供消费者消费。

YYAugenstern·2023-12-29 19:28

RocketMQ消息消费之长轮询

RocketMQ消费端有两种获取消息的方式，Push方式和Pull方式。

九点半的马拉·2023-12-29 18:59

【Redis前奏曲】初识Redis

文章目录一.Redis的一些特性(优点)1.在内存中存储数据2.可编程的3.可扩展的4.持久化5.聚集(集群)6.高可用Redis快的原因二.使用案例1.数据库2.缓存3.消息队列一.Redis的一些特性

xxxflower.·2023-12-29 15:43

RPC初识

只要涉及到网络通信，我们就可能用到RPC大型分布式系统中：消息队列、分布式缓存、分布式数据库、统一配置中心等，应用程序与这些依赖的中间件都可以通过RPC进行通信RPC的整个通信过程：对端节点的查找、网络连接的建立

Advancer-lbh·2023-12-29 14:26

2020-03-09

2.我们可以利用消息队列的有序性来验证是否有消息丢失。原理非常简单，在Producer端，我们给每个发出的消息附加一个连续递增的序号，然后在Consumer端来检查这个序号的连续性。

zhchzh·2023-12-29 13:29

go简单实现rocketmq

小乞丐程序员·2023-12-29 12:04

第二章 Eureka服务注册与发现

Eureka服务注册与发现gitee：springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列

我愿为一粒沙·2023-12-29 12:58

第三章 Zookeeper服务注册与发现

Zookeeper服务注册与发现gitee：springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列

我愿为一粒沙·2023-12-29 10:24

rocketmq root 账户启动报错 Permission denied

网上查了一通，说非root用户无法使用1000以下端口导致的，但是这跟我rocketmq有啥关系。//错误内容java.net.SocketException:Permi

一盏红烛，一杯烧酒·2023-12-29 09:35

分布式锁的原理解析与实现工具介绍

IPC（进程间通信的方式）：pipe、FIFO、信号量、消息队列、共性内存、socket、信号。

程韬123·2023-12-29 09:52

消息队列中间件的简述以及比较

文章目录引言一、RabbitMQ的简单介绍二、ActiveMQ的简单介绍三、RocketMQ的简单介绍四、Kafka的简单介绍五、各个中间件对比总结参考文档引言上文简单讲述了何为消息队列和消息队列的特点

xiaodaidai丶·2023-12-29 08:21

第十二章 Sleuth分布式请求链路跟踪

Sleuth分布式请求链路跟踪gitee:springcloud_study:springcloud：服务集群、注册中心、配置中心（热更新）、服务网关（校验、路由、负载均衡）、分布式缓存、分布式搜索、消息队列

我愿为一粒沙·2023-12-29 07:26

爬山算法·2023-12-29 07:25

Kafka学习笔记1（千峰教育）

Kafka学习笔记1（千峰教育）一、为什么使用消息队列1.使用同步的通信方式来解决多个服务之间的通信2.使用异步的通信方式二、消息队列的流派1.有broker2.无broker三、Kafka的基本知识1

该叫啥·2023-12-29 07:55

Windows Server 2012 R2服务器Microsoft 消息队列远程代码执行漏洞CVE-2023-21554补丁KB5025288的安装及问题解决

近日，系统安全扫描中发现WindowsServer2012R2服务器存在Microsoft消息队列远程代码执行漏洞。本文记录补丁安装中遇到的“此更新不适用于你的计算机”问题及解决办法。

代先生.重庆·2023-12-29 07:35

SparkStreaming与Kafka整合

1.3SparkStreaming与Kafka整合1.3.1整合简述kafka是做消息的缓存，数据和业务隔离操作的消息队列，而sparkstreaming是一款准实时流式计算框架，所以二者的整合，是大势所趋

Guff_hys·2023-12-29 06:55

【数据采集与预处理】数据接入工具Kafka

目录一、Kafka简介（一）消息队列（二）什么是Kafka二、Kafka架构三、Kafka工作流程分析（一）Kafka核心组成（二）写入流程（三）Zookeeper存储结构（四）Kafka消费过程四、Kafka

Francek Chen·2023-12-29 06:55

Redis 核心知识总结

Redis是一个由C语言开发并且基于内存的键值型数据库，对数据的读写操作都是在内存中完成，因此读写速度非常快，常用于缓存，消息队列、分布式锁等场景。

沉梦听雨.·2023-12-29 05:42

分布式系统日志详解

完全有序的记录序列，其实就是一种特殊的文件格式，文件是一个字节数组，而这里日志是一个记录数据，只是相对于文件来说，这里每条记录都是按照时间的相对顺序排列的，可以说日志是最简单的一种存储模型，读取一般都是从左到右，例如消息队列

sheep112358·2023-12-29 03:13

Kafka概述（3.x/2023）

一.Kafka定义1.kafka传统定义：kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用于大数据实时处理领域发布/订阅：消息的发布者不会将消息直接发给指定的订阅者

这货不是王马勺·2023-12-29 02:09

消息队列的使用心得

消息队列的使用越来越频繁，使用消息队列可以实现主要三大功能：1、解耦2、异步3、消峰通俗点说就是可以把系统的耦合性进一步降低，提升页面的响应速度，同时可以应对大的并发的时候可以进行缓冲。

IT和金融·2023-12-29 02:17

centos下docker安装Rocketmq总结，以及如何更换mq端口

默认你已经装好了docker哈安装docker-composesudocurl-Lhttps://github.com/docker/compose/releases/download/1.25.1-rc1/docker-compose-`uname-s`-`uname-m`-o/usr/local/bin/docker-composechmod+x/usr/local/bin/docker-co

Lalo_iy·2023-12-29 02:10

RabbitMQ入门指南(十一)：延迟消息-延迟消息插件

DelayExchange插件1.下载插件2.安装插件二、延迟消息插件实现延迟消息1.基于注解方式2.基于@Bean方式3.声明结果4.延迟消息发送5.运行结果总结前言RabbitMQ是一个高效、可靠的开源消息队列系统

橘子-青衫·2023-12-29 00:31

RabbitMQ入门指南(十)：延迟消息-死信交换机

RabbitMQ入门指南从零开始了解大数据目录专栏导航前言一、死信交换机1.死信的定义2.死信交换机的作用二、死信交换机实现延迟消息1.案例解析2.实现步骤总结前言RabbitMQ是一个高效、可靠的开源消息队列系统

橘子-青衫·2023-12-29 00:27

系列十六（面试）、RocketMQ中如何解决消息堆积问题？

一、RocketMQ中解决消息堆积问题1.1、概述消息堆积是RocketMQ中很常见的一个问题，也是面试官很喜欢问的一个问题，那么什么是消息堆积呢？

YYAugenstern·2023-12-28 23:22

系列十七（面试）、请你谈谈RocketMQ的消息丢失问题

一、RocketMQ的消息丢失问题1.1、概述生产环境中为了保证服务的高可用，一般情况下都是采用集群的方式，RocketMQ也不例外，另外现在企业级的开发基本都是分布式+微服务的模式，这就存在着跨网络传输数据的问题