胖成范德彪
胖成范德彪

rabbitmq

一，什么是消息中间件

MQ全称为Message Queue，本质上是个队列，FIFO先入先出。是在消息的传输过程中保存消息的容器。可以用于应用程序和应用程序之间的通信方法。多用于分布式系统之间进行通信，在项目中，可将一些无需即时返回且耗时的操作提取出来，进行异步处理，而这种异步处理的方式大大的节省了服务器的请求响应时间，从而提高了系统的吞吐量

二，为什么要使用消息中间件

消息中间件优点：异步，解耦，限流

同步通信：耗时长，受网络波动影响，不能保证高成功率，耦合性高。

同步，异步

并发：一段时间（1S）多个请求数

并行：时间节点，多个指令同时被执行

串行：顺序执行

1.异步处理：

将不需要同步处理的并且耗时长的操作由消息队列通知消息接收方进行异步处理，提高了应用程序的响应时间。

消息队列：Redis 发布订阅(pub/sub)

异步方式：用户点击完下单按钮后，只需等待25ms就能得到下单响应 (20 + 5 = 25ms)。也就是说，订单消息提交到MQ，MQ回馈一个消息成功,然后再把订单提交到数据库20ms，就完成了。至于MQ通知库存、支付、物流系统所花费的时间和订单系统成功没有关系了。 这样这个订单系统提升用户体验和系统吞吐量（单位时间内处理请求的数目）

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-fw7ZuYfR-1691115209630)(C:\Users\Administrator\AppData\Roaming\Typora\typora-user-images\image-20230713152842364.png)]

同步处理（耗时长）:

rabbitmq_第1张图片

同步方式的问题：当一个用户提交订单到成功需要300ms+300ms+300ms+20ms = 920ms，这是不能容忍的。也就是说库存、支付、物流、最后保存数据库全部成功，订单的提交才算完成。

2.系统的耦合性越高，容错性就越低，可维护性就越低

rabbitmq_第2张图片

服务与之间耦合度,比如订单服务与用户积分服务(需求:下单成功,增加积分)

如果不用消息队列,订单服务和积分服务就要通信,下单后调用积分服务的接口通知积分服务进行处理(或者定时扫描之类的),那么调用接口失败,或者延时等等…一系列的问题要考虑处理,非常繁琐

用了消息队列,用户A下单成功后下单服务通过redis发布(mq的生产者)一消息,就不用管了.用户积分服务redis订阅了(mq的消费者),就会受到这用户A下单的消息,进行处理.这就降低了多个服务之间的耦合,即使积分服务发生异常,也不会影响用户正常下单.处理起来就非常的丝滑,各干各的互不影响.

解决方案：应用程序解耦合

MQ相当于一个中介，生产方通过MQ与消费方交互，它将应用程序进行解耦合。

使用消息队列的方式：使用 MQ 使得应用间解耦，提升容错性和可维护性。库存和支付和物流直接去MQ取到订单的信息即可，即使库存系统报错，没关系，等到库存修复后再次从MQ中去取就可以了

rabbitmq_第3张图片

3.高并发（分批处理请求）

订单系统，在下单的时候就会往数据库写数据。但是数据库只能支撑每秒1000左右的并发写入，并发量再高就容易宕机。低峰期的时候并发也就100多个，但是在高峰期时候，并发量会突然激增到5000以上，这个时候数据库肯定卡死了。但不一定宕机，只会很慢，一旦宕机就会有消息丢失。

rabbitmq_第4张图片

解决方案：削峰填谷

消息被MQ保存起来了，5000条数据对于MQ，简直是小意思，然后系统就可以按照自己的消费能力来消费，比如每秒1000个数据，这样慢慢写入数据库，这样就不会卡死数据库了

rabbitmq_第5张图片

4，MQ的劣势

1、系统可用性降低：系统引入的外部依赖越多，系统稳定性越差。一旦 MQ 宕机，就会对业务造成影响。如何保证MQ的高可用？

2、系统复杂度提高：MQ 的加入大大增加了系统的复杂度，以前系统间是同步的远程调用，现在是通过 MQ 进行异步调用。如何保证消息没有被重复消费？怎么处理消息丢失情况？那么保证消息传递的顺序性？

3、一致性问题：A 系统处理完业务，通过 MQ 给B、C、D三个系统发消息数据，如果 B 系统、C 系统处理成功，D 系统处理失败。如何保证消息数据处理的一致性？

既然 MQ 有优势也有劣势，那么使用 MQ 需要满足什么条件呢？

生产者不需要从消费者处获得反馈。引入消息队列之前的直接调用，其接口的返回值应该为空，这才让明明下层的动作还没做，上层却当成动作做完了继续往后走，即所谓异步成为了可能。
容许短暂的不一致性。
确实是用了有效果。即解耦、提速、削峰这些方面的收益，超过加入MQ，管理MQ这些成本。

常见的 MQ 产品

目前业界有很多的 MQ 产品，例如 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMq等，也有直接使用 Redis 充当消息队列的案例，而这些消息队列产品，各有侧重，在实际选型时，需要结合自身需求及 MQ 产品特征，综合考虑。

** ** RabbitMQ ActiveMQ RocketMQ Kafka
公司/社区 Rabbit Apache 阿里 Apache
开发语言 Erlang Java Java Scala&Java
协议支持 AMQP，XMPP，SMTP，STOMP OpenWire,STOMP，REST,XMPP,AMQP 自定义 自定义协议，社区封装了http协议支持
客户端支持语言 官方支持Erlang，Java，Ruby等,社区产出多种API，几乎支持所有语言 Java，C，C++，Python，PHP，Perl，.net等 Java，C++（不成熟） 官方支持Java,社区产出多种API，如PHP，Python等
单机吞吐量 万级（其次） 万级（最差） 十万级（最好） 十万级（次之）
消息延迟 微秒级 毫秒级 毫秒级 毫秒以内
功能特性 并发能力强，性能极其好，延时低，社区活跃，管理界面丰富 老牌产品，成熟度高，文档较多 MQ功能比较完备，扩展性佳 只支持主要的MQ功能，毕竟是为大数据领域准备的。

三，RabbitMQ简介

RabbitMQ是由erlang语言开发，基于AMQP（Advanced Message Queue 高级消息队列协议）协议实现的消息队列，它是一种应用程序之间的通信方法，消息队列在分布式系统开发中应用非常广泛。2007年，Rabbit 技术公司基于 AMQP 标准开发的 RabbitMQ 1.0 发布。 (Erlang 语言由 Ericson 设计，专门为开发高并发和分布式系统的一种语言，在电信领域使用广泛)

RabbitMQ官方地址：http://www.rabbitmq.com/

RabbitMQ 基础架构如下图：

rabbitmq_第6张图片

上图说明：

1、Broker：接收和分发消息的应用，就是一个中介，RabbitMQ Server就是 Message Broker
2、Virtual host：出于多租户和安全因素设计的，把 AMQP 的基本组件划分到一个虚拟的分组中，类似于网络中的 namespace 概念。当多个不同的用户使用同一个 RabbitMQ server 提供的服务时，可以划分出多个vhost，每个用户在自己的 vhost 创建 exchange／queue 等
3、Connection：publisher／consumer 和 broker 之间的 TCP 连接
4、Channel：如果每一次访问 RabbitMQ 都建立一个 Connection，在消息量大的时候建立 TCP Connection的开销将是巨大的，效率也较低。Channel 是在 connection 内部建立的逻辑连接，如果应用程序支持多线程，通常每个thread创建单独的 channel 进行通讯，AMQP method 包含了channel id 帮助客户端和message broker 识别 channel，所以 channel 之间是完全隔离的。Channel 作为轻量级的 Connection 极大减少了操作系统建立 TCP connection 的开销

5、Exchange：message 到达 broker 的第一站，根据分发规则，匹配查询表中的 routing key，分发消息到queue 中去。常用的类型有：direct (point-to-point), topic (publish-subscribe) and fanout (multicast)
6、Queue：消息最终被送到这里等待 consumer 取走
7、Binding：exchange 和 queue 之间的虚拟连接，binding 中可以包含 routing key。Binding 信息被保存到 exchange 中的查询表中，用于 message 的分发依据

RabbitMQ提供了6种模式：简单模式，work模式，Publish/Subscribe发布与订阅模式，Routing路由模式，Topics主题模式，RPC远程调用模式（远程调用，不太算MQ；暂不作介绍）；官网对应模式介绍：https://www.rabbitmq.com/getstarted.html ， 点击手册按钮 RabbitMQ Tutorials

rabbitmq_第7张图片

2. 安装及配置RabbitMQ

RabbitMQ 官方地址：http://www.rabbitmq.com/

win10安装

安装erlang和rabbitmq后，进入rabbitmq安装目录的sbin目录执行下面命令

rabbitmq-plugins.bat enable rabbitmq_management

rabbitmq_第8张图片

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-tUbZI5GZ-1691115209633)(C:\Users\Administrator\AppData\Roaming\Typora\typora-user-images\image-20230713154626768.png)]

登录URL：

http://localhost:15672/

用户名密码：guest/guest

问题：

​ 登录用户是中文解决方案：

​ 1、创建用户为英文，再安装相关环境

​ 2、修改相应的目录

​ 用管理员执行CMD

rabbitmq-service.bat remove

set RABBITMQ_BASE=D:\rabbitmq_server\data

rabbitmq-service.bat install

rabbitmq-plugins enable rabbitmq_management

查看进程

tasklist | find /i "erl"

关闭进程

taskkill /pid 7300 -t -f //将7300改成对应端口号

rabbitmq_第9张图片

3. RabbitMQ快速入门

3.1 生产方工程搭建

1.添加相关依赖

修改pom.xml文件内容为如下：

<dependencies>
    <dependency>
        <groupId>org.springframework.bootgroupId>
        <artifactId>spring-boot-starter-amqpartifactId>
    dependency>
dependencies>

2.启动类

package com.woniu.rabbitmq;

import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;

@SpringBootApplication
public class RabbitApplication {
    public static void main(String[] args) {
        SpringApplication.run(RabbitApplication.class);
    }
}

3.配置RabbitMQ

创建application.yml，内容如下：

spring:
  rabbitmq:
    host: localhost
    port: 5672
    virtual-host: /woniu
    username: woniu
    password: woniu

rabbitmq_第10张图片

创建队列参数说明：

参数 说明
name 字符串值，queue的名称。
durable 布尔值，表示该 queue 是否持久化。 持久化意味着当 RabbitMQ 重启后，该 queue 是否会恢复/仍存在。 另外，需要注意的是，queue 的持久化不等于其中的消息也会被持久化。
exclusive 布尔值，表示该 queue 是否排它式使用。排它式使用意味着仅声明他的连接可见/可用，其它连接不可见/不可用。
autoDelete 布尔值，表示当该 queue 没“人”（connection）用时，是否会被自动删除。

不指定 durable、exclusive 和 autoDelete 时，默认为 true 、 false 和 false 。表示持久化、非排它、不用自动删除。

创建交换机参数说明

参数 说明
name 字符串值，exchange 的名称。
durable 布尔值，表示该 exchage 是否持久化。 持久化意味着当 RabbitMQ 重启后，该 exchange 是否会恢复/仍存在。
autoDelete 布尔值，表示当该 exchange 没“人”（queue）用时，是否会被自动删除。

不指定 durable 和 autoDelete 时，默认为 true 和 false 。表示持久化、不用自动删除

4. AMQP

4.1. 相关概念介绍

AMQP 一个提供统一消息服务的应用层标准高级消息队列协议，是应用层协议的一个开放标准，为面向消息的中间件设计。AMQP是一个二进制协议，拥有一些现代化特点：多信道、协商式，异步，安全，扩平台，中立，高效。

RabbitMQ是AMQP协议的Erlang的实现。

rabbitmq_第11张图片

概念 说明
连接Connection 一个网络连接，比如TCP/IP套接字连接。
会话Session 端点之间的命名对话。在一个会话上下文中，保证“恰好传递一次”。
信道Channel 多路复用连接中的一条独立的双向数据流通道。为会话提供物理传输介质。
客户端Client AMQP连接或者会话的发起者。AMQP是非对称的，客户端生产和消费消息，服务器存储和路由这些消息。
服务节点Broker 消息中间件的服务节点；一般情况下可以将一个RabbitMQ Broker看作一台RabbitMQ 服务器。
端点 AMQP对话的任意一方。一个AMQP连接包括两个端点（一个是客户端，一个是服务器）。
消费者Consumer 一个从消息队列里请求消息的客户端程序。
生产者Producer 一个向交换机发布消息的客户端应用程序。

4.2. RabbitMQ运转流程

在入门案例中：

  • 生产者发送消息
    1. 生产者创建连接（Connection），开启一个信道（Channel），连接到RabbitMQ Broker；
    2. 声明队列并设置属性；如是否排它，是否持久化，是否自动删除；
    3. 将路由键（空字符串）与队列绑定起来；
    4. 发送消息至RabbitMQ Broker；
    5. 关闭信道；
    6. 关闭连接；
  • 消费者接收消息
    1. 消费者创建连接（Connection），开启一个信道（Channel），连接到RabbitMQ Broker
    2. 向Broker 请求消费相应队列中的消息，设置相应的回调函数；
    3. 等待Broker回应投递队列中的消息，消费者接收消息；
    4. 确认（ack，自动确认）接收到的消息；
    5. RabbitMQ从队列中删除相应已经被确认的消息；
    6. 关闭信道；
    7. 关闭连接；

image-20220117201926029

4.3. 生产者流转过程说明

  1. 客户端与代理服务器Broker建立连接。会调用newConnection() 方法,这个方法会进一步封装Protocol Header 0-9-1 的报文头发送给Broker ，以此通知Broker 本次交互采用的是AMQP0-9-1 协议，紧接着Broker 返回Connection.Start 来建立连接，在连接的过程中涉及Connection.Start/.Start-OK 、Connection.Tune/.Tune-Ok ，Connection.Open/ .Open-Ok 这6 个命令的交互。

  2. 客户端调用connection.createChannel方法。此方法开启信道，其包装的channel.open命令发送给Broker；

  3. channel.basicPublish方法对应的AMQP命令为Basic.Publish,这个命令包含了content Header 和content Body()。content Header 包含了消息体的属性，例如:投递模式，优先级等，content Body 包含了消息体本身。

  4. 客户端发送完消息需要关闭资源时，涉及到Channel.Close和Channel.Close-Ok 与Connetion.Close和Connection.Close-Ok的命令交互。

    rabbitmq_第12张图片

4.4. 消费者流转过程说明

  1. 消费者客户端与代理服务器Broker建立连接。会调用newConnection() 方法,这个方法会进一步封装Protocol Header 0-9-1 的报文头发送给Broker ，以此通知Broker 本次交互采用的是AMQP0-9-1 协议，紧接着Broker 返回Connection.Start 来建立连接，在连接的过程中涉及Connection.Start/.Start-OK 、Connection.Tune/.Tune-Ok ，Connection.Open/ .Open-Ok 这6 个命令的交互。
  2. 消费者客户端调用connection.createChannel方法。和生产者客户端一样，协议涉及Channel . Open/Open-Ok命令。
  3. 在真正消费之前，消费者客户端需要向Broker 发送Basic.Consume 命令(即调用channel.basicConsume 方法〉将Channel 置为接收模式，之后Broker响应Basic . Consume - Ok 以告诉消费者客户端准备好消费消息。
  4. Broker 向消费者客户端推送(Push) 消息，即Basic.Deliver 命令，这个命令和Basic.Publish 命令一样会携带Content Header 和Content Body。
  5. 消费者接收到消息并正确消费之后，向Broker 发送确认，即Basic.Ack 命令。
  6. 客户端发送完消息需要关闭资源时，涉及到Channel.Close和Channl.Close-Ok 与Connetion.Close和Connection.Close-Ok的命令交互。

rabbitmq_第13张图片

5. RabbitMQ工作模式

5.1. Work queues工作队列模式

  • simple模式: 一个生产者一个消费者

    rabbitmq_第14张图片

    定义rabbitconfig: 创建消息队列，交换机及其之间绑定

    @Configuration
public class RabbitmqConfig {
    /**
     * simple 队列
     */
    @Bean
    public Queue simpleQueue(){
       return QueueBuilder.durable("simpleQueue").build();
       //return new Queue("simpleQueue");
    }
}

rabbitmq_第15张图片

定义生产者

/**
 * 往消息队列返送消息
 */
@Component
public class SimpleProduct {

    @Autowired
    private RabbitTemplate rabbitTemplate;
    
    public void send(String msg){

        rabbitTemplate.convertAndSend("simpleQueue",msg);
    }
}

​ 定义消费者

@Component
public class SimpleConsumer {
    
    /**
     * 消费消息
     */
    @RabbitListener(queues = "simpleQueue")
    private void recevie(String msg){
        System.out.println("消费者接收到："+msg);
    }
}

  • **work模式：**一个生产者多个消费者，也称之为竞争模式

    创建两个消费者监听队列

rabbitmq_第16张图片

Work Queues与入门程序的简单模式相比，多了一个或一些消费端，多个消费端共同消费同一个队列中的消息。它们处于竞争者的关系，一条消息只会被一个消费者接收，rabbit采用轮询的方式将消息是平均发送给消费者的；消费者在处理完某条消息后，才会收到下一条消息。

应用场景：对于任务过重或任务较多情况使用工作队列可以提高任务处理的速度。如生产者生产一千条消息，那么c1和c2各消费500条,队列消费消息是均衡分配

复制消费方代码，重新编写一个消费端，然后启动两个消费端，进行测试

5.2. 订阅模式类型

订阅模式示例图：

rabbitmq_第17张图片

在订阅模型中，多了一个exchange角色，而且过程略有变化：

  • P：生产者，也就是要发送消息的程序，但是不再发送到队列中，而是发给X（交换机）
  • C：消费者，消息的接受者，会一直等待消息到来。
  • Queue：消息队列，接收消息、缓存消息。
  • Exchange：交换机，图中的X。一方面，接收生产者发送的消息。另一方面，知道如何处理消息，例如递交给某个特别队列、递交给所有队列、或是将消息丢弃。到底如何操作，取决于Exchange的类型。Exchange有常见以下3种类型：
    • Fanout：广播，将消息交给所有绑定到交换机的队列
    • Direct：定向，把消息交给符合指定routing key 的队列
    • Topic：通配符，把消息交给符合routing pattern（路由模式） 的队列

Exchange（交换机）只负责转发消息，不具备存储消息的能力，因此如果没有任何队列与Exchange绑定，或者没有符合路由规则的队列，那么消息会丢失！

5.2.1 广播模式

rabbitmq_第18张图片

1.创建RabbitMQ队列与交换机绑定的配置类com…rabbitmq.config.RabbitMQConfig

/**
 * 负责：创建消息队列，交换机及其之间绑定
 */
@Configuration
public class RabbitmqConfig {

    /**
     * fanout 模式
     */

    @Bean
    public Queue fanoutQueueA(){
        return QueueBuilder.durable("fanoutQueueA").build();
    }

    @Bean
    public Queue fanoutQueueB(){
        return QueueBuilder.durable("fanoutQueueB").build();
    }

    /**
     * 创建交换机
     * @return
     */
    @Bean
    public FanoutExchange fanoutExchange(){
        return new FanoutExchange("fanoutExchange");
    }

    /**
     * 把消息队列，绑定到交换机上
     * IOC 在调用配置中的方法时，如果有参数，默认以形参的名字找到IOC中对应的方法
     */

    @Bean
    public Binding fanoutQueueAToFanoutExchange( Queue fanoutQueueA,
                                                 FanoutExchange fanoutExchange){

        return BindingBuilder.bind(fanoutQueueA).to(fanoutExchange);
    }

    @Bean
    public Binding fanoutQueueToFanoutExchange( Queue fanoutQueueB,
                                                 FanoutExchange fanoutExchange){

        return BindingBuilder.bind(fanoutQueueB).to(fanoutExchange);
    }

}

1、实现生产者

/**
 * 往消息队列返送消息
 */
@Component
public class FanoutProduct {

    @Autowired
    private RabbitTemplate rabbitTemplate;

    /**
     * arg1: 交换机名字
     * arg2: 路由名字
     * arg3: 参数名字
     * @param msg
     */
    public void send(String msg){
        rabbitTemplate.convertAndSend("fanoutExchange","",msg);
    }
}

创建交换机参数说明：

参数 说明
exchange 字符串值，交换机名称
type 交换机的类型，有三种类型：FANOUT、DIRECT、TOPIC
durable 交换机是否持久化，表示当rabbitmq重启时或者意外宕机，这个交换机还在不在
autoDelete 是否自动删除，表示当该交换机没人发消息时，是否会被自动删除。
internal 内部使用，一般为false
arguments 其它参数

发送消息参数说明

参数 说明
exchange 字符串值，交换机名称
routingKey 如果交换机类型是fanout，则routingKey为""
props 消息基本属性配置
body 要发送的消息的内容

2、消费方实现

@Component
public class FanoutConsumer {

    /**
     * 消费消息
     */
    @RabbitListener(queues = "fanoutQueueA")
    private void recevie(String msg){
        System.out.println("消费者A接收到："+msg);
    }

    /**
     * 消费消息
     */
    @RabbitListener(queues = "fanoutQueueB")
    private void recevieB(String msg){
        System.out.println("消费者B接收到："+msg);
    }
}

发布订阅模式与工作队列模式的区别

1、工作队列模式不用定义交换机，而发布/订阅模式需要定义交换机。

2、发布/订阅模式的生产方是面向交换机发送消息，工作队列模式的生产方是面向队列发送消息(底层使用默认交换机)。

3、发布/订阅模式需要设置队列和交换机的绑定，工作队列模式不需要设置，实际上工作队列模式会将队列绑 定到默认的交换机 。

5.2.2 Routing路由模式

路由模式特点：

  • 队列与交换机的绑定，不能是任意绑定了，而是要指定一个RoutingKey（路由key）
  • 消息的发送方在 向 Exchange发送消息时，也必须指定消息的 RoutingKey。
  • Exchange不再把消息交给每一个绑定的队列，而是根据消息的Routing Key进行判断，只有队列的Routingkey与消息的 Routing key完全一致，才会接收到消息

rabbitmq_第19张图片

在编码上与 Publish/Subscribe发布与订阅模式 的区别是交换机的类型为：Direct，还有队列绑定交换机的时候需要指定routing key。

1、创建RabbitMQ队列与交换机绑定的配置类com…rabbitmq.config.RabbitMQConfig


/**
 * 负责：创建消息队列，交换机及其之间绑定
 */
@Configuration
public class RabbitmqConfig {

    //==================route===
    /**
     * 路由模式：通过路由key将消息发送给指定消息队列
     * 1个交换机，2个消息队列，1个生产者，2个消费者
     */
    @Bean
    public Queue routeQueueA(){
        return QueueBuilder.durable("routeQueueA").build();
    }
    @Bean
    public Queue routeQueueB(){
        return QueueBuilder.durable("routeQueueB").build();
    }

    @Bean
    public DirectExchange directExchange(){
        return new DirectExchange("directExchange");
    }
    //绑定
    @Bean
    public Binding routeQueueToDirectExchange(Queue routeQueueA,
                                                DirectExchange directExchange){
        return BindingBuilder.bind(routeQueueA).to(directExchange).with("red");
    }
    @Bean
    public Binding routeQueueBToDirectExchange(Queue routeQueueB,
                                              DirectExchange directExchange){
        return BindingBuilder.bind(routeQueueB).to(directExchange).with("blue");
    }
}

2、生产方实现

 */
@Component
public class DirectProduct {
    @Autowired
    private RabbitTemplate rabbitTemplate;

    /**
     * arg1: 交换机名字
     * arg2: 路由名字
     * arg3: 参数名字
     * @param msg
     */
    public void send(String msg,String routekey){
        rabbitTemplate.convertAndSend("directExchange",routekey,msg);
    }
}

3.消费方实现

创建2个消费方并启动，然后使用生产者发送消息；在消费者对应的控制台可以查看到生产者发送对应routing key对应队列的消息；到达按照需要接收的效果

@Component
public class DirectConsumer {
    /**
     * 消费消息
     */
    @RabbitListener(queues = "routeQueueA")
    private void recevie(String msg){
        System.out.println("消费者A接收到："+msg);
    }

    /**
     * 消费消息
     */
    @RabbitListener(queues = "routeQueueB")
    private void recevieB(String msg){
        System.out.println("消费者B接收到："+msg);
    }
}

5.2.3. Topics通配符模式（模糊路由）

Topic类型与Direct相比，都是可以根据RoutingKey把消息路由到不同的队列。只不过Topic类型Exchange可以让队列在绑定Routing key 的时候使用通配符！Routingkey 一般都是有一个或多个单词组成，多个单词之间以”.”分割，例如： item.insert

通配符规则：

#：匹配0个或多个词

*：匹配不多不少恰好1个词

举例：

item.#：能够匹配item.insert.abc 或者 item.insert

item.*：只能匹配item.insert

rabbitmq_第20张图片

创建RabbitMQ队列与交换机绑定的配置类com…rabbitmq.config.RabbitMQConfig

package com.woniu.rabbitmq.config;

import org.springframework.amqp.core.*;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

@Configuration
public class RabbitMQConfig {
    
    // Topics通配符模式
    @Bean
    public Queue tt01(){
        return new Queue("tt01");
    }

    @Bean
    public Queue tt02(){
        return new Queue("tt02");
    }

    @Bean
    public TopicExchange topicExchange(){
        return new TopicExchange("tte");
    }

    @Bean
    public Binding ttBinding01(){
        return BindingBuilder.bind(tt01()).to(topicExchange()).with("#.error");
    }

    @Bean
    public Binding ttBinding02(){
        return BindingBuilder.bind(tt02()).to(topicExchange()).with("order.*");
    }

}

1、生产方代码实现

使用topic类型的Exchange

package com.woniu.rabbitmq.controller;

import com.woniu.rabbitmq.config.RabbitMQConfig;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;

@RestController
public class ProducerController {
   
    @RequestMapping("/sendT1MT1/{msg}")
    public String sendT1MT1(@PathVariable String msg){
        rabbitTemplate.convertAndSend("tte", "11.error", msg);
        return "success";
    }

    @RequestMapping("/sendT1MT2/{msg}")
    public String sendT1MT2(@PathVariable String msg){
        rabbitTemplate.convertAndSend("tte", "11.22.error", msg);
        return "success";
    }

    @RequestMapping("/sendT1MF/{msg}")
    public String sendT1MF(@PathVariable String msg){
        rabbitTemplate.convertAndSend("tte", "11.error.22", msg);
        return "success";
    }

    @RequestMapping("/sendT2MF/{msg}")
    public String sendT2MF(@PathVariable String msg){
        rabbitTemplate.convertAndSend("tte", "order.11.22", msg);
        return "success";
    }

    @RequestMapping("/sendT2MT/{msg}")
    public String sendT2MT(@PathVariable String msg){
        rabbitTemplate.convertAndSend("tte", "order.1", msg);
        return "success";
    }
}

消费者

@Component
public class DirectComsume {

    @RabbitListener(queues = "tt01")
    public void received(String msg){
        System.out.println("接收到消息："+msg);
    }

    @RabbitListener(queues = "tt02")
    public void receivedB(String msg){
        System.out.println("接收到消息："+msg);
    }
}

创建2个消费方并启动，然后使用生产者发送消息；在消费者对应的控制台可以查看到生产者发送对应routing key对应队列的消息；到达按照需要接收的效果；并且这些routing key可以使用通配符。

四，RabbitMQ高级

1.消息的可靠投递（生产者端）

在使用 RabbitMQ 的时候，作为消息发送方希望杜绝任何消息丢失或者投递失败场景。RabbitMQ 为我们提供了两种方式用来控制消息的投递可靠性模式。

  • confirm 确认模式
  • return 退回模式

rabbitmq 整个消息投递的路径为：producer—>rabbitmq broker—>exchange—>queue—>consumer

  • 消息从 producer 到 exchange，不管exchange是否收到生产者消息，都会返回一个 confirmCallback 。
  • 消息从 exchange–>queue 投递失败则会返回一个 returnCallback 。

我们将利用这两个 callback 控制消息的可靠性投递

1.1.confirmCallback确认模式

1.在配置文件中 添加publisher-confirm-type: correlated配置

spring:
  rabbitmq:
    host: localhost
    port: 5672
    username: woniu
    password: woniu
    virtual-host: /woniu
    publisher-confirm-type: correlated #发布消息成功到交换器后会触发回调方法
    publisher-returns: true #返回确认信息

在springboot2.2.0.RELEASE版本之前（spring.rabbitmq.publisher-confirm发布确认属性配置）是amqp正式支持的属性，用来配置消息发送到交换器之后是否触发回调方法，在2.2.0及之后该属性过期使用spring.rabbitmq.publisher-confirm-type属性配置代替，用来配置更多的确认类型；

NONE值是禁用发布确认模式，是默认值;
CORRELATED值是发布消息成功到交换器后会触发回调方法;
SIMPLE值经测试有两种效果，其一效果和CORRELATED值一样会触发回调方法，其二在发布消息成功后使用rabbitTemplate调用waitForConfirms或waitForConfirmsOrDie方法等待broker节点返回发送结果，根据返回结果来判定下一步的逻辑，要注意的点是waitForConfirmsOrDie方法如果返回false则会关闭channel，则接下来无法发送消息到broker。

2、编写Product类

package com.woniu.product;

import org.springframework.amqp.core.Message;
import org.springframework.amqp.core.ReturnedMessage;
import org.springframework.amqp.rabbit.connection.CorrelationData;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Component;

/**
 * 往消息队列返送消息
 */
@Component
public class ConfirmProduct implements RabbitTemplate.ConfirmCallback ,RabbitTemplate.ReturnsCallback{


    @Autowired
    private RabbitTemplate rabbitTemplate;

    /**
     * arg1: 交换机名字
     * arg2: 路由名字
     * arg3: 参数名字
     * @param msg
     */
    public void send(String msg,String routekey){
        rabbitTemplate.setConfirmCallback(this); //设置回调
        rabbitTemplate.setReturnsCallback(this);
        rabbitTemplate.convertAndSend("confimExchange",routekey,msg);
    }

    /**
     *
     * @param correlationData 消息的唯一标识，如果发送失败，可以根据这个标识补发信息
     * @param status 交换机是否成功收到信息，true：成功
     * @param reason 失败的原因
     */
    @Override
    public void confirm(CorrelationData correlationData, boolean status, String reason) {
        System.out.println("进入confirm方法");
        System.out.println(status);
        System.out.println(reason);
    }

    /**
     * 只有消息路由失败进入，比如：找不到路由等
     * @param returnedMessage
     */
    @Override
    public void returnedMessage(ReturnedMessage returnedMessage) {
        returnedMessage.getMessage(); //失败的原因
        returnedMessage.getReplyCode(); //失败的状态码
        returnedMessage.getReplyText(); //失败的原因
        returnedMessage.getExchange(); //交换机
        returnedMessage.getRoutingKey(); //路由
    }
}

失败演示可以把convertAndSend的交换机名字写错

1.2.ReturnCallBack确认模式

在上个例子的基础上，再添加一个测试方法returnedMessage

由于路由键不正确 022，故交换机的消息无法发送到消息队列，setReturnCallback（）方法，也就是Exchange路由到Queue失败时执行，这个前提是必须设置 rabbitTemplate.setMandatory(true);如果不加这句话，意味着交换机处理消息模式采用默认的模式，模式模式是直接丢掉该消息，不会执行setReturnCallback（）方法。 当然如果交换机发送消息到队列，如果成功了也不会执行该方法，因为setReturnCallback是交换机发送消息到队列失败才执行的。

失败演示生产者可以把发送的routekey写错

rabbitmq_第21张图片

消息的可靠投递小结

设置ConnectionFactory的publisher-confirms=“true” 开启 确认模式。
使用rabbitTemplate.setConfirmCallback设置回调函数。当消息发送到exchange后回调confirm方法。在方法中判断ack，如果为true，则发送成功，如果为false，则发送失败，需要处理。

设置ConnectionFactory的publisher-returns=“true” 开启 退回模式。使用rabbitTemplate.setReturnCallback设置退回函数，当消息从exchange路由到queue失败后，如果设置了rabbitTemplate.setMandatory(true)参数，则会将消息退回给producer。并执行回调函数returnedMessage。

在RabbitMQ中也提供了事务机制，但是性能较差，此处不做讲解。
使用channel下列方法，完成事务控制：
txSelect(), 用于将当前channel设置成transaction模式
txCommit()，用于提交事务
txRollback(),用于回滚事务

2.Consumer ACK（消费者端）

ack指Acknowledge(翻译为：应答)，表示消费端收到消息后的确认方式。有三种确认方式：

  • 自动确认：acknowledge=“none”
  • 手动确认：acknowledge=“manual”
  • 根据异常情况确认：acknowledge=“auto”，（这种方式使用麻烦，不作讲解）

其中自动确认是指，当消息一旦被Consumer接收到，则自动确认收到，并将相应 message 从 RabbitMQ 的消息缓存中移除。但是在实际业务处理中，很可能消息接收到，业务处理出现异常，那么该消息就会丢失。如果设置了手动确认方式，则需要在业务处理成功后，调用channel.basicAck()，手动确认，如果出现异常，则调用channel.basicNack()方法，让其自动重新发送消息。

2.1 消费方工程搭建

1.在配置文件中 添加手动确认的配置

spring:
  rabbitmq:
    listener:
      simple:
        acknowledge-mode: manual
		prefetch: 1 # 默认一批一批消费的，提高消息，默认250个

2.编写Ack监听器

@Component
public class ConfirmConsumer {
    /**
     * 消费消息
     */
    @RabbitListener(queues = "confirmQueue")
    private void recevie(String msg, Message message, Channel channel) throws IOException {
        //arg1:消息的id
        //arg2:是否批量确认这些信息 false:否
        //channel.basicAck(message.getMessageProperties().getDeliveryTag(),false);
        /**
         * arg1:消息的id
         * arg2:是否批量确认这些信息 false:否
         * arg3:是否重新将消息放回队列中，false:不放会，一般都是false
         */
        channel.basicNack(message.getMessageProperties().getDeliveryTag(),false,false);
        System.out.println("消费者A接收到："+msg);
    }

}

basicAck的批量应答问题说明：

channel.basicAck(8，true) 如果前面还有4，6，7的deliveryTag未被确认，则会一起确认，减少网络流量，当然当前deliveryTag=8这条消息也会确认，如果没有前面没有未被确认的消息，则只会确认当前消息，也就是说可以一次性确认某个队列小于等于delivery_tag值的所有消息

basicNack的参数说明：

第一个参数为deliveryTag，也就是每个消息标记index，消息标记值从1开始，依次递增
第二个参数为multiple，表示是否批量，如果为true，那么小于或者等于该消息标记的消息（如果还没有签收）都会拒绝签收
第三个参数为requeue，表示被拒绝的消息是否重回队列，如果设置为true，则消息重新回到queue，那么broker会重新推送该消息给消费端，如果设置为false，则消息在队列中被删除，即消息会被直接丢失（当然如果为false，还有一种情况就是放到死信队列）

启动之前的生产者发送消息给test_queue_confirm队列，如果抛出异常则该消息一直重发

2.2 消息可靠性总结

持久化

  • exchange要持久化
  • queue要持久化
  • message要持久化

生产方确认Confirm
消费方确认Ack
Broker高可用

rabbitmq_第22张图片
rabbitmq_第23张图片

3. 死信队列

TTL(time to live)

TTL是rabbitmq 中一个消息或者队列的属性，表明一条信息或者该队列中的所有消息的最大存活时间。单位是毫秒，换句话说，如果一条信息设置了TTL 属性或者设置TTL属性的队列，那么这个条信息如果在TTL设置的时间没有被消费，则会成为死信。如果同时配置了队列的TTL和消息的TTL, 那么较小的那个值将会被使用。

死信队列

英文缩写：DLX 。Dead Letter Exchange（死信交换机），当消息在队列成为Dead message后，通过该队列把这条死信消息发给另一个交换机，这个交换机就是DLX。

消息成为死信的三种情况（面试常问）：

  • 队列消息长度到达限制（淘汰最早的消息）；
  • 消费者拒接消费消息，basicNack/basicReject,并且不把消息重新放入原目标队列,requeue=false；
  • 原队列存在消息过期设置，消息到达超时时间未被消费；

队列绑定死信交换机：
给队列设置参数： x-dead-letter-exchange 和 x-dead-letter-routing-key

rabbitmq_第24张图片

5.1 死信队列实现过程

1、创建RabbitMQ队列与交换机绑定的配置类com…rabbitmq.config.RabbitMQConfig

package com.woniu.rabbitmq.config;

import org.springframework.amqp.core.*;
import org.springframework.amqp.rabbit.connection.ConnectionFactory;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.amqp.support.converter.SerializerMessageConverter;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.context.annotation.Scope;

import java.util.HashMap;
import java.util.Map;

@Configuration
public class RabbitMQConfig {
    
    // 1. 创建DLX交换机
    @Bean
    public DirectExchange dlxDirectExchange(){
        return new DirectExchange("dlx_exchange");
    }

    // 2. ttl队列
    @Bean
    public Queue ttlQueue(){
        Map<String, Object> args = new HashMap<>();
        // 1、正常队列绑定死信交换机-->
        // 1.1 x-dead-letter-exchange 死信交换机的名称
        args.put("x-dead-letter-exchange", "dlx_exchange");
        // 1.2 x-dead-letter-routing-key 正常队列发送消息到死信 交换机的routingKey
        args.put("x-dead-letter-routing-key", "dlx01");
        // 2 消息成为死信的三种情况
        // 2.1 设置队列的过期时间 ttl  x-message-ttl
        args.put("x-message-ttl", 1000 * 10);
        // 2.2 设置队列的长度限制 x-max-length   10条消息，超过进死信
        args.put("x-max-length", 10);
        // 2.3 消费者拒接消费消息，并且不重回队列 这种情况后面在消费工程测试
        return QueueBuilder.durable("ttlQueue").withArguments(args).build();
    }

    // 3. 死信队列
    @Bean
    public Queue dlxQ(){
        return new Queue("dlxQ");
    }

    // 4.dlxQ绑定DXL交换机
    @Bean
    public Binding dlxBinding(){
        return BindingBuilder.bind(dlxQ()).to(dlxDirectExchange()).with("dlx01");
    }
}

2、生产者工程测试：

//死信队列测试
@Test
public void testDlx(){
    //1、测试过期时间，死信消息
    //rabbitTemplate.convertAndSend("ttlQueue","我是一条消息，我会死吗");

    //2、测试队列长度限制，消息死信
    for (int i = 0; i < 20 ; i++) {
        rabbitTemplate.convertAndSend("ttlQueue","我是一条消息，我会死吗");
    }
    //前两步测试结果：死信队列会有21条记录  1（过期） + 10（限制）+10（正常队列过期后的10条）
}

3、消息成为死信的第三种情况实现

1）.在配置文件中 添加手动确认的配置

spring:
  rabbitmq:
    listener:
      simple:
        acknowledge-mode: manual

2）.添加正常队列的监听器

package com.woniu.rabbitmq.mq;

import com.rabbitmq.client.Channel;
import lombok.SneakyThrows;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.annotation.RabbitHandler;
import org.springframework.amqp.rabbit.annotation.RabbitListener;
import org.springframework.stereotype.Component;

/*
 * @Date:2023/2/28
 * @Description:
 */
@Component
@RabbitListener(queues = "ttlQueue")
public class TtlListener {

    @SneakyThrows
    @RabbitHandler
    public void dlxQ(String msg, Message message, Channel channel){
        long deliveryTag = message.getMessageProperties().getDeliveryTag();
        try {
            System.out.println(new String(message.getBody()));
            System.out.println("处理业务逻辑");
            int m = 1/0;
            channel.basicAck(deliveryTag,true);
        }catch(Exception ex){
            /**  basicNack(long deliveryTag, boolean multiple, boolean requeue)
             *   multiple是否批量. true：将一次性拒绝所有小于或者等于deliveryTag的消息。
             *   requeue：被拒绝的消息是否重回队列。如果设置为true，则消息重新回到queue，broker会重新发送该消息给消费端,如果			   *   为 requeue=false，不重回队列，则消息发送最终到死信队列
             */
            channel.basicNack(deliveryTag,true,false);
        }
    }
}

3）.在生产端的testDlx方法再次给正常交换机发送消息

//死信队列测试
@Test
public void testDlx(){
    rabbitTemplate.convertAndSend("ttlQueue","我是一条消息，我会死吗？");
}

4. 延迟队列

延迟队列，即消息进入队列后不会立即被消费者调用，只有到达指定时间后，才会被调用者调用消费。

如下需求：

  1. 下单后，30分钟未支付，取消订单，回滚库存。

rabbitmq_第25张图片

当用户提交订单后，数据库保存订单信息，同时库存表相应的库存减少，然后消息队列保存订单的信息（如订单Id），此时库存系统监听队列，队列不会把消息立刻发送给库存，而是过30分钟再把信息发送给库存系统，库存系统去查询订单数据库，根据订单id查询，如果该订单还没有支付，则取消订单，回滚库存，如果支付过了，则库存表什么都不用做。也就是给用户30分钟的机会，一个订单在30分钟后还没有支付，则该订单的库存信息直接回滚。

  1. 新用户注册成功7天后，发送短信问候。

实现方式：

  1. 定时器：我们可以写一段代码，在某个时间段查询订单表的支付情况。把提交订单的时间查出来和当前系统时间比较，30分钟之类如果订单状态为支付，则取消该订单，大家思考一下有什么问题？
  2. 延迟队列：很可惜，在RabbitMQ中并未提供延迟队列功能。但是可以使用：TTL+死信队列 组合实现延迟队列的效果。

rabbitmq_第26张图片

6.1 延迟队列实现过程

通过插件实现

a, 把插件放入rabbitmq安装目录的plugins目录

在这里插入图片描述

b, 进入rabbitmq 安装目录的sbin 目录

执行下面命令让改插件生效

rabbitmq-plugins enable rabbitmq_delayed_message_exchange

rabbitmq_第27张图片

代码实现

1：定义个一个延迟交换机，一个队列

 // 延迟交换机，消息队列
    @Bean
    public Queue delayQueue(){
        return QueueBuilder.durable("delay").build();
    }

    /**
     *  CustomExchange: 自定义交换机 ，是fanout,direct,topic 交换机
     * @return
     */
    @Bean
    public CustomExchange customExchange(){

        Map map = new HashMap();
        //指定交换机类型
        map.put("x-delayed-type","direct");
        /**
         * arg1:交换机名字
         * arg2: 交换机信息类型，延迟消息
         * arg3: 是否持久化，是否将没有被消费的消息持久化
         * arg4: 没有队列绑定到交换机，交换机是否删除。
         * arg5: 初始化参数
         */
        return  new CustomExchange("customExchange","x-delayed-message",
                true,false,map);

    }

    /**
     * 交换机绑定队列
     * @param delayQueue
     * @param customExchange
     * @return
     */
    @Bean
    public Binding delayQueueTocustomExchange(Queue delayQueue,CustomExchange customExchange){
        return BindingBuilder.bind(delayQueue).to(customExchange).with("delay").noargs();
    }

2: 定义个生产者


/**
 * 往消息队列返送消息
 */
@Component
@Slf4j
public class DelayProduct {

    @Autowired
    private RabbitTemplate rabbitTemplate;

    public void send(String msg,int delayTime){
        log.info("发送消息");
        rabbitTemplate.convertAndSend("customExchange", "delay", msg,
                new MessagePostProcessor() {
            /**
             * 在消息发送到消息队列之前对消息进行处理
             * @param message
             * @return
             * @throws AmqpException
             */
            @Override
            public Message postProcessMessage(Message message) throws AmqpException {
                // 给消息设置过期时间，单位是毫秒
                message.getMessageProperties().setDelay(delayTime);
                return message;
            }
        });
    }

}

3: 定义个消费者

@Component
@Slf4j
public class DelayConsumer {

    @Autowired
    private RabbitTemplate rabbitTemplate;

    @RabbitListener(queues = "delay")
    public void recevied(String msg,Channel channel,Message message) throws IOException {
        log.info("消费消息："+ msg);
         /**
         * 消费信息的id.
         * 是否批量确认信息
         */
        channel.basicAck(message.getMessageProperties().getDeliveryTag(),false);

    }

}

5. 日志与监控

7.1 RabbitMQ日志

RabbitMQ默认日志存放路径： /var/log/rabbitmq/[email protected]

日志包含了RabbitMQ的版本号、Erlang的版本号、RabbitMQ服务节点名称、cookie的hash值、RabbitMQ配置文件地址、内存限制、磁盘限制、默认账户guest的创建以及权限配置等等。

7.2 rabbitmq常用命令

1、查看队列

rabbitmqctl list_queues               #查看所有虚拟主机里面的队列
rabbitmqctl list_queues  -p  /vhost   #查看某个虚拟主机里面的队列

2、删除所有队列

rabbitmqctl stop_app   #关闭应用
rabbitmqctl reset      #清除队列中的消息
rabbitmqctl start_app  # 再次启动此应用

注意：此方式，会同时删除一些配置信息，需要慎用

3、查看rabbitmq中的交换机

rabbitmqctl list_exchanges [-p  vhost]

4、rabbitmq的用户操作命令

rabbitmqctl list_users
rabbitmqctl add_user 用户名 密码
rabbitmqctl delete_user 用户名

5、查看未被确认的队列

rabbitmqctl list_queues  name messages_unacknowledged

6、查看队列环境变量

rabbitmqctl environment

7、查看队列消费者信息

rabbitmqctl list_consumers

8、查看队列连接

rabbitmqctl list_connections

9、查看准备就绪的队列

rabbitmqctl list_queues name messages_ready

10、查看单个队列的内存使用

rabbitmqctl list_queues name memory

11、列出所有虚拟主机

rabbitmqctl list_vhosts
rabbitmqctl status | grep rabbit  ##查看rabbitmq的版本

6 消息追踪

在使用任何消息中间件的过程中，难免会出现某条消息异常丢失的情况。

对于RabbitMQ而言，可能是因为生产者或消费者与RabbitMQ断开了连接，而它们与RabbitMQ又采用了不同的确认机制；也有可能是因为交换器与队列之间不同的转发策略；甚至是交换器并没有与任何队列进行绑定，生产者又不感知或者没有采取相应的措施；另外RabbitMQ本身的集群策略也可能导致消息的丢失。这个时候就需要有一个较好的机制跟踪记录消息的投递过程，以此协助开发和运维人员进行问题的定位。

在RabbitMQ中可以使用Firehose和rabbitmq_tracing插件功能来实现消息追踪。

8.1 消息追踪-Firehose(了解)

firehose的机制是将生产者投递给队列的消息，以及队列投递给消费者的消息按照指定的格式发送到默认的exchange上。这个默认的exchange的名称为amq.rabbitmq.trace，它是一个topic类型的exchange。发送到这个exchange上的消息的routing key为 publish.exchangename 和 deliver.queuename。其中exchangename和queuename为实际交换机和队列的名称，分别对应生产者投递到exchange的消息，和消费者从queue上获取的消息。

1、打开trace 功能

rabbitmqctl trace_on [-p vhost]     ##开启Firehose命令

打开 trace 会影响消息写入功能，适当打开后请关闭，关闭Firehose命令：rabbitmqctl trace_off [-p vhost]，打开后会多一个交换机，如下图

rabbitmq_第28张图片

2、新建一个消息队列，并给该交换机绑定一个消息队列

rabbitmq_第29张图片

rabbitmq_第30张图片

3、打开任何一个其他的队列，并往队列发送一条消息，则这个test_trace队列也会有其他队列的消息

8.2 消息追踪-rabbitmq_tracing

rabbitmq_tracing和Firehose在实现上如出一辙，只不过rabbitmq_tracing的方式比Firehose多了一层GUI的包装，更容易使用和管理。

1、启用插件：

[root@localhost ~]# rabbitmq-plugins list                       ###查询插件
[root@localhost ~]# rabbitmq-plugins enable rabbitmq_tracing

rabbitmq_第31张图片

1、新建一个trace，将来所有的消息都被trace保存起来，文件的默认路径为/var/tmp/rabbitmq-tracing

rabbitmq_第32张图片

不管在哪个队列发送消息，都会保存到日志文件mytrace.log中

rabbitmq_第33张图片

如果是用其它的用户创建这个消息日志。则需要在/etc/rabbitmq/rabbit.config配置文件添加如下内容：创建的用户名和密码

{rabbitmq_tracing,
    [
     {directory, "/var/log/rabbitmq/rabbitmq_tracing"},
     {username, "woniu"}, 
     {password, "woniu"}
    ]
}

重启消息队列服务器即可

7.RabbitMQ应用问题

消息可靠性保障、消息幂等性处理 、微服务中用消息队列实现微服务的异步调用，而用openfeign采用的同步

9.1 消息可靠性保障-消息补偿

  • 消息补偿机制

需求：100%确保消息发送成功

rabbitmq_第34张图片

9.2 消息幂等性保障-乐观锁（了解）

幂等性指一次和多次请求某一个资源，对于资源本身应该具有同样的结果。也就是说，其任意多次执行对资源本身所产生的影响均与一次执行的影响相同。MQ中指，消费多条相同的消息，得到与消费该消息一次相同的结果。

  • 乐观锁解决方案

rabbitmq_第35张图片

第一次生产者发送一条消息，但是消费方系统宕机，即不能立即消费，于是回调检查服务监听不到Q2的响应消息，也不会写入数据库MDB，当隔一段时间后，生产者又发送一条延迟消息到Q3队列，回调检查服务能监听到Q3队列消息，于是和MDB去比较是否有，由于消费方的失败，消息最终没有入库MDB，这个时候回调检查服务和MDB数据库比对失败，于是通知生产者，重新发送一条消息给消费者，那么这个时候Q1就有2条消息了，当消费方正常运行的时候，由于监听的Q1是两条2消息，怎么办呢？乐观锁

第一次执行：version=1
update account set money = money - 500 , version = version + 1 where id = 1 and version = 1

第二次执行：version=2
update account set money = money - 500 , version = version + 1 where id = 1 and version = 1

9.3 消息积压问题

实际场景可能有这样现象：大量消息在rabbitmq里积压了几个小时了还没消息，怎么办？

[root@localhost ~]# rabbitmq-plugins list                       ###查询插件
[root@localhost ~]# rabbitmq-plugins enable rabbitmq_tracing

rabbitmq_第36张图片

1、新建一个trace，将来所有的消息都被trace保存起来，文件的默认路径为/var/tmp/rabbitmq-tracing

rabbitmq_第37张图片

不管在哪个队列发送消息，都会保存到日志文件mytrace.log中

rabbitmq_第38张图片

如果是用其它的用户创建这个消息日志。则需要在/etc/rabbitmq/rabbit.config配置文件添加如下内容：创建的用户名和密码

{rabbitmq_tracing,
    [
     {directory, "/var/log/rabbitmq/rabbitmq_tracing"},
     {username, "woniu"}, 
     {password, "woniu"}
    ]
}

重启消息队列服务器即可

7.RabbitMQ应用问题

消息可靠性保障、消息幂等性处理 、微服务中用消息队列实现微服务的异步调用，而用openfeign采用的同步

9.1 消息可靠性保障-消息补偿

  • 消息补偿机制

需求：100%确保消息发送成功

rabbitmq_第39张图片

9.2 消息幂等性保障-乐观锁（了解）

幂等性指一次和多次请求某一个资源，对于资源本身应该具有同样的结果。也就是说，其任意多次执行对资源本身所产生的影响均与一次执行的影响相同。MQ中指，消费多条相同的消息，得到与消费该消息一次相同的结果。

  • 乐观锁解决方案

rabbitmq_第40张图片

第一次生产者发送一条消息，但是消费方系统宕机，即不能立即消费，于是回调检查服务监听不到Q2的响应消息，也不会写入数据库MDB，当隔一段时间后，生产者又发送一条延迟消息到Q3队列，回调检查服务能监听到Q3队列消息，于是和MDB去比较是否有，由于消费方的失败，消息最终没有入库MDB，这个时候回调检查服务和MDB数据库比对失败，于是通知生产者，重新发送一条消息给消费者，那么这个时候Q1就有2条消息了，当消费方正常运行的时候，由于监听的Q1是两条2消息，怎么办呢？乐观锁

第一次执行：version=1
update account set money = money - 500 , version = version + 1 where id = 1 and version = 1

第二次执行：version=2
update account set money = money - 500 , version = version + 1 where id = 1 and version = 1

9.3 消息积压问题

实际场景可能有这样现象：大量消息在rabbitmq里积压了几个小时了还没消息，怎么办？

这种时候只好采用 “丢弃+批量重导” 的方式来解决了，临时写个程序，连接到mq里面消费数据，收到消息之后直接将其丢弃，快速消费掉积压的消息，降低MQ的压力。或者多启几个消费端。

你可能感兴趣的:(rabbitmq,分布式)

  • 消息中间件有哪些常见类型 xmh-sxh-1314 java
    消息中间件根据其设计理念和用途，可以大致分为以下几种常见类型：点对点消息队列（Point-to-PointMessagingQueues）：在这种模型中，消息被发送到特定的队列中，消费者从队列中取出并处理消息。队列中的消息只能被一个消费者消费，消费后即被删除。常见的实现包括IBM的MQSeries、RabbitMQ的部分使用场景等。适用于任务分发、负载均衡等场景。发布/订阅消息模型（Pub/Sub
  • GitHub上克隆项目 bigbig猩猩 github
    从GitHub上克隆项目是一个简单且直接的过程，它允许你将远程仓库中的项目复制到你的本地计算机上，以便进行进一步的开发、测试或学习。以下是一个详细的步骤指南，帮助你从GitHub上克隆项目。一、准备工作1.安装Git在克隆GitHub项目之前，你需要在你的计算机上安装Git工具。Git是一个开源的分布式版本控制系统，用于跟踪和管理代码变更。你可以从Git的官方网站（https://git-scm.
  • 01-Git初识 Meereen Gitgit
    01-Git初识概念：一个免费开源，分布式的代码版本控制系统，帮助开发团队维护代码作用：记录代码内容。切换代码版本，多人开发时高效合并代码内容如何学：个人本机使用：Git基础命令和概念多人共享使用：团队开发同一个项目的代码版本管理Git配置用户信息配置：用户名和邮箱，应用在每次提交代码版本时表明自己的身份命令：查看git版本号git-v配置用户名gitconfig--globaluser.name
  • Kafka是如何保证数据的安全性、可靠性和分区的 喜欢猪猪 kafka分布式
    Kafka作为一个高性能、可扩展的分布式流处理平台，通过多种机制来确保数据的安全性、可靠性和分区的有效管理。以下是关于Kafka如何保证数据安全性、可靠性和分区的详细解析：一、数据安全性SSL/TLS加密：Kafka支持SSL/TLS协议，通过配置SSL证书和密钥来加密数据传输，确保数据在传输过程中不会被窃取或篡改。这一机制有效防止了中间人攻击，保护了数据的安全性。SASL认证：Kafka支持多种
  • 06选课支付模块之基于消息队列发送支付通知消息 echo 云清 学成在线javarabbitmq消息队列支付通知学成在线
    消息队列发送支付通知消息需求分析订单服务作为通用服务，在订单支付成功后需要将支付结果异步通知给其他对接的微服务，微服务收到支付结果根据订单的类型去更新自己的业务数据技术方案使用消息队列进行异步通知需要保证消息的可靠性即生产端将消息成功通知到服务端：消息发送到交换机-->由交换机发送到队列-->消费者监听队列，收到消息进行处理，参考文章02-使用Docker安装RabbitMQ-CSDN博客生产者确
  • 在RabbitMQ中四种常见的消息路由模式 Xwzzz_ rabbitmq分布式
    1.Fanout模式Fanout模式的交换机是扇出交换机（FanoutExchange），它会将消息广播给所有绑定到它的队列，而不考虑消息的内容或路由键。工作原理：生产者发送消息到FanoutExchange。FanoutExchange会将消息广播给所有绑定到它的队列，所有绑定的队列都会收到这条消息。消费者监听绑定的队列，处理收到的消息。特点：没有路由键：消息不需要路由键，所有绑定的队列都会接收
  • WebMagic：强大的Java爬虫框架解析与实战 Aaron_945 Javajava爬虫开发语言
    文章目录引言官网链接WebMagic原理概述基础使用1.添加依赖2.编写PageProcessor高级使用1.自定义Pipeline2.分布式抓取优点结论引言在大数据时代，网络爬虫作为数据收集的重要工具，扮演着不可或缺的角色。Java作为一门广泛使用的编程语言，在爬虫开发领域也有其独特的优势。WebMagic是一个开源的Java爬虫框架，它提供了简单灵活的API，支持多线程、分布式抓取，以及丰富的
  • 【RabbitMQ 项目】服务端：数据管理模块之绑定管理 月夜星辉雪 rabbitmq分布式
    文章目录一.编写思路二.代码实践一.编写思路定义绑定信息类交换机名称队列名称绑定关键字：交换机的路由交换算法中会用到没有是否持久化的标志，因为绑定是否持久化取决于交换机和队列是否持久化，只有它们都持久化时绑定才需要持久化。绑定就好像一根绳子，两端连接着交换机和队列，当一方不存在，它就没有存在的必要了定义绑定持久化类构造函数：如果数据库文件不存在则创建，打开数据库，创建binding_table插入
  • RabbitMQ生产者重复机制与确认机制 java炒饭小能手 java-rabbitmqrabbitmqjava
    重复机制生产者发送消息时，出现了网络故障，导致与MQ的连接中断。为了解决这个问题，SpringAMQP提供的消息发送时的重试机制。即：当RabbitTemplate与MQ连接超时后，多次重试。需要修该发送端模块的application.yaml文件，添加下面的内容：spring:rabbitmq:connection-timeout:1s#设置MQ的连接超时时间template:retry:ena
  • 华为云分布式缓存服务DCS 8月新特性发布 华为云PaaS服务小智 华为云分布式缓存
    分布式缓存服务（DistributedCacheService，简称DCS）是华为云提供的一款兼容Redis的高速内存数据处理引擎，为您提供即开即用、安全可靠、弹性扩容、便捷管理的在线分布式缓存能力，满足用户高并发及数据快速访问的业务诉求。此次为大家带来DCS8月的特性更新内容，一起来看看吧！
  • 浅谈MapReduce Android路上的人 Hadoop分布式计算mapreduce分布式框架hadoop
    从今天开始，本人将会开始对另一项技术的学习，就是当下炙手可热的Hadoop分布式就算技术。目前国内外的诸多公司因为业务发展的需要，都纷纷用了此平台。国内的比如BAT啦，国外的在这方面走的更加的前面，就不一一列举了。但是Hadoop作为Apache的一个开源项目，在下面有非常多的子项目，比如HDFS，HBase,Hive，Pig,等等，要先彻底学习整个Hadoop，仅仅凭借一个的力量，是远远不够的。
  • KVM+GFS分布式存储系统构建KVM高可用 henan程序媛 分布式GFS高可用KVM
    一、案列分析1.1案列概述本章案例主要使用之前章节所学的KVM及GlusterFs技术,结合起来从而实现KVM高可用。利用GlusterFs分布式复制卷，对KVM虚拟机文件进行分布存储和冗余。分布式复制卷主要用于需要冗余的情况下把一个文件存放在两个或两个以上的节点,当其中一个节点数据丢失或者损坏之后，KVM仍然能够通过卷组找到另一节点上存储的虚拟机文件，以保证虚拟机正常运行。当节点修复之后，Glu
  • Hadoop 傲雪凌霜，松柏长青 后端大数据hadoop大数据分布式
    ApacheHadoop是一个开源的分布式计算框架，主要用于处理海量数据集。它具有高度的可扩展性、容错性和高效的分布式存储与计算能力。Hadoop核心由四个主要模块组成，分别是HDFS（分布式文件系统）、MapReduce（分布式计算框架）、YARN（资源管理）和HadoopCommon（公共工具和库）。1.HDFS（HadoopDistributedFileSystem）HDFS是Hadoop生
  • 大模型训练数据库Common Crawl WindyChanChan 数据集语言模型数据库
    CommonCrawl介绍‌‌CommonCrawl是一个非营利组织，致力于通过大规模分布式爬虫系统定期抓取整个Web并将其存储在一个可公开访问的数据库中。CommonCrawl的数据收集和处理过程包括使用Python开源爬虫工具收集全球范围内的网站数据，并将其上传到‌CommonCrawl基金会的数据仓库中。该项目从2008年开始，至今已经积累了大量的原始网页数据、元数据和文本提取数据。这些数据
  • 慢速连接攻击是什么？慢速连接攻击怎么防护？ 快快小毛毛 网络ddos服务器
    慢速连接攻击（SlowConnectionAttack），又称慢速攻击（SlowlorisAttack），是一种网络攻击技术，旨在通过占用服务器上的所有可用连接资源来使其无法响应正常请求。与传统的拒绝服务（DoS）和分布式拒绝服务（DDoS）攻击不同，慢速攻击并不依赖于发送大量数据包来消耗带宽，而是利用HTTP、TCP或SSL等协议的特性，通过发送大量不完整的请求或缓慢发送数据来占用服务器资源，使
  • 分布式锁和spring事务管理 暴躁的鱼 锁及事务分布式springjava
    最近开发一个小程序遇到一个需求需要实现分布式事务管理业务需求用户在使用小程序的过程中可以查看景点，对景点地区或者城市标记是否想去，那么需要统计一个地点被标记的人数，以及记录某个用户对某个地点是否标记为想去，用两个表存储数据，一个地点表记录改地点被标记的次数，一个用户意向表记录某个用户对某个地点是否标记为想去。由于可能有多个用户同时标记一个地点，每个用户在前端点击想去按钮之后，后台接收到请求，从数据
  • Gobelieve 架构 weixin_34099526 数据库golangjson
    Gobelievegithub地址声明:转简书JackieF的文章,为了自己方便copy了一份,加一些自己的东西.链接：https://www.jianshu.com/p/8121d6e85282IMCore主要分三大块:im客户连接服务器（可分布式部署，暂无负载均衡模块)imr路由查询服务器（主要解决im分布式部署的问题）ims存储服务器(主从部署)基础模块1.数据包协议包：header(12)
  • Kafka详细解析与应用分析 芊言芊语 kafka分布式
    Kafka是一个开源的分布式事件流平台（EventStreamingPlatform），由LinkedIn公司最初采用Scala语言开发，并基于ZooKeeper协调管理。如今，Kafka已经被Apache基金会纳入其项目体系，广泛应用于大数据实时处理领域。Kafka凭借其高吞吐量、持久化、分布式和可靠性的特点，成为构建实时流数据管道和流处理应用程序的重要工具。Kafka架构Kafka的架构主要由
  • linux挂载文件夹 小码快撩 linux
    1.使用NFS（NetworkFileSystem）NFS是一种分布式文件系统协议，允许一个系统将其文件系统的一部分共享给其他系统。检查是否安装NFSrpm-qa|grepnfs2.启动和启用NFS服务假设服务名称为nfs-server.service，你可以使用以下命令启动和启用它：sudosystemctlstartnfs-server.servicesudosystemctlenablenf
  • Kafka 基础与架构理解 StaticKing KAFKAkafka
    目录前言Kafka基础概念消息队列简介：Kafka与传统消息队列（如RabbitMQ、ActiveMQ）的对比Kafka的组件Kafka的工作原理：消息的生产、分发、消费流程Kafka系统架构Kafka的分布式架构设计Leader-Follower机制与数据复制Log-basedStorage和持久化Broker间通信协议Zookeeper在Kafka中的角色总结前言Kafka是一个分布式的消息系
  • Rides实现分布式锁，保障数据一致性,Redisson分布式事务处理 朱杰jjj 缓存分布式
    分布式环境下分布式锁有三种方式：基于数据库分布式锁基于Redis分布式锁基于zk分布式锁本帖只介绍Redis分布式锁为什么需要用到分布式锁？在单机环境下一个服务中多个线程对同一个事物或数据资源进行操作时，可以通过添加加锁方式（synchronized和lock）来解决数据一致性的问题。但是如果出现多个服务的情况下，这时候我们在通过synchronized和lock的方式来加锁会出现问题，因为多个服
  • 机电综合管理系统架构 小熊coder 机载系统系统架构
    文章目录一、机电综合管理系统架构1.系统概述2.架构层次3.核心组件二、余度管理1.余度概述2.硬件冗余3.软件冗余4.通信冗余三、总线架构1.MIL-STD-1553B总线2.ARINC429总线3.ARINC629总线4.AFDX/ARINC664总线四、未来发展趋势1.分布式架构2.高速网络3.智能化与自动化结语机电综合管理系统（ElectromechanicalManagementSyst
  • 华为云分布式缓存服务DCS与开源服务差异对比 hcinfo_18 redis使用华为云Redis5.0分布式缓存服务Redis客户端
    分布式缓存服务DCS提供单机、主备、集群等丰富的实例类型，满足用户高读写性能及快速数据访问的业务诉求。支持丰富的实例管理操作，帮助用户省去运维烦恼。用户可以聚焦于业务逻辑本身，而无需过多考虑部署、监控、扩容、安全、故障恢复等方面的问题。DCS基于开源Redis、Memcached向用户提供一定程度定制化的缓存服务，因此，除了拥有开源服务缓存数据库的优秀特性，DCS提供更多实用功能。一、与开源Red
  • Dubbo架构概览：服务注册与发现、远程调用、监控与管理 木南曌 dubbo架构
    Dubbo是一个成熟的、高性能的、基于Java的微服务开发框架，它主要用于解决分布式系统中的服务治理问题，包括服务的注册与发现、远程过程调用（RPC）、服务监控与管理等多个关键环节。以下是Dubbo架构概览的详细介绍：服务注册与发现Dubbo的服务注册与发现机制是其核心功能之一，它依赖于注册中心来管理服务的生命周期和定位服务提供者。1.服务提供者（Provider）服务提供者是实际提供服务的节点，
  • 【RabbitMQ 项目】服务端数据管理模块之交换机管理 月夜星辉雪 rabbitmqoracle数据库
    文章目录一.编写思路二.代码实践一.编写思路定义交换机类型直接交换广播交换主题交换定义交换机名字类型是否持久化定义交换机持久化类(持久化到sqlite3)构造函数(只能成功，不能失败)如果数据库(文件)不存在则创建打开数据库打开exchange_table数据库表插入交换机移除交换机将数据库中的交换机恢复到内存中传入一个哈希表，key为名字，value为交换机的智能指针，填充该哈希表定义交换机管理
  • 【仿RabbitMQ消息队列项目day2】使用muduo库中基于protobuf的应用层协议进行通信 月夜星辉雪 rabbitmq网络分布式c++后端服务器linux
    一.什么是muduo?muduo库是⼀个基于非阻塞IO和事件驱动的C++高并发TCP网络编程库。简单来理解，它就是对原生的TCP套接字的封装，是一个比socket编程接口更好用的编程库。二.使用muduo库完成一个英译汉翻译服务TranslateServer.hpp:#pragmaonce#include#include#include#include#include"muduo/net/TcpC
  • rabbitmq 楚楚ccc Java系列rabbitmq分布式
    1.消息服务概述、rabbitmq核心概念消息服务概述：大多数应用中，可通过消息服务中间件来提升系统异步通信，扩展解耦能力两个重要概念：消息代理(messagebroker)和目的地(destination)。当消息发送者者发出消息后，将由消息代理接管，消息代理保证将消息传递至目的地两种形式的目的地：队列(queue):点对点的消息通信(point-to-point)主题(topic):发布(pu
  • 使用 RabbitMQ 实现秒杀订单系统的异步消息处理 c137范特西 rabbitmq分布式
    使用RabbitMQ实现秒杀订单系统的异步消息处理在秒杀系统中，如何确保高并发环境下的订单处理稳定高效是个很大的挑战。为了解决这个问题，我们通常会引入消息队列，通过异步处理来削峰填谷。这篇文章将详细讲解如何使用RabbitMQ来设计一个秒杀订单系统的异步消息处理流程，重点是如何使用交换机（Exchange）、队列（Queue）、路由键（RoutingKey）以及死信队列（DeadLetterQue
  • nfs服务搭建 GHope
    nfs是什么？基哥度娘网络文件系统(NFS)是sun微系统最初开发的分布式文件系统协议,[1]允许客户端计算机上的用户通过计算机网络访问文件很像本地存储被访问。NFS与许多其他协议一样,在开放网络计算远程过程调用(很久以前RPC)系统上建立。NFS是在请求注释(RFC)中定义的开放标准,允许任何人实现协议。NFSNFS优势：节省本地存储空间，将常用的数据存放在一台NFS服务器上且可以通过网络访问，
  • hbase介绍 CrazyL- 云计算+大数据hbase
    hbase是一个分布式的、多版本的、面向列的开源数据库hbase利用hadoophdfs作为其文件存储系统，提供高可靠性、高性能、列存储、可伸缩、实时读写、适用于非结构化数据存储的数据库系统hbase利用hadoopmapreduce来处理hbase、中的海量数据hbase利用zookeeper作为分布式系统服务特点：数据量大：一个表可以有上亿行，上百万列（列多时，插入变慢）面向列：面向列（族）的
  • 对于规范和实现，你会混淆吗？ yangshangchuan HotSpot
    昨晚和朋友聊天，喝了点咖啡，由于我经常喝茶，很长时间没喝咖啡了，所以失眠了，于是起床读JVM规范，读完后在朋友圈发了一条信息： JVM Run-Time Data Areas：The Java Virtual Machine defines various run-time data areas that are used during execution of a program. So
  • android 网络 百合不是茶 网络
    android的网络编程和java的一样没什么好分析的都是一些死的照着写就可以了,所以记录下来  方便查找   ,  服务器使用的是TomCat   服务器代码;  servlet的使用需要在xml中注册 package servlet; import java.io.IOException; import java.util.Arr
  • [读书笔记]读法拉第传 comsci 读书笔记
          1831年的时候,一年可以赚到1000英镑的人..应该很少的...       要成为一个科学家,没有足够的资金支持,很多实验都无法完成       但是当钱赚够了以后....就不能够一直在商业和市场中徘徊......
  • 随机数的产生 沐刃青蛟 随机数
    c++中阐述随机数的方法有两种：   一是产生假随机数（不管操作多少次，所产生的数都不会改变）          这类随机数是使用了默认的种子值产生的，所以每次都是一样的。   //默认种子 for (int i = 0; i < 5; i++) { cout<<
  • PHP检测函数所在的文件名 IT独行者 PHP函数
    很简单的功能，用到PHP中的反射机制，具体使用的是ReflectionFunction类，可以获取指定函数所在PHP脚本中的具体位置。 创建引用脚本。 代码：   [php]   view plain copy // Filename: functions.php    <?php&nbs
  • 银行各系统功能简介 文强chu 金融
    银行各系统功能简介 　 业务系统 核心业务系统 业务功能包括：总账管理、卡系统管理、客户信息管理、额度控管、存款、贷款、资金业务、国际结算、支付结算、对外接口等 清分清算系统 以清算日期为准，将账务类交易、非账务类交易的手续费、代理费、网络服务费等相关费用，按费用类型计算应收、应付金额，经过清算人员确认后上送核心系统完成结算的过程 国际结算系
  • Python学习1(pip django 安装以及第一个project) 小桔子 pythondjangopip
        最近开始学习python,要安装个pip的工具。听说这个工具很强大，安装了它，在安装第三方工具的话so easy!然后也下载了，按照别人给的教程开始安装，奶奶的怎么也安装不上！ 第一步：官方下载pip-1.5.6.tar.gz, https://pypi.python.org/pypi/pip easy! 第二部：解压这个压缩文件，会看到一个setup.p
  • php 数组 aichenglong PHP排序数组循环多维数组
    1 php中的创建数组 $product = array('tires','oil','spark');//array()实际上是语言结构而不  是函数 2 如果需要创建一个升序的排列的数字保存在一个数组中，可以使用range()函数来自动创建数组 $numbers=range(1,10)//1 2 3 4 5 6 7 8 9 10 $numbers=range(1,10,
  • 安装python2.7 AILIKES python
    安装python2.7 1、下载可从 http://www.python.org/进行下载#wget https://www.python.org/ftp/python/2.7.10/Python-2.7.10.tgz 2、复制解压 #mkdir -p /opt/usr/python #cp  /opt/soft/Python-2
  • java异常的处理探讨 百合不是茶 JAVA异常
    //java异常  /* 1，了解java 中的异常处理机制，有三种操作 a,声明异常  b,抛出异常  c,捕获异常 2，学会使用try-catch-finally来处理异常 3，学会如何声明异常和抛出异常 4，学会创建自己的异常   */   //2，学会使用try-catch-finally来处理异常  
  • getElementsByName实例 bijian1013 element
    实例1： <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/1999/x
  • 探索JUnit4扩展：Runner bijian1013 java单元测试JUnit
            参加敏捷培训时，教练提到Junit4的Runner和Rule，于是特上网查一下，发现很多都讲的太理论，或者是举的例子实在是太牵强。多搜索了几下，搜索到两篇我觉得写的非常好的文章。         文章地址：http://www.blogjava.net/jiangshachina/archive/20
  • [MongoDB学习笔记二]MongoDB副本集 bit1129 mongodb
    1. 副本集的特性   1)一台主服务器(Primary),多台从服务器(Secondary)   2)Primary挂了之后，从服务器自动完成从它们之中选举一台服务器作为主服务器，继续工作，这就解决了单点故障，因此，在这种情况下，MongoDB集群能够继续工作   3)挂了的主服务器恢复到集群中只能以Secondary服务器的角色加入进来   2
  • 【Spark八十一】Hive in the spark assembly bit1129 assembly
    Spark SQL supports most commonly used features of HiveQL. However, different HiveQL statements are executed in different manners: 1. DDL statements (e.g. CREATE TABLE, DROP TABLE, etc.)
  • Nginx问题定位之监控进程异常退出 ronin47
    nginx在运行过程中是否稳定，是否有异常退出过？这里总结几项平时会用到的小技巧。 1. 在error.log中查看是否有signal项，如果有，看看signal是多少。 比如，这是一个异常退出的情况： $grep signal error.log 2012/12/24 16:39:56 [alert] 13661#0: worker process 13666 exited on s
  • No grammar constraints (DTD or XML schema).....两种解决方法 byalias xml
    方法一：常用方法   关闭XML验证 工具栏：windows => preferences => xml => xml files => validation => Indicate when no grammar is specified:选择Ignore即可。 方法二：（个人推荐） 添加 内容如下 <?xml version=
  • Netty源码学习-DefaultChannelPipeline bylijinnan netty
    package com.ljn.channel; /** * ChannelPipeline采用的是Intercepting Filter 模式 * 但由于用到两个双向链表和内部类，这个模式看起来不是那么明显，需要仔细查看调用过程才发现 * * 下面对ChannelPipeline作一个模拟，只模拟关键代码： */ public class Pipeline {
  • MYSQL数据库常用备份及恢复语句 chicony mysql
    备份MySQL数据库的命令，可以加选不同的参数选项来实现不同格式的要求。 mysqldump -h主机 -u用户名 -p密码 数据库名 > 文件 备份MySQL数据库为带删除表的格式，能够让该备份覆盖已有数据库而不需要手动删除原有数据库。 mysqldump -–add-drop-table -uusername -ppassword databasename > ba
  • 小白谈谈云计算--基于Google三大论文 CrazyMizzz Google云计算GFS
        之前在没有接触到云计算之前，只是对云计算有一点点模糊的概念，觉得这是一个很高大上的东西，似乎离我们大一的还很远。后来有机会上了一节云计算的普及课程吧，并且在之前的一周里拜读了谷歌三大论文。不敢说理解，至少囫囵吞枣啃下了一大堆看不明白的理论。现在就简单聊聊我对于云计算的了解。     我先说说GFS   &n
  • hadoop 平衡空间设置方法 daizj hadoopbalancer
    在hdfs-site.xml中增加设置balance的带宽，默认只有1M： <property>   <name>dfs.balance.bandwidthPerSec</name>     <value>10485760</value>     <description&g
  • Eclipse程序员要掌握的常用快捷键 dcj3sjt126com 编程
      判断一个人的编程水平，就看他用键盘多，还是鼠标多。用键盘一是为了输入代码（当然了，也包括注释），再有就是熟练使用快捷键。 曾有人在豆瓣评 《卓有成效的程序员》：“人有多大懒，才有多大闲”。之前我整理了一个 程序员图书列表，目的也就是通过读书，让程序员变懒。  程序员作为特殊的群体，有的人可以这么懒，懒到事情都交给机器去做，而有的人又可以那么勤奋，每天都孜孜不倦得
  • Android学习之路 dcj3sjt126com Android学习
    转自：http://blog.csdn.net/ryantang03/article/details/6901459 以前有J2EE基础，接触JAVA也有两三年的时间了，上手Android并不困难，思维上稍微转变一下就可以很快适应。以前做的都是WEB项目，现今体验移动终端项目，让我越来越觉得移动互联网应用是未来的主宰。 下面说说我学习Android的感受，我学Android首先是看MARS的视
  • java 遍历Map的四种方法 eksliang javaHashMapjava 遍历Map的四种方法
    转载请出自出处： http://eksliang.iteye.com/blog/2059996 package com.ickes; import java.util.HashMap; import java.util.Iterator; import java.util.Map; import java.util.Map.Entry; /** * 遍历Map的四种方式
  • 【精典】数据库相关相关 gengzg 数据库
    package C3P0; import java.sql.Connection; import java.sql.SQLException; import java.beans.PropertyVetoException; import com.mchange.v2.c3p0.ComboPooledDataSource; public class DBPool{
  • 自动补全 huyana_town 自动补全
    <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"><html xmlns="http://www.w3.org/1999/xhtml&quo
  • jquery在线预览PDF文件，打开PDF文件 天梯梦 jquery
    最主要的是使用到了一个jquery的插件jquery.media.js，使用这个插件就很容易实现了。   核心代码 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.
  • ViewPager刷新单个页面的方法 lovelease androidviewpagertag刷新
      使用ViewPager做滑动切换图片的效果时，如果图片是从网络下载的，那么再子线程中下载完图片时我们会使用handler通知UI线程，然后UI线程就可以调用mViewPager.getAdapter().notifyDataSetChanged()进行页面的刷新，但是viewpager不同于listview，你会发现单纯的调用notifyDataSetChanged()并不能刷新页面
  • 利用按位取反（~）从复合枚举值里清除枚举值 草料场 enum
    以 C# 中的 System.Drawing.FontStyle 为例。   如果需要同时有多种效果， 如：“粗体”和“下划线”的效果，可以用按位或（|） FontStyle style = FontStyle.Bold | FontStyle.Underline;   如果需要去除 style 里的某一种效果，
  • Linux系统新手学习的11点建议 刘星宇 编程工作linux脚本
    　　随着Linux应用的扩展许多朋友开始接触Linux，根据学习Windwos的经验往往有一些茫然的感觉：不知从何处开始学起。这里介绍学习Linux的一些建议。 　　一、从基础开始：常常有些朋友在Linux论坛问一些问题，不过，其中大多数的问题都是很基础的。例如：为什么我使用一个命令的时候，系统告诉我找不到该目录，我要如何限制使用者的权限等问题，这些问题其实都不是很难的，只要了解了 Linu
  • hibernate dao层应用之HibernateDaoSupport二次封装 wangzhezichuan DAOHibernate
    /** * <p>方法描述:sql语句查询 返回List<Class> </p> * <p>方法备注: Class 只能是自定义类 </p> * @param calzz * @param sql * @return * <p>创建人：王川</p> * <p>创建时间：Jul
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他