pan_h1995

黑马RabbitMQ高级学习笔记

RabbitMQ高级内容介绍

RabbitMQ高级特性

消息可靠性投递
Consumer ACK
消费端限流
TTL
死信队列
延迟队列
日志与监控
消息可靠性分析与追踪
管理

RabbitMQ应用问题

消息可靠请保障
消息幂等性处理

RabbitMQ集群搭建

RabbitMQ高可用集群

1、RabbitMQ高级特性

1.1、消息的可靠投递

1、定义

在使用RabbitMQ的时候，作为消息发送方希望杜绝任何消息丢失或投递失败场景。RabbitMQ为我们提供了两种方式用来控制消息的投递可靠性模式。

confirm 确认模式
return退回模式

rabbitMQ整个消息投递的路径为：
pruducer —>rabbitMQ broker ---->exchange------>queue ----> consumer

消息从producer到exchange则会返回一个confirmCallback。
消息从exchange–>queue投递失败则会返回一个returnCallback。
我们将利用这两个callback控制消息的可靠性投递。

2、生产者端代码实现

1）新建spring工程rabbitmq-producer-spring

2）配置pom.xml


<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0modelVersion>

    <groupId>org.examplegroupId>
    <artifactId>rabbitmq-producer-springartifactId>
    <version>1.0-SNAPSHOTversion>

    <properties>
        <maven.compiler.source>8maven.compiler.source>
        <maven.compiler.target>8maven.compiler.target>
    properties>

    <dependencies>
        <dependency>
            <groupId>org.springframeworkgroupId>
            <artifactId>spring-contextartifactId>
            <version>5.1.7.RELEASEversion>
        dependency>

        <dependency>
            <groupId>org.springframework.amqpgroupId>
            <artifactId>spring-rabbitartifactId>
            <version>2.1.8.RELEASEversion>
        dependency>

        <dependency>
            <groupId>junitgroupId>
            <artifactId>junitartifactId>
            <version>4.12version>
        dependency>

        <dependency>
            <groupId>org.springframeworkgroupId>
            <artifactId>spring-testartifactId>
            <version>5.1.7.RELEASEversion>
        dependency>
    dependencies>

    <build>
        <plugins>
            <plugin>
                <groupId>org.apache.maven.pluginsgroupId>
                <artifactId>maven-compiler-pluginartifactId>
                <version>3.8.0version>
                <configuration>
                    <source>1.8source>
                    <target>1.8target>
                configuration>
            plugin>
        plugins>
    build>
project>

3）配置rabbitmq相关信息

rabbitmq.properties


rabbitmq.host=172.16.98.133
rabbitmq.port=5672
rabbitmq.username=heima
rabbitmq.password=heima
rabbitmq.virtual-host=/itcast

4）spring配置文件，定义队列和交换机

spring-rabbitmq-producer.xml


<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"
                               publisher-confirms="true"
                               publisher-returns="true"
    />
    
    <rabbit:admin connection-factory="connectionFactory" />

    
    <rabbit:template id="rabbitTemplate" connection-factory="connectionFactory"/>

    
    <rabbit:queue id="test_queue_confirm" name="queue_confirm_test">rabbit:queue>
    <rabbit:direct-exchange name="exchange_confirm_test">
        <rabbit:bindings>
            <rabbit:binding queue="queue_confirm_test" key="confirm">rabbit:binding>
        rabbit:bindings>
    rabbit:direct-exchange>


beans>

5）编写测试类进行测试

ProducerTest.java



import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.connection.CorrelationData;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.context.annotation.Configuration;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations = "classpath:spring-rabbitmq-producer.xml")
public class ProducerTest {
     
    @Autowired
    private RabbitTemplate rabbitTemplate;

    /*
    确认模式：
        步骤：
            1、确认模式开启：ConnectionFactory中开启，publisher-confirms="true"
            2、在rabbitTamplate中定义ConfirmCallback回调函数

    */

    @Test
    public void testConfirm(){
     
        //2、定义回调
        rabbitTemplate.setConfirmCallback(new RabbitTemplate.ConfirmCallback() {
     
            /***
             *
             * @param correlationData 相关配置信息，在convertAncSend中参数配置信息
             * @param ack exchange交换机，是否成功收到了消息。true成功，false代表失败
             * @param cause 失败原因
             */
            @Override
            public void confirm(CorrelationData correlationData, boolean ack, String cause) {
     
                System.out.println("confirm方法被执行了...");
                if(ack){
     
                    //接收成功
                    System.out.println("接收成功："+cause);
                }else{
     
                    //接收失败
                    System.out.println("接收失败消息："+cause);
                    //做一些处理，让消息再次发送
                }
            }
        });

        //3、发送消息
        rabbitTemplate.convertAndSend("exchange_confirm_test111","confirm","message confirm...");
    }


    /**
     * 回退模式：当消息发送给exchange后，exchange路由到Queue失败时，才会执行returnCallback
     *  步骤：
     *      1、开启回退模式：也是在ConnectionFactory中开启，publisher-returns="true"
     *      2、设置ReturnCallback
     *      3、设置Exchange处理消息的模式：
     *          ①如果消息没有路由到Queue，则丢弃消息（默认）
     *          ②如果消息没有路由到Queue，返回给消息发送方ReturnCallback
     *
     */
    @Test
    public void testReturn(){
     
        //设置交换机处理失败消息的模式
        //不设置该项的话，默认将消息丢弃，也不会触发回调
        rabbitTemplate.setMandatory(true);

        //设置ReturnCallback
        rabbitTemplate.setReturnCallback(new RabbitTemplate.ReturnCallback() {
     
            /**
             *
             * @param message   消息对象
             * @param replyCode 错误码
             * @param replyText 错误信息
             * @param exchange  交换机
             * @param routingKey    路由键
             */
            @Override
            public void returnedMessage(Message message, int replyCode, String replyText, String exchange, String routingKey) {
     
                System.out.println("执行了return");
                System.out.println(message);
                System.out.println(replyCode);
                System.out.println(replyText);
                System.out.println(exchange);
                System.out.println(routingKey);
            }
        });

        //3、发送消息
        rabbitTemplate.convertAndSend("exchange_confirm_test","confirm111","message confirm...");
    }
}

6）测试结果

确认模式测试结果：提示没有该交换机
退回模式测试结果：
注：当没有设置交换机处理失败消息的模式，为默认模式，会将消息丢弃，也不会进行调用回调函数。

小结：

设置ConnectionFactory的publisher-confirms=“true” 开启确认模式。

使用rabbitTemplate.setConfirmCallback设置回调函数。当消息发送到exchange后回调confirm方法。在方法中判断ack，如果为true，则发送成功，如果为false，则发送失败，需要处理。

设置ConnectionFactory的publisher-returns=“true” 开启回退模式。

使用rabbitTemplate.setReturnCallback设置退回函数。当消息从exchange路由到queue失败后，如果设置rabbitTemplate.setMandatory(true)参数，则会将消息退回给producer。并执行回调函数returnedMessage。

在RabbitMQ中也提供了事务机制，但是性能较差，此处不作讲解。
使用channel下列方法，完成事务控制
- txSelect()，用于将当前channel设置成transaction模式
- txCommit()，用于提交事务
- txRollback()，用于回滚事务

1.2、Consumer Ack

1、定义

ack指Acknowledge，确认。表示消费端收到消息后的确认方式。
有三种确认方式：

自动确认：acknowledge = "none"
手动确认：acknowledge = "manual"
根据异常情况确认：acknowledge = "auto"，（这种方式使用麻烦，不作讲解）

其中自动确认是指，当消息一旦被Consumer接收到，则自动确认收到，并将相应message从RabbitMQ的消息缓存中移除。
但在实际业务处理中，很可能消息接收到，业务处理出现异常，那么该消息就会丢失。
如果设置了手动确认方式，则需要在业务处理成功后，调用channel.basicAck()，手动签收，如果出现异常，则调用channel.basicNack()方法，让其自动重新发送消息。

2、消费端代码实现

1）新建`rabbitmq-consumer-spring`工程

2）编写`pom.xml`导入依赖


<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0modelVersion>

    <groupId>org.examplegroupId>
    <artifactId>rabbitmq-consumer-springartifactId>
    <version>1.0-SNAPSHOTversion>

    <properties>
        <maven.compiler.source>8maven.compiler.source>
        <maven.compiler.target>8maven.compiler.target>
    properties>

    <dependencies>
        <dependency>
            <groupId>org.springframeworkgroupId>
            <artifactId>spring-contextartifactId>
            <version>5.1.7.RELEASEversion>
        dependency>

        <dependency>
            <groupId>org.springframework.amqpgroupId>
            <artifactId>spring-rabbitartifactId>
            <version>2.1.8.RELEASEversion>
        dependency>

        <dependency>
            <groupId>junitgroupId>
            <artifactId>junitartifactId>
            <version>4.12version>
        dependency>

        <dependency>
            <groupId>org.springframeworkgroupId>
            <artifactId>spring-testartifactId>
            <version>5.1.7.RELEASEversion>
        dependency>
    dependencies>

    <build>
        <plugins>
            <plugin>
                <groupId>org.apache.maven.pluginsgroupId>
                <artifactId>maven-compiler-pluginartifactId>
                <version>3.8.0version>
                <configuration>
                    <source>1.8source>
                    <target>1.8target>
                configuration>
            plugin>
        plugins>
    build>
project>

3）MQ连接配置`rabbitmq.properties`

rabbitmq.host=172.16.98.133
rabbitmq.port=5672
rabbitmq.username=heima
rabbitmq.password=heima
rabbitmq.virtual-host=/itcast

4）spring配置文件，设置监听容器

spring-rabbitmq-consumer.xml


<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"/>
	
    <context:component-scan base-package="com.itheima.listener">context:component-scan>
    

    
    <rabbit:listener-container connection-factory="connectionFactory" acknowledge="manual">
        <rabbit:listener ref="ackListener" queue-names="queue_confirm_test">rabbit:listener>
    rabbit:listener-container>

beans>

5）编写监听类`AckListener.java`

package com.itheima.listener;

import com.rabbitmq.client.Channel;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.core.MessageListener;
import org.springframework.amqp.rabbit.listener.api.ChannelAwareMessageListener;
import org.springframework.stereotype.Component;

import java.io.IOException;


/*
* Consumer ACK机制：
*   1、设置手动签收。acknowledge=“manual”
*   2、让监听器类实现ChannelAwareMessageListener接口
*   3、如果消息成功处理，调用channel的basicAck()签收
*   4、如果消息处理失败，则调用channel的basicNack()拒绝签收，broker重新发送给consumer
* */
@Component
public class AckListener implements ChannelAwareMessageListener {
     

    @Override
    public void onMessage(Message message, Channel channel) throws Exception {
     
    	Thread.sleep(1000);
        long deliveryTag = message.getMessageProperties().getDeliveryTag();

        try{
     
            //1.接收转换消息
            System.out.println(new String(message.getBody()));

            //2.处理业务逻辑
            System.out.println("处理业务逻辑...");
            int i = 3/0;//出现错误
            //3.手动签收
            channel.basicAck(deliveryTag,true);
        }catch (Exception e){
     

            //4.拒绝签收
            /*
            * 第三个参数：requeue：重回队列。如果设置为true，则消息重新回到queue，broker会重新发送该消息给消费端
            *
            * */
            channel.basicNack(deliveryTag,true,true);
            //channel.basicReject(deliveryTag,true);只允许单挑确认
        }
    }
}

6）编写测试类进行测试`ConsumerTest.java`

import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations = "classpath:spring-rabbitmq-consumer.xml")
public class ConsumerTest {
     

    @Test
    public void test1(){
     
        while(true){
     

        }
    }
}

7）测试结果

目前queue中有一条消息
消费者运行起来之后，以为业务出错异常，导致消息没有被签收，并且消息重新回到queue，broker会重新发送该消息给消费端，如此往复。

Consumer Ack 小结

在rabbit:listener-container 标签中设置acknowledge属性，设置ack方式none：自动确认，manual：手动确认

如果在消费端没有出现异常，则调用channel.basicAck(deliveryTag,false)；方法确认签收消息

如果出现异常，则在catch中调用basicNack或basicReject，拒绝消息，让MQ重新发消息。

消息可靠性总结

持久化
- exchange要持久化
- queue要持久化
- message要持久化
生产方要确认confirm
消费方要确认Ack
Broker高可用

1.3、消费端限流

1、定义

为什么限流？
减轻系统处理请求压力。

2、代码实现：

1）新建`QosListener.java`

package com.itheima.listener;

import com.rabbitmq.client.Channel;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.listener.api.ChannelAwareMessageListener;
import org.springframework.stereotype.Component;


/*
* Consumer 限流机制
*   1、确保Ack机制为手动确认
*   2、listener-container配置属性
*       preFetch = 1，表示消费端每次从mq中拉取1条消息来消费，直到手动确认消费完毕后，才会继续拉取下一条消息。
* */
@Component
public class QosListener implements ChannelAwareMessageListener {
     

    @Override
    public void onMessage(Message message, Channel channel) throws Exception {
     
        Thread.sleep(1000);
        
        //1、获取消息
        System.out.println(new String(message.getBody()));

        //2、处理业务逻辑
        
        //3、签收
        channel.basicAck(message.getMessageProperties().getDeliveryTag(),true);
    }
}

2）配置监听容器`spring-rabbitmq-consumer.xml`


<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"/>

    <context:component-scan base-package="com.itheima.listener">context:component-scan>

    
    <rabbit:listener-container connection-factory="connectionFactory" acknowledge="manual" prefetch="1">
        
        <rabbit:listener ref="qosListener" queue-names="queue_confirm_test">rabbit:listener>
    rabbit:listener-container>

beans>

3）测试类`ConsumerTest.java`

import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations = "classpath:spring-rabbitmq-consumer.xml")
public class ConsumerTest {
     

    @Test
    public void test1(){
     
        while(true){
     

        }
    }
}

4）生产端发送10条消息测试

 @Test
    public void testSend(){
     
        for (int i = 0; i < 10; i++) {
     
            //3、发送消息
            rabbitTemplate.convertAndSend("exchange_confirm_test","confirm","message confirm...");
        }
    }

5）测试结果

①当消费端未进行手动签收消息，preFetch = 1时，消费端只会接收一条消息。

②当消费端未设置preFetch 数量，并且没有进行手动签收时，消费端一次性将10条消息都获取到了

③当prefetch=1，并且设置消费端手动签收时，消息端会一条一条的拉取消息

消费端限流小结

在中配置prefetch属性设置消费端一次拉取多少消息

消费端的确认模式一定为手动确认。acknowledge="manual"

1.4、TTL

1、定义

TTL全称 Time To Live（存活时间/过期时间）。
当消息到达存活时间后，还没有被消费，会被自动清除。
RabbitMQ可以对消息设置过期时间，也可以对整个队列（Queue）设置过期时间。

小结：
① 设置队列过期时间使用参数：x-message-ttl，单位：ms(毫秒)，会对整个队列消息统一过期
② 设置消息过期时间使用参数：expiration。单位：ms(毫秒)，当该消息在对列头部时（消费时），会单独判断这一消息是否过期。
③ 如果两者都进行了设置，以时间段的为准。

2、代码实现：

1）新建工程rabbitmq-ttl-producer-spring

2）pom.xml


<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0modelVersion>

    <groupId>org.examplegroupId>
    <artifactId>rabbitmq-producer-springartifactId>
    <version>1.0-SNAPSHOTversion>

    <properties>
        <maven.compiler.source>8maven.compiler.source>
        <maven.compiler.target>8maven.compiler.target>
    properties>

    <dependencies>
        <dependency>
            <groupId>org.springframeworkgroupId>
            <artifactId>spring-contextartifactId>
            <version>5.1.7.RELEASEversion>
        dependency>

        <dependency>
            <groupId>org.springframework.amqpgroupId>
            <artifactId>spring-rabbitartifactId>
            <version>2.1.8.RELEASEversion>
        dependency>

        <dependency>
            <groupId>junitgroupId>
            <artifactId>junitartifactId>
            <version>4.12version>
        dependency>

        <dependency>
            <groupId>org.springframeworkgroupId>
            <artifactId>spring-testartifactId>
            <version>5.1.7.RELEASEversion>
        dependency>
    dependencies>

    <build>
        <plugins>
            <plugin>
                <groupId>org.apache.maven.pluginsgroupId>
                <artifactId>maven-compiler-pluginartifactId>
                <version>3.8.0version>
                <configuration>
                    <source>1.8source>
                    <target>1.8target>
                configuration>
            plugin>
        plugins>
    build>
project>

3）配置spring-rabbitmq-producer.xml


<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"
                               publisher-confirms="true"
                               publisher-returns="true"
    />
    
    <rabbit:admin connection-factory="connectionFactory" />

    
    <rabbit:template id="rabbitTemplate" connection-factory="connectionFactory"/>

    
    <rabbit:queue id="test_queue_confirm" name="queue_confirm_test">rabbit:queue>
    <rabbit:direct-exchange name="exchange_confirm_test">
        <rabbit:bindings>
            <rabbit:binding queue="queue_confirm_test" key="confirm">rabbit:binding>
        rabbit:bindings>
    rabbit:direct-exchange>

    
    <rabbit:queue id="test_queue_ttl" name="test_queue_ttl">
        
        <rabbit:queue-arguments>
            
            <entry key="x-message-ttl" value="10000" value-type="java.lang.Integer">entry>
        rabbit:queue-arguments>
    rabbit:queue>
    <rabbit:topic-exchange name="test-exchange-ttl">
        <rabbit:bindings>
            <rabbit:binding pattern="ttl.#" queue="test_queue_ttl">rabbit:binding>
        rabbit:bindings>
    rabbit:topic-exchange>


beans>

4）进行测试：

ProducerTest.java

/*
    * TTL:过期时间
    * 1、队列统一过期时间
    *
    * 2、消息单独过期时间
    *
    * 注意：
    *   ①如果设置了消息的过期时间，也设置了队列的过期时间，以短的为准
    *   ②队列过期后，会将队列所有消息全部移除
    *   ③消息过期后，只有消息在队列顶端，才会判断其是否过期（移除掉）
    * */
    @Test
    public void testTTl(){
     
        /*
        1、队列统一过期时间
        for (int i = 0; i < 10; i++) {
            //3、发送消息
            rabbitTemplate.convertAndSend("test-exchange-ttl","ttl.hehe","message ttl...");
        }*/



        //消息的后处理对象
        MessagePostProcessor messagePostProcessor = new MessagePostProcessor() {
     

            @Override
            public Message postProcessMessage(Message message) throws AmqpException {
     
                //1、设置message的消息
                message.getMessageProperties().setExpiration("5000");
                //2、返回该消息
                return message ;
            }
        };
        /*2、消息单独过期时间*/
        rabbitTemplate.convertAndSend("test-exchange-ttl","ttl.hehe","message ttl...",messagePostProcessor);

    }

5）结果：

①队列统一过期：

10秒中后，统一过期，消息被移除

②消息单独过期

5秒后过期，消息位于队列顶端（等待消费），被移除

1.5、死信队列

1、定义

死信队列，英文缩写：DLX。Dead Letter Exchange（死信交换机），当消息成为Dead Message后，可以被重新发送到另一个交换机，这个交换机就是DLX。

2、消息成为死信的三种情况：

1、队列消息长度达到限制；
2、消费者拒接消费消息，basicNack/basicReject，并且不把消息放入原目标队列，requeue = false；
3、原队列存在消息过期设置，消息到达超时时间未被消费；

3、队列绑定死信交换机：

给队列设置参数：x-dead-lette-exchange和x-dead-letter-routing-key

4、代码实现

1）spring-rabbitmq-producer.xml



<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"
                               publisher-confirms="true"
                               publisher-returns="true"
    />
    
    <rabbit:admin connection-factory="connectionFactory" />

    
    <rabbit:template id="rabbitTemplate" connection-factory="connectionFactory"/>

    

    
    <rabbit:queue name="test_queue_dlx" id="test_queue_dlx">
        
        <rabbit:queue-arguments>
            
            <entry key="x-dead-letter-exchange" value="exchange_dlx">entry>
            
            <entry key="x-dead-letter-routing-key" value="dlx.hehe">entry>
            
            <entry key="x-message-ttl" value="10000" value-type="java.lang.Integer">entry>
            
            <entry key="x-max-length" value="10" value-type="java.lang.Integer">entry>
        rabbit:queue-arguments>
    rabbit:queue>
    <rabbit:topic-exchange name="test_exchange_dlx">
        <rabbit:bindings>
            <rabbit:binding pattern="test.dlx.#" queue="test_queue_dlx">rabbit:binding>
        rabbit:bindings>
    rabbit:topic-exchange>

    
    <rabbit:queue name="queue_dlx" id="queue_dlx">rabbit:queue>
    <rabbit:topic-exchange name="exchange_dlx">
        <rabbit:bindings>
            <rabbit:binding pattern="dlx.#" queue="queue_dlx">rabbit:binding>
        rabbit:bindings>
    rabbit:topic-exchange>
beans>

2）Producer.java

import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.amqp.AmqpException;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.core.MessagePostProcessor;
import org.springframework.amqp.rabbit.connection.CorrelationData;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.context.annotation.Configuration;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations = "classpath:spring-rabbitmq-producer.xml")
public class ProducerTest {
     
    @Autowired
    private RabbitTemplate rabbitTemplate;
    
    /*
    * 发送测试死信消息
    *   1、过期时间
    *   2、长度限制
    *   3、消息拒收
    *
    * */

    @Test
    public void testDlx(){
     
       //1、测试过期时间，死信消息
        //rabbitTemplate.convertAndSend("test_exchange_dlx","test.dlx.haha","测试过期时间，死信消息");

        //2、测试长度限制后，消息死信
       /* for (int i = 0; i < 20; i++) {
            rabbitTemplate.convertAndSend("test_exchange_dlx","test.dlx.haha","测试过期时间，死信消息");
        }*/

        //3、测试消息拒收，死信消息
        rabbitTemplate.convertAndSend("test_exchange_dlx","test.dlx.haha","测试过期时间，死信消息");

    }
}

3）消费端：DlxListener.java

package com.itheima.listener;

import com.rabbitmq.client.Channel;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.listener.api.ChannelAwareMessageListener;
import org.springframework.stereotype.Component;



@Component
public class DlxListener implements ChannelAwareMessageListener {
     

    @Override
    public void onMessage(Message message, Channel channel) throws Exception {
     
        Thread.sleep(1000);
        long deliveryTag = message.getMessageProperties().getDeliveryTag();

        try{
     
            //1.接收转换消息
            System.out.println(new String(message.getBody()));

            //2.处理业务逻辑
            System.out.println("处理业务逻辑...");
            int i = 3/0;//出现错误
            //3.手动签收
            channel.basicAck(deliveryTag,true);
        }catch (Exception e){
     

            //4.拒绝签收
            /*
            * 第三个参数：requeue：重回队列。如果设置为true，则消息重新回到queue，broker会重新发送该消息给消费端
            *
            * */
            System.out.println("出现异常，拒绝接收！");
            //拒绝接收，不重回队列requeue=false
            channel.basicNack(deliveryTag,true,false);
            //channel.basicReject(deliveryTag,true);只允许单挑确认
        }
    }
}

4) 消费端：spring-rabbitmq-consumer.xml


<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"/>

    <context:component-scan base-package="com.itheima.listener">context:component-scan>

    
    <rabbit:listener-container connection-factory="connectionFactory" acknowledge="manual" prefetch="1">
        
        
        
        <rabbit:listener ref="dlxListener" queue-names="test_queue_dlx">rabbit:listener>
    rabbit:listener-container>

beans>

5）结果

a）消息过期生成死信队列

b）长度限制生成死信队列

因长度限制，后面发送的10条消息变成死信

过期时间到达后，正常队列中的10条消息也变成死信：

c）消息拒收生成死信

小结：
1、死信交换机和死信队列和普通的没有区别
2、当消息成为死信后，如果该队列绑定了死信交换机，则消息会被死信交换机重新路由到死信队列
3、消息成为死信的三种情况
（1）队列消息长度达到限制
（2）消费者拒绝消费消息，并且不重回队列
（3）原队列存在消息过期设置，消息到达超时时间未被消费

1.6、延迟队列

1、定义

延迟队列，即消息进入队列后不会立即被消费，只有到达制定时间后，才会被消费。
需求：
1、下单后，30分钟未支付，取消订单，回滚库存。
2、新用户注册7天后，发送短信问候。

实现方式：
1、定时器
2、延迟队列

很可惜，在rabbitMQ中并未提供延迟队列功能。
但是可以使用：TTL+死信队列组合实现延迟队列的效果。

2、代码实现

1）生产端：spring-rabbitmq-producer.xml


<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"
                               publisher-confirms="true"
                               publisher-returns="true"
    />
    
    <rabbit:admin connection-factory="connectionFactory" />

    
    <rabbit:template id="rabbitTemplate" connection-factory="connectionFactory"/>

 
    
    
    
    <rabbit:queue name="order_queue" id="order_queue">
        
        <rabbit:queue-arguments>
            <entry key="x-dead-letter-exchange" value="order_exchange_dlx">entry>
            <entry key="x-dead-letter-routing-key" value="dlx.order.cancel">entry>
            <entry key="x-message-ttl" value="10000" value-type="java.lang.Integer"/>
        rabbit:queue-arguments>
    rabbit:queue>
    <rabbit:topic-exchange name="order_exchange">
        <rabbit:bindings>
            <rabbit:binding pattern="order.#" queue="order_queue">rabbit:binding>
        rabbit:bindings>
    rabbit:topic-exchange>

    
    <rabbit:queue name="order_queue_dlx" id="order_queue_dlx">rabbit:queue>
    <rabbit:topic-exchange name="order_exchange_dlx">
        <rabbit:bindings>
            <rabbit:binding pattern="dlx.order.#" queue="order_queue_dlx">rabbit:binding>
        rabbit:bindings>
    rabbit:topic-exchange>
beans>

2）生产端：ProducerTest.java

import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.amqp.AmqpException;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.core.MessagePostProcessor;
import org.springframework.amqp.rabbit.connection.CorrelationData;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.context.annotation.Configuration;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations = "classpath:spring-rabbitmq-producer.xml")
public class ProducerTest {
     
    @Autowired
    private RabbitTemplate rabbitTemplate;

    @Test
    public void testDelay() throws InterruptedException {
     
        //1、发送订单消息。将来是在订单系统中，下单成功后，发送消息
        rabbitTemplate.convertAndSend("order_exchange","order.msg","订单信息：id=1,time=333333");

        //2、打印倒计时
        for (int i = 0; i < 10; i++) {
     
            System.out.println(i+"...");
            Thread.sleep(1000);
        }
    }
}

3）消费端：OrderListener.java


package com.itheima.listener;

import com.rabbitmq.client.Channel;
import org.springframework.amqp.core.Message;
import org.springframework.amqp.rabbit.listener.api.ChannelAwareMessageListener;
import org.springframework.stereotype.Component;


@Component
public class OrderListener implements ChannelAwareMessageListener {
     

    @Override
    public void onMessage(Message message, Channel channel) throws Exception {
     
        Thread.sleep(1000);
        long deliveryTag = message.getMessageProperties().getDeliveryTag();

        try{
     
            //1.接收转换消息
            System.out.println(new String(message.getBody()));

            //2.处理业务逻辑
            System.out.println("处理业务逻辑...");
            System.out.println("根据订单id查询其状态...");
            System.out.println("判断状态是否为支付成功？");
            System.out.println("取消订单，回滚库存！");
            //3.手动签收
            channel.basicAck(deliveryTag,true);
        }catch (Exception e){
     

            //4.拒绝签收
            /*
            * 第三个参数：requeue：重回队列。如果设置为true，则消息重新回到queue，broker会重新发送该消息给消费端
            *
            * */
            System.out.println("出现异常，拒绝接收！");
            //拒绝接收，不重回队列requeue=false
            channel.basicNack(deliveryTag,true,false);
            //channel.basicReject(deliveryTag,true);只允许单挑确认
        }
    }
}

4）消费端：spring-rabbitmq-consumer.xml


<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:rabbit="http://www.springframework.org/schema/rabbit"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
       http://www.springframework.org/schema/beans/spring-beans.xsd
       http://www.springframework.org/schema/context
       https://www.springframework.org/schema/context/spring-context.xsd
       http://www.springframework.org/schema/rabbit
       http://www.springframework.org/schema/rabbit/spring-rabbit.xsd">
    
    <context:property-placeholder location="classpath:rabbitmq.properties"/>

    
    <rabbit:connection-factory id="connectionFactory" host="${rabbitmq.host}"
                               port="${rabbitmq.port}"
                               username="${rabbitmq.username}"
                               password="${rabbitmq.password}"
                               virtual-host="${rabbitmq.virtual-host}"/>

    <context:component-scan base-package="com.itheima.listener">context:component-scan>

    
    <rabbit:listener-container connection-factory="connectionFactory" acknowledge="manual" prefetch="1">
        
        
        
        
        
        <rabbit:listener ref="orderListener" queue-names="order_queue_dlx">rabbit:listener>
    rabbit:listener-container>

beans>

5）消费端：ConsumerTest.java

import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.test.context.ContextConfiguration;
import org.springframework.test.context.junit4.SpringJUnit4ClassRunner;

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations = "classpath:spring-rabbitmq-consumer.xml")
public class ConsumerTest {
     

    @Test
    public void test1(){
     
        while(true){
     

        }
    }
}

6）结果

小结
1、延迟队列，指消息进入队列后，可以被延迟一定时间，再进行消费
2、RabbitMQ没有提供延迟队列功能，但是可以使用：TTL+死信队列组合实现延迟队列的效果。

2、RabbitMQ应用问题

2.1、消息可靠性保障——消息补偿

2.2、消息幂等性保障

1、定义

幂等性指一次和多次请求某一资源，对于资源本身应该具有同样的结果。也就是说，其任意多次执行对资源本身所产生的影响均与第一次执行的影响相同。
在MQ中是指，消费多条相同的消息，得到与消费该消息一次相同的结果。

2、消息幂等性保障——乐观锁机制

你可能感兴趣的:(笔记)

mvc学习笔记 JDS_DIJ 笔记 mvc
mvc设计框架的形成最早是servlet==>缺点:生成html页面太麻烦,所以引入了jsp,jsp本质就是servletjsp==>缺点:阅读起来困难,难维护,于是引入javabean,用来专门和数据打交道;形成jsp的设计框架model1jsp+javabean==>缺点:jsp即要接受请求,又要展示数据,所以又加入servlet;专门用来接受请求;形成jsp的设计框架model2jsp+ja
MVC 架构学习笔记 disgare 架构 mvc 架构学习
MVC架构学习笔记Service与DAO层方法命名规约业务错误是用返回值来处理还是抛异常来处理Service与DAO层方法命名规约CRUD是指在做计算处理时的增加(Create)、读取查询(Retrieve)、更新(Update)和删除(Delete)几个单词的首字母简写。主要被用在描述软件系统中DataBase或者持久层的基本操作功能。对应这里的crud方法的命名，每个人有不同的实践。以下是阿里
Go语言学习笔记—golang流程控制 PPPsych Go语言基础学习笔记 golang 学习
视频来源：B站《golang入门到项目实战[2022最新Go语言教程，没有废话，纯干货！]》文章为自己整理的学习笔记，侵权即删，谢谢支持！文章目录一Go语言中的流程控制简介二Go语言中的if语句2.1语法2.2实例演示2.3注意事项三Go语言中的ifelse语句3.1语法3.2实例演示3.3注意事项（同if语句）四Go语言中的ifelseif语句4.1语法4.2实例演示五Go语言中的嵌套if语句5
小白入门MATLAB学习笔记小mushroom matlab 学习笔记
绘图：使用MATLAB绘制三叶玫瑰线公式：玫瑰线的极坐标方程为:ρ=a*sin(nθ),ρ=a*cos(nθ)用直角坐标方程表示为:x=a*sin(nθ)*cos(θ),y=a*sin(nθ)*sin(θ)其中n为玫瑰线的叶数，我们绘制三叶玫瑰线，因而公式中取n=3代码：t=-2*pi:0.01:2*pi;x=sin(3*t).*cos(t);y=2*sin(3*t).*sin(t);z=3*si
《CPython Internals》阅读笔记：p285-p328 python
《CPythonInternals》学习第15天，p285-p328总结，总计44页。一、技术总结1.shallowcomparisonp285,InObjectsobject.c,thebaseimplementationoftheobjecttypeiswritteninpureCcode.Therearesomeconcreteimplementationsofbasiclogic,like
深度学习学习笔记（第30周） qq_51339898 深度学习人工智能
一、摘要本周报的目的在于汇报第30周的学习成果，本周主要聚焦于基于深度学习的图像分割领域的常用模型U-net。 U-net是最常用、最简单的一种分割模型，在2015年被提出。UNet网络是一种用于图像分割的卷积神经网络，其特点是采用了U型网络结构，因此称为UNet。UNet算法的关键创新是在解码器中引入了跳跃连接（SkipConnections），即将编码器中的特征图与解码器中对应的特征图进行连接
kafka学习笔记2 —— 筑梦之路筑梦之路 Java技术 linux系统运维 kafka 学习笔记
KRaft模式Kafka的KRaft模式是一种新的元数据管理方式，旨在去除对ZooKeeper的依赖，使Kafka成为一个完全自包含的系统。在Kafka的传统模式下，元数据管理依赖于ZooKeeper，这增加了部署和运维的复杂性。为了解决这个问题，Kafka社区引入了KRaft模式。在KRaft模式下，所有的元数据，包括主题、分区信息、副本位置等，都被存储在Kafka集群内部的特殊日志中。这个日志
Web前端学习重点笔记 HeHolly 前端学习笔记
第一章：Web前端开发技术综述第二章：HTML基础第三章：格式化文本与段落标记：标题字标记：大——小字体标记：水平线标记：段落缩进标记：默认5个字符位置拼音标记：何(he)原样显示标记：特殊符号：显示结果说明符号代码空格 >大于号>加粗倾斜删除线下划线上标下标加粗倾斜变小字号变大字号第四章：列表有序列表……type="1(默认)|A|a|i|I"无序列表……type="disc(默
学习笔记：顺序表（动态创建）vscode实现 San~ui 学习笔记考研 vscode
动态分配的顺序表的优缺点：优点：可以动态增加主题缺点：动态增加长度中的迁徙工作时间增加实现方式（删除操作与静态一样）#include#include#include#defineInitSize1typedefstruct{int*data;//指向分配空间的起始地址intMaxSize;//最大容量intlength;//当前长度}SqList;//初始化voidInitList(SqList*
给Windows 11系统的笔记本电脑设置合上盖子不休眠微技术电脑 windows
导言Windows11是微软最新的操作系统版本，为用户提供了更多的个性化和定制化选项。其中之一是合上笔记本电脑盖子后的休眠设置。本文将介绍如何在Windows11中设置合上笔记本盖子后不让电脑进入休眠状态，以及如何取消该功能。在某些场景下，我们希望笔记本电脑在合上盖子后能够保持唤醒状态，而不是进入休眠模式。比如下面这几个场景。持续运行任务：当您正在执行一些需要长时间运行的任务，比如大型文件下载、视
数据的验证 print('name') Python python 开发语言 pycharm visual studio code 面试
笔记#isdigit()十进制的阿拉伯数字print('123'.isdigit())#Trueprint('一二三'.isdigit())#Falseprint('0b1010'.isdigit())#Falseprint('Ⅲ'.isdigit())#Falseprint('-'*20)#所有字符都数字print('123'.isnumeric())#Trueprint('一二三'.isnum
python笔记(一)获取当前目录路径和文件（抄录） z-pan python
一、获取当前路径1、使用sys.argv[0]importsysprintsys.argv[0]#输出#本地路径2、os模块importosprintos.getcwd()#获取当前工作目录路径printos.path.abspath('.')#获取当前工作目录路径printos.path.abspath('test.txt')#获取当前目录文件下的工作目录路径printos.path.abspa
技术晋升读书笔记—华为研发栈江湖华为技术转型技术管理
读完《华为研发》第三版，我深感震撼，书中的内容不仅详实地记录了华为公司的成长历程，还揭示了华为成功背后的管理理念和创新思路。这本书通过真实的案例和数据，展示了华为如何从一个小企业发展成全球通信行业的领导者。一、关键人物1、任正非任正非是华为的创始人和总裁，被视为华为发展的灵魂人物。他出生于1944年，家境贫寒，青年时期经历了艰苦的求学过程。任正非通过自己的努力考上大学，毕业后参军。1982年，任正
《利用python进行数据分析》——3.1数据结构和序列——元组、列表、字典、集合——读书笔记 pillow_L python数据分析
第3章Python的数据结构、函数和文件3.1数据结构和序列Python中常见的数据结构可以统称为容器。序列（如列表和元组）、映射（如字典）以及集合（set）是三类主要的容器。1.元组——tuple元组是一个固定长度，不可改变的Python序列对象。元组与列表一样，也是一种序列，唯一不同的是元组不能被修改（字符串其实也有这种特点）元组Tuple，一经初始化，就不能修改，没有列表List中的appe
（贪心）快速过河问题——算法笔记 JeffyGao C++算法笔记
首先对数组进行排序，速度快的在前面(过河速度取决于慢者)。记速度最快的依次为a,b,c,d...左侧是渡河的起点，left表示左边剩余人数由数学知：当2*b不等于a+c时需要判断min(s1,s2)s1,s2表示把cd带走所需的秒数。12出发，1返回；34出发，2返回；12过去s1=speed[1]+speed[0]+speed[left-1]+speed[1];13出发，1返回；14出发，1返回
python窗体设计插件_Python 界面生成器 wxFormBuilder 的入门使用（wxPython的界面设计工具的初学笔记）... 黎边 python窗体设计插件
环境，Win10，python3.7.3，wxPython4.0.4，wxFormBuilder3.91、准备一个窗体。点击wxformbuilder上方的标签“forms”，并点击标签下方的第一个类似窗体的图标“Frame”然后，下面就会出现一个窗体。但是现在还不能直接往窗体上添加各种控件。咱们还需要给窗体添加布局器BoxSizer。2、添加布局器点击wxformbuilder上方的标签“Lay
怎样测试一笔金融交易？自由安软件测试软件测试金融支付银行测试
文章目录前言一支付交易的过程二支付交易测试点1.报文前置数据处理2.业务前置数据处理3.业务处理中(交易进行中)4.业务处理完成(交易完成)5.上，下游关联功能检查前言这篇文章来梳理下关于金融支付的一些基本测试点，由于平时接触的基本都是偏业务底层和接口测试，所以从数字底层的角度来简单总结下金融支付交易的测试点，当个人笔记使用。一支付交易的过程一个完整的支付过程其实流程是比较长的，不是我们去
关于钜泉光电ATT7053C计量芯片使用的若干经验恬宝的猪头单片机 c语言嵌入式硬件
大家好！第一次写东西，完全是当作自己的一个笔记来写的，笔法不成熟，有些凌乱。如果对一些小伙伴有所帮助的话是我的荣幸，也欢迎各位小伙伴指出其中的问题。首先说一下，使用这款芯片呢是因为一个项目需求，之前一直使用的是ADE9078这款，但为了节约成本，而且项目需求是单相电就行，所以选取了ATT7053C这款芯片。一开始的时候，和钜泉光电那边的技术人员也沟通过，提供过一些demo程序，当对于我的开发项目没
安全见闻二：Web程序构成与潜在漏洞 vortex5 星河飞雪安全见闻安全 web安全网络安全前端
内容预览≧∀≦ゞ安全见闻二：Web程序构成与潜在漏洞声明导语前端语言及潜在漏洞前端语言前端框架与代码库常见的前端框架与代码库安全问题的根源前端潜在漏洞后端语言及潜在漏洞常见后端语言协议问题后端潜在漏洞数据库及潜在漏洞数据库分类数据库潜在漏洞服务器程序及潜在漏洞常见服务器程序服务器程序潜在漏洞结语安全见闻二：Web程序构成与潜在漏洞声明学习视频来自B站UP主泷羽sec,如涉及侵权马上删除文章笔记的只
kafka学习笔记5 PLAIN认证——筑梦之路筑梦之路 linux系统运维 Java技术 kafka 学习笔记
在Kafka中，SASL（SimpleAuthenticationandSecurityLayer）机制包括三种常见的身份验证方式：SASL/PLAIN认证：含义是简单身份验证和授权层应用程序接口，PLAIN认证是其中一种最简单的用户名、密码认证方式，生产环境使用维护简单易用。可用于Kafka和其他应用程序之间的认证。SASL/SCRAM认证：SCRAM-SHA-256、SCRAM-SHA-512
ELK Stack学习笔记在线打码学习笔记 redis linux centos es elk
一、ELKStack简介1、Elasticsearch一个实时的分布式搜索和分析引擎，它可以用于全文搜索，结构化搜索以及分析。它是一个建立在全文搜索引擎ApacheLucene(信息检索的工具jar包)基础上的搜索引擎，使用Java语言编写2、Logstash一个完全开源的工具，可以对日志进行收集、过滤，并将其存储供以后使用。是开源的服务器端数据处理管道，能够从多个来源收集数据、转换数据。并保存到
AIGC视频生成国产之光：ByteDance的PixelDance模型好评笔记 AIGC-视频补档 AIGC 计算机视觉人工智能深度学习机器学习论文阅读面试
大家好，这里是好评笔记，公主号：Goodnote，专栏文章私信限时Free。本文详细介绍ByteDance的视频生成模型PixelDance，论文于2023年11月发布，模型上线于2024年9月，同时期上线的模型还有Seaweed（论文未发布）。优质专栏回顾：机器学习笔记深度学习笔记多模态论文笔记AIGC—图像文章目录论文摘要引言输入训练和推理时的数据处理总结相关工作视频生成长视频生成方法模型架构
Golang学习笔记_28——工厂方法模式（实例） LuckyLay Golang学习笔记 golang 学习笔记工厂方法模式
Golang学习笔记_26——通道Golang学习笔记_27——单例模式Golang学习笔记_28——工厂方法模式工厂方法模式（实例）packagefactory_method_demoimport"fmt"//Order接口，定义订单的基本操作typeOrderinterface{CalculateTotal()float64Display()}//RegularOrder是普通订单结构体typ
HCIA笔记7 小白咋了笔记网络智能路由器
VLAN（一）VLAN相关介绍（1）LAN——局域网WAN——广域网WLAN——无线局域网VLAN——虚拟局域网（2）VLAN：交换机和路由器协同工作后，将原先的一个广播域，逻辑上切分为多个虚拟的广播域。（3）VID——vlanID——用来区分和标定不同的vlan编号=12位二进制构成范围0-40950和4095作为保留值可用范围1-4094（1）基于端口的vlan将vid配置映射到交换机的接口，
论文阅读笔记：AI+RPA 几道之旅人工智能
文章目录论文题目下载地址论文摘要论文题目Challengesandopportunities:ImplementingRPAandAIinfrauddetectioninthebankingsector下载地址点击这里下载论文摘要在银行业中，将机器人流程自动化（RPA）和人工智能（AI）集成用于欺诈检测是一项重大变革，既带来了挑战，也带来了机遇。随着金融机构面临日益复杂的欺诈企图，RPA和AI成为
蓝桥杯备赛笔记（十) 背包问题小魏´•ﻌ•` 蓝桥杯C++蓝桥杯笔记职场和发展
(1)背包模型有一个体积为V的背包，商店有n个物品，每个物品有一个价值v和体积w，每个物品只能被拿一次，问能够装下物品的最大价值。这里每一种物品只有两种状态，即“拿”或“不拿”。设状态dp[i][j]表示到第i个物品为止，拿的物品总体积为j的情况下的最大价值。转移方程为：dp[i][j]=max(dp[i-1][j],dp[i-1][j-w]+v)如果不拿物品i，那么最大价值就是dp[i-1][j
深度学习笔记——模型部署好评笔记深度学习笔记深度学习笔记人工智能 transformer 模型部署大模型部署大模型
大家好，这里是好评笔记，公主号：Goodnote，专栏文章私信限时Free。本文简要概括模型部署的知识点，包括步骤和部署方式。文章目录模型部署模型部署的关键步骤常见的模型部署方式优势与挑战总结边缘端部署方案总结历史文章机器学习深度学习模型部署模型部署是指将训练好的机器学习或深度学习模型集成到生产环境中，使其能够在实际应用中处理实时数据和提供预测服务。模型部署的流程涉及模型的封装、部署环境的选择、部
k8s_CKA考试_学习笔记 bq_o_pd kubernetes linux 容器笔记
k3s默认无法使用docker，导入docker的镜像加载到k3s中[root@worker1php]#k3scrictlimagesIMAGETAGIMAGEIDSIZEdocker.io/library/busyboxlatest9211bbaa0dbd62.23MBdocker.io/library/nginx1.7.935d28df486f6139.9MBdocker.io/library
PySide6 GUI 学习笔记——Python文件编译打包 Humbunklung PySide6 学习笔记 python
前面编写的软件工具都必须运行在Python环境中，且通过命令行的方式运行，通过Python打包工具，我们可以把.py文件封装成对应平台的运行文件，供用户执行。常见Python打包工具工具简介官网/文档地址py2exe将Python脚本转换为Windows可执行文件https://www.py2exe.orgcx_Freeze跨平台的Python打包工具，它可以将Python脚本打包为可执行文件或动
AWS学习笔记——Chapter5 Identity and Access Management and Security on AWS 坚果壳er AWS学习
前注：学习书籍IndexIdentityandAccessManagementandSecurityonAWS1.Authentication(认证)2.Authorization(授权)3.Auditing(审核)4.Typesofsecuritycredentials(安全凭证的类型)5.Users6.Groups7.Roles8.IAMHierarchyofPrivileges9.IAMBe
java线程Thread和Runnable区别和联系 zx_code java jvm thread 多线程 Runnable
我们都晓得java实现线程2种方式，一个是继承Thread，另一个是实现Runnable。模拟窗口买票，第一例子继承thread，代码如下 package thread; public class ThreadTest { public static void main(String[] args) { Thread1 t1 = new Thread1(
【转】JSON与XML的区别比较丁_新 json xml
1.定义介绍 (1).XML定义扩展标记语言 (Extensible Markup Language, XML) ，用于标记电子文件使其具有结构性的标记语言，可以用来标记数据、定义数据类型，是一种允许用户对自己的标记语言进行定义的源语言。 XML使用DTD(document type definition)文档类型定义来组织数据;格式统一，跨平台和语言，早已成为业界公认的标准。 XML是标
c++ 实现五种基础的排序算法 CrazyMizzz C++c 算法
#include<iostream> using namespace std; //辅助函数，交换两数之值 template<class T> void mySwap(T &x, T &y){ T temp = x; x = y; y = temp; } const int size = 10; //一、用直接插入排
我的软件麦田的设计者我的软件音乐类娱乐放松
这是我写的一款app软件，耗时三个月，是一个根据央视节目开门大吉改变的，提供音调，猜歌曲名。1、手机拥有者在android手机市场下载本APP，同意权限，安装到手机上。2、游客初次进入时会有引导页面提醒用户注册。（同时软件自动播放背景音乐）。3、用户登录到主页后，会有五个模块。a、点击不胫而走，用户得到开门大吉首页部分新闻，点击进入有新闻详情。b、
linux awk命令详解被触发 linux awk
awk是行处理器: 相比较屏幕处理的优点，在处理庞大文件时不会出现内存溢出或是处理缓慢的问题，通常用来格式化文本信息 awk处理过程: 依次对每一行进行处理，然后输出 awk命令形式: awk [-F|-f|-v] ‘BEGIN{} //{command1; command2} END{}’ file [-F|-f|-v]大参数，-F指定分隔符，-f调用脚本，-v定义变量 var=val
各种语言比较 _wy_ 编程语言
Java Ruby PHP 擅长领域
oracle 中数据类型为clob的编辑知了ing oracle clob
public void updateKpiStatus(String kpiStatus,String taskId){ Connection dbc=null; Statement stmt=null; PreparedStatement ps=null; try { dbc = new DBConn().getNewConnection(); //stmt = db
分布式服务框架 Zookeeper -- 管理分布式环境中的数据矮蛋蛋 zookeeper
原文地址： http://www.ibm.com/developerworks/cn/opensource/os-cn-zookeeper/ 安装和配置详解本文介绍的 Zookeeper 是以 3.2.2 这个稳定版本为基础，最新的版本可以通过官网 http://hadoop.apache.org/zookeeper/来获取，Zookeeper 的安装非常简单，下面将从单机模式和集群模式两
tomcat数据源 alafqq tomcat
数据库 JNDI(Java Naming and Directory Interface，Java命名和目录接口)是一组在Java应用中访问命名和目录服务的API。没有使用JNDI时我用要这样连接数据库： 03. Class.forName("com.mysql.jdbc.Driver"); 04. conn
遍历的方法百合不是茶遍历
遍历在java的泛
linux查看硬件信息的命令 bijian1013 linux
linux查看硬件信息的命令一.查看CPU： cat /proc/cpuinfo 二.查看内存： free 三.查看硬盘： df linux下查看硬件信息 1、lspci 列出所有PCI 设备； lspci - list all PCI devices:列出机器中的PCI设备（声卡、显卡、Modem、网卡、USB、主板集成设备也能
java常见的ClassNotFoundException bijian1013 java
1.java.lang.ClassNotFoundException: org.apache.commons.logging.LogFactory 添加包common-logging.jar2.java.lang.ClassNotFoundException: javax.transaction.Synchronization
【Gson五】日期对象的序列化和反序列化 bit1129 反序列化
对日期类型的数据进行序列化和反序列化时，需要考虑如下问题： 1. 序列化时，Date对象序列化的字符串日期格式如何 2. 反序列化时，把日期字符串序列化为Date对象，也需要考虑日期格式问题 3. Date A -> str -> Date B,A和B对象是否equals 默认序列化和反序列化 import com
【Spark八十六】Spark Streaming之DStream vs. InputDStream bit1129 Stream
1. DStream的类说明文档： /** * A Discretized Stream (DStream), the basic abstraction in Spark Streaming, is a continuous * sequence of RDDs (of the same type) representing a continuous st
通过nginx获取header信息 ronin47 nginx header
1. 提取整个的Cookies内容到一个变量，然后可以在需要时引用，比如记录到日志里面， if ( $http_cookie ~* "(.*)$") { set $all_cookie $1; } 变量$all_cookie就获得了cookie的值，可以用于运算了
java-65.输入数字n，按顺序输出从1最大的n位10进制数。比如输入3，则输出1、2、3一直到最大的3位数即999 bylijinnan java
参考了网上的http://blog.csdn.net/peasking_dd/article/details/6342984 写了个java版的： public class Print_1_To_NDigit { /** * Q65.输入数字n，按顺序输出从1最大的n位10进制数。比如输入3，则输出1、2、3一直到最大的3位数即999 * 1.使用字符串
Netty源码学习-ReplayingDecoder bylijinnan java netty
ReplayingDecoder是FrameDecoder的子类，不熟悉FrameDecoder的，可以先看看 http://bylijinnan.iteye.com/blog/1982618 API说，ReplayingDecoder简化了操作，比如： FrameDecoder在decode时，需要判断数据是否接收完全： public class IntegerH
js特殊字符过滤 cngolon js特殊字符 js特殊字符过滤
1.js中用正则表达式过滤特殊字符, 校验所有输入域是否含有特殊符号function stripscript(s) { var pattern = new RegExp("[`~!@#$^&*()=|{}':;',\\[\\].<>/?~！@#￥……&*（）——|{}【】‘；：”“'。，、？]"
hibernate使用sql查询 ctrain Hibernate
import java.util.Iterator; import java.util.List; import java.util.Map; import org.hibernate.Hibernate; import org.hibernate.SQLQuery; import org.hibernate.Session; import org.hibernate.Transa
linux shell脚本中切换用户执行命令方法 daizj linux shell 命令切换用户
经常在写shell脚本时，会碰到要以另外一个用户来执行相关命令，其方法简单记下： 1、执行单个命令：su - user -c "command" 如：下面命令是以test用户在/data目录下创建test123目录 [root@slave19 /data]# su - test -c "mkdir /data/test123"
好的代码里只要一个 return 语句 dcj3sjt126com return
别再这样写了：public boolean foo() { if (true) { return true; } else { return false;
Android动画效果学习 dcj3sjt126com android
1、透明动画效果方法一：代码实现 public View onCreateView(LayoutInflater inflater, ViewGroup container, Bundle savedInstanceState) { View rootView = inflater.inflate(R.layout.fragment_main, container, fals
linux复习笔记之bash shell (4)管道命令 eksliang linux管道命令汇总 linux管道命令 linux常用管道命令
转载请出自出处： http://eksliang.iteye.com/blog/2105461 bash命令执行的完毕以后，通常这个命令都会有返回结果，怎么对这个返回的结果做一些操作呢？那就得用管道命令‘|’。上面那段话，简单说了下管道命令的作用，那什么事管道命令呢？答：非常的经典的一句话，记住了，何为管
Android系统中自定义按键的短按、双击、长按事件 gqdy365 android
在项目中碰到这样的问题：由于系统中的按键在底层做了重新定义或者新增了按键，此时需要在APP层对按键事件（keyevent）做分解处理，模拟Android系统做法，把keyevent分解成： 1、单击事件：就是普通key的单击； 2、双击事件：500ms内同一按键单击两次； 3、长按事件：同一按键长按超过1000ms（系统中长按事件为500ms）； 4、组合按键：两个以上按键同时按住；
asp.net获取站点根目录下子目录的名称 hvt .net C#asp.net hovertree Web Forms
使用Visual Studio建立一个.aspx文件(Web Forms)，例如hovertree.aspx,在页面上加入一个ListBox代码如下： <asp:ListBox runat="server" ID="lbKeleyiFolder" /> 那么在页面上显示根目录子文件夹的代码如下： string[] m_sub
Eclipse程序员要掌握的常用快捷键 justjavac java eclipse 快捷键 ide
判断一个人的编程水平，就看他用键盘多，还是鼠标多。用键盘一是为了输入代码（当然了，也包括注释），再有就是熟练使用快捷键。曾有人在豆瓣评《卓有成效的程序员》：“人有多大懒，才有多大闲”。之前我整理了一个程序员图书列表，目的也就是通过读书，让程序员变懒。写道程序员作为特殊的群体，有的人可以这么懒，懒到事情都交给机器去做，而有的人又可
c++编程随记 lx.asymmetric C++笔记
为了字体更好看，改变了格式…… &&运算符： #include<iostream> using namespace std; int main(){ int a=-1,b=4,k; k=(++a<0)&&!(b--
linux标准IO缓冲机制研究音频数据 linux
一、什么是缓存I/O(Buffered I/O)缓存I/O又被称作标准I/O,大多数文件系统默认I/O操作都是缓存I/O。在Linux的缓存I/O机制中，操作系统会将I/O的数据缓存在文件系统的页缓存(page cache)中，也就是说，数据会先被拷贝到操作系统内核的缓冲区中，然后才会从操作系统内核的缓冲区拷贝到应用程序的地址空间。1.缓存I/O有以下优点:A.缓存I/O使用了操作系统内核缓冲区，
随想生活暗黑小菠萝生活
其实账户之前就申请了，但是决定要自己更新一些东西看也是最近。从毕业到现在已经一年了。没有进步是假的，但是有多大的进步可能只有我自己知道。毕业的时候班里12个女生，真正最后做到软件开发的只要两个包括我，PS：我不是说测试不好。当时因为考研完全放弃找工作，考研失败，我想这只是我的借口。那个时候才想到为什么大学的时候不能好好的学习技术，增强自己的实战能力，以至于后来找工作比较费劲。我
我认为POJO是一个错误的概念 windshome java POJO 编程 J2EE 设计
这篇内容其实没有经过太多的深思熟虑，只是个人一时的感觉。从个人风格上来讲，我倾向简单质朴的设计开发理念；从方法论上，我更加倾向自顶向下的设计；从做事情的目标上来看，我追求质量优先，更愿意使用较为保守和稳妥的理念和方法。 &

黑马RabbitMQ高级学习笔记

RabbitMQ高级内容介绍

RabbitMQ高级特性

RabbitMQ应用问题

RabbitMQ集群搭建

1、RabbitMQ高级特性

1.1、消息的可靠投递

1、定义

2、生产者端代码实现

1）新建spring工程rabbitmq-producer-spring

2） 配置pom.xml

3） 配置rabbitmq相关信息

4）spring配置文件，定义队列和交换机

5） 编写测试类进行测试

6）测试结果

1.2、Consumer Ack

1、定义

2、消费端代码实现

1）新建rabbitmq-consumer-spring工程

2）编写pom.xml导入依赖

3）MQ连接配置rabbitmq.properties

4）spring配置文件，设置监听容器

5）编写监听类AckListener.java

6）编写测试类进行测试ConsumerTest.java

7）测试结果

消息可靠性总结

1.3、消费端限流

1、定义

2、代码实现：

1）新建QosListener.java

2）配置监听容器spring-rabbitmq-consumer.xml

3）测试类ConsumerTest.java

4）生产端发送10条消息测试

5）测试结果

1.4、TTL

1、定义

2、代码实现：

1）新建工程rabbitmq-ttl-producer-spring

2）pom.xml

3）配置spring-rabbitmq-producer.xml

4）进行测试：

5）结果：

①队列统一过期：

②消息单独过期

1.5、死信队列

1、定义

2、消息成为死信的三种情况：

3、队列绑定死信交换机：

4、代码实现

1）spring-rabbitmq-producer.xml

2）Producer.java

3）消费端：DlxListener.java

4) 消费端：spring-rabbitmq-consumer.xml

5）结果

a）消息过期生成死信队列

b）长度限制生成死信队列

c）消息拒收生成死信

1.6、延迟队列

1、定义

2、代码实现

1）生产端：spring-rabbitmq-producer.xml

2）生产端：ProducerTest.java

3）消费端：OrderListener.java

4）消费端：spring-rabbitmq-consumer.xml

5）消费端：ConsumerTest.java

6）结果

2、RabbitMQ应用问题

2.1、消息可靠性保障——消息补偿

2.2、消息幂等性保障

1、定义

2、消息幂等性保障——乐观锁机制

你可能感兴趣的:(笔记)

2）配置pom.xml

3）配置rabbitmq相关信息

5）编写测试类进行测试

1）新建`rabbitmq-consumer-spring`工程

2）编写`pom.xml`导入依赖

3）MQ连接配置`rabbitmq.properties`

5）编写监听类`AckListener.java`

6）编写测试类进行测试`ConsumerTest.java`

1）新建`QosListener.java`

2）配置监听容器`spring-rabbitmq-consumer.xml`

3）测试类`ConsumerTest.java`