php消费rabbitmq消息QoS,简介Rabbitmq的几种消费模式

前言

在日常开发中，消息队列能帮我们解决系统的异步问题，流量的控制和服务解耦，不同的消息队列有不同的消费模型

思考

redis也可以实现消息队列(list和stream)，也称为轻量级消息队列，list实现的缺点在哪里？stream类型怎么用？

RabbitMq

具体概念的东西网上很多，文档也有详细描述这里不做过多阐述，本文主要以PHP代码为主进行实验，消息队列之rabbitmq

docker run -d --name mq \

-p 5672:5672 -p 15672:15672 \

-v /home/docker/mq/data:/var/lib/rabbitmq --hostname myRabbit \

-e RABBITMQ_DEFAULT_VHOST=my_vhost \

-e RABBITMQ_DEFAULT_USER=admin \

-e RABBITMQ_DEFAULT_PASS=admin ee045987e252

--hostname myRabbit 是因为rabbitmq是基于Node节点名的

官方讲rabbitmq比喻为邮局，queue比喻为邮局里的邮箱，我们要寄信(producer发送message)，就需要把信赛到(send)邮箱，或者你交给前台窗口(exchange)让他帮你寄，但是不同的前台窗口提供的服务不同，因为呀不同的邮箱他发往的地址不同，有的需要你指定投到哪些邮箱(exchange类型为direct类型时要求完全匹配routing-key)，有的只需要你告诉他投到邮箱的大致有什么特点就行(exchange类型为topic时routing-key模糊匹配就行)，还有的是把信件复制多个(魔法)往每个邮箱都塞一封(exchange类为fanout)。最后有的邮箱在派送员派送完信件后要求收信人(consumer)签个字(ack验证)才能把信给他

下面例子基于官方提供的包,

composer require php-amqplib/php-amqplib

Direct-Exchange

生产者

require_once __DIR__ . '/vendor/autoload.php';

use PhpAmqpLib\Connection\AMQPStreamConnection;

use PhpAmqpLib\Message\AMQPMessage;

//获取终端提示用户输入的数据

fwrite(STDOUT, "Please enter a message:\n");

$msg_str = fgets(STDIN);

//建立生产者与mq之间的连接 -------动身前往邮局

//参数：地址，端口，账号，密码，虚拟机名

//注意这个虚拟机名为绑定-e RABBITMQ_DEFAULT_VHOST=my_vhost参数时指定的

$connection = new AMQPStreamConnection('容器ip', 5672, 'admin', 'my_vhost');

//在已连接基础上建立生产者与mq之间的通道-----进邮局门

$channel = $connection->channel();

//声明初始化交换机，交换机不存在则创建----找前台窗口

//参数：交换机名，路由类型，是否检测同名队列，是否开启队列持久化，通道关闭后是否删除队列

$channel->exchange_declare('ex_direct', 'direct', false, true, false);

//声明初始化一条队列，队列不存在则创建-----告诉前台窗口要什么邮箱

//参数：队列名，是否检测同名队列，是否开启队列持久化，是否能被其他队列访问，通道关闭后是否删除队列

$channel->queue_declare('ex_direct_queue', false, false, false, false);

//前台窗口找你要的邮箱

//将队列与某个交换机进行绑定，并使用路由关键字

//参数：队列名，交换机名，路由键名

$channel->queue_bind('ex_direct_queue', 'ex_direct', 'hello');

//把信给封好

//生成消息

$msg = new AMQPMessage($msg_str);

//推送消息到某个交换机------把信给前台

//参数：消息，交换机名，路由键名

//就如同前面所讲，你只需要把信给前台，并告诉他投给哪些指定的邮箱即可

$channel->basic_publish($msg, 'ex_direct', 'hello');

echo " [x] Sent： $msg_str \n";

$channel->close();

$connection->close();

消费者

require_once __DIR__ . '/vendor/autoload.php';

use PhpAmqpLib\Connection\AMQPStreamConnection;

use PhpAmqpLib\Message\AMQPMessage;

//快递员进门

$connection = new AMQPStreamConnection('容器ip', 5672, 'admin', 'my_vhost');

$channel = $connection->channel();

//快递员先看看给自己任务的前台在不在

$channel->exchange_declare('ex_direct', 'direct', false, true, false);

//在看看自己负责的邮箱在不在

$channel->queue_declare('ex_direct_queue', false, false, false, false);

$channel->queue_bind('ex_direct_queue', 'ex_direct', 'hello');

//执行上面的步骤主要是为保证这些目标交换机和队列已经存在

//这里是收信人的动作

$callback = function($msg) {

//打印消息

echo " [x] Received ", $msg->body, "\n";

//消息确认

$msg->ack();

};

//第三个参数为true表示了这个邮箱规定了收信人必须签名

//参数：队列名，消费者标识符，不接收此使用者发布的消息，使用者是否使用自动确认模式，请求独占使用者访问，不等待，消息回调函数

$channel->basic_consume('ex_direct_queue', 'consumer1', false, true, false, false, $callback);

//快递员看有没有信，有就立马寄

//监听通道消息

while(count($channel->callbacks)) {

$channel->wait();

}

思考

1.万一RabbitMQ崩溃了退出了怎么办？里面的队列和消息会不会消失，这需要我们在声明交换机和队列时候，让他保证持久化

//第4个参数为true

$channel->exchange_declare('ex_direct', 'direct', false, true, false);

//第三个参数为true，这里不能在已存在的队列上加持久化

$channel->queue_declare('hello', false, true, false, false);

//里面的消息也保证持久化

//第二个参数为数组

$msg = new AMQPMessage('你的消息', ['delivery_mode' => AMQPMessage::DELIVERY_MODE_PERSISTENT] );

2.Rabbitmq默认一旦发送消息给客户端后就立即删除，那万一消费者收到消息后要执行一个耗时任务，但是中途异常退出了，那么这个消息不就丢了吗(比如上面的回调函数中sleep(10)但是我们中涂把他kill掉导致没发送ack码)。

们希望消费者完成消息处理后发送ack确认，rabbitMQ收到后才能对消息删除。

//即在消费者绑定队列时第4个参数为false

$channel->basic_consume('ex_direct_queue', 'consumer1', false, false, false, false, $callback);

3.快递员有多个，那么万一有的快递员要寄很多信，有的在偷懒怎么办？

利用函数进行公平调度

//消费者代码添加，表示在等待消费者处理完消息后才能再接受消息，不堆积消息

$channel->basic_qos(null, 1, null);

Topic-Exchange

和Direct代码基本相同不同的是绑定交换机是时的'direct'成了'topic'

注意，routing-key是模糊匹配，这里并不是参考正则，*表示多个字符，#表示一个字符如 .log. 匹配 aaa.log.aaa

Fanout-Exchange

又称发布与订阅，即向与交换机的所有队列广播消息，既然是广播，那么我们就不需要考虑消息的ack了

生产者

require_once __DIR__ . '/vendor/autoload.php';

use PhpAmqpLib\Connection\AMQPStreamConnection;

use PhpAmqpLib\Exchange\AMQPExchangeType;

use PhpAmqpLib\Message\AMQPMessage;

//获取终端提示用户输入的数据

fwrite(STDOUT, "Please enter a message:\n");

$msg_str = fgets(STDIN);

//建立生产者与mq之间的连接

//参数：地址，端口，账号，密码

$connection = new AMQPStreamConnection('localhost', 5672, 'guest', 'guest');

//在已连接基础上建立生产者与mq之间的通道

$channel = $connection->channel();

//声明初始化交换机

//参数：交换机名，路由类型，是否检测同名队列，是否开启队列持久化，通道关闭后是否删除队列

$channel->exchange_declare('mq_sms_send_ex3', AMQPExchangeType::FANOUT, false, false, false);

//生成消息

$msg = new AMQPMessage($msg_str);

//推送消息到某个交换机

//参数：消息，交换机名，路由键名

$channel->basic_publish($msg, 'mq_sms_send_ex3');

echo " [x] Sent： $msg_str \n";

$channel->close();

$connection->close();

消费者

require_once __DIR__ . '/vendor/autoload.php';

use PhpAmqpLib\Connection\AMQPStreamConnection;

use PhpAmqpLib\Exchange\AMQPExchangeType;

$connection = new AMQPStreamConnection('localhost', 5672, 'guest', 'guest');

$channel = $connection->channel();

//声明初始化交换机

//参数：交换机名，路由类型，是否检测同名队列，是否开启队列持久化，通道关闭后是否删除队列

$channel->exchange_declare('mq_sms_send_ex3', AMQPExchangeType::FANOUT, false, false, false);

//声明初始化一条队列

//参数：队列名，是否检测同名队列，是否开启队列持久化，是否能被其他队列访问，通道关闭后是否删除队列

list($queue_name, ,) = $channel->queue_declare("", false, false, true, false);

//将队列与某个交换机进行绑定，并使用路由关键字

//参数：队列名，交换机名，路由键名

$channel->queue_bind($queue_name, 'mq_sms_send_ex3');

echo ' [*] Waiting for messages', "\n";

$callback = function($msg) {

echo " [x] Received ", $msg->body, "\n";

//判断获取到quit后

if (trim($msg->body) == 'quit') {

$msg->getChannel()->basic_cancel($msg->getConsumerTag());

}

};

$channel->basic_qos(null, 1, null);

//参数：队列名，消费者标识符，不接收此使用者发布的消息，使用者是否使用自动确认模式，请求独占使用者访问，不等待，消息回调函数

$channel->basic_consume($queue_name, 'consumer1', false, true, false, false, $callback);

死信队列

即延迟队列，讲消息发送到指定的队列，消息要在队列中待到指定时间(ttl)后才能被发送给消费者

RabbtMq实现大致示意图

image.png

如何保证死信队列在消息过去后才把消息发给业务交换机---不设置消费者(快递员)不就行了

生产者

require_once '../vendor/autoload.php';

use PhpAmqpLib\Connection\AMQPStreamConnection;

use PhpAmqpLib\Message\AMQPMessage;

use PhpAmqpLib\Exchange\AMQPExchangeType;

use PhpAmqpLib\Wire\AMQPTable;

use PhpAmqpLib\Wire\AMQPWriter;

fwrite(STDOUT, "Please enter a message:\n");

$msg_str = fgets(STDIN);

$connection = new AMQPStreamConnection(

'172.17.0.5','5672','admin','admin','my_vhost'

);

$channel = $connection->channel();

//业务交换机，负责处理过期消息

$channel->exchange_declare(

'ex_dl','direct',false,true

);

//死信交换机

$channel->exchange_declare(

'ex_normal','fanout',false,true

);

//因此创建死信队列的配置参数要求是AMQPTable类型

$args=new AMQPTable();

//设置消息过期时间

$args->set('x-message-ttl',120000);

//过期后发送给哪个交换机

$args->set('x-dead-letter-exchange','ex_dl');

//设置路由键

$args->set('x-dead-letter-routing-key','ex_qu');

//也就是说normal队列上的消息存活时间都是2分组

//死信队列

$channel->queue_declare('queue_normal',false,true,

false,false,false,$args

);

//业务队列

$channel->queue_declare('queue_dlx',false,true,

false,false

);

$channel->queue_bind('queue_normal','ex_normal');

$channel->queue_bind('queue_dlx','ex_dl','ex_qu');

$message =new AMQPMessage($msg_str);

//只发送消息给死信交换机，因为业务交换机的消息是死信队列给的

$channel->basic_publish($message,'ex_normal','ex_qu');

$channel->close();

$connection->close();

消费者

require_once '../vendor/autoload.php';

use PhpAmqpLib\Connection\AMQPStreamConnection;

use PhpAmqpLib\Exchange\AMQPExchangeType;

$connection = new AMQPStreamConnection(

'172.17.0.5','5672','admin','admin','my_vhost'

);

$channel= $connection->channel();

//我们只要保证业务交换机和业务队列在就行了

//死信队列不给消费者消费消息

$channel->exchange_declare(

'ex_dl','direct',false,true

);

$channel->queue_declare('queue_dlx',false,true,

false,false

);

$channel->queue_bind('queue_dlx','ex_dl','ex_qu');

echo '[*]Waiting for message';

$callback = function($msg){

echo " [x] Received ", $msg->body, "\n";

$msg->ack();

if(trim($msg->body)=='quit'){

echo 2;

$msg->getChannel()->basic_cancel($msg->getConsumerTag());

}

};

$channel->basic_qos(null, 1, null);

$channel->basic_consume('queue_dlx','c1',false,false,false,false,$callback);