rabbitmq 消息存储

rabbitmq 消息存储分为两部分内容:
消息本身和其索引

而队列由两部分组成:
rabbit_amqqueue_process 接收并处理消息
backing_queue 则负责消息存储,默认实现为rabbit_variable_queue.erl,内含q1、q2、delta、q3、q4几个子队列

按照消息的存储位置,消息在backing_queue中可区分为以下几种状态:
alpha:消息本身和其索引都在内存中
beta:消息在磁盘,索引在内存
gamma:消息在磁盘,索引同时存在内存和磁盘
delta:消息和索引都只存在磁盘

一般而言消息在队列中的转化流程是:
q1->q2->delta->q3->q4
即内存存储到磁盘,再从磁盘取出到内存中这样的存储思路
其中q1和q4只存储alpha类型,q2和q3只存储beta、gamma类型

不过上述转移步骤经常被部分跳过,消息的状态受到系统负载的影响,会不断变动。
另外消费者消费时从q4反向获取消息,也触发消息的状态转移,当q4、q3、delta、q2都为空时,会将消息从q1直接转移到q4,下次直接读取q4。因此负载较轻,消费速率超过生成速率时,非持久化的消息基本处于alpha状态,从q1转移到q4被消费或者始终在q4(q3为空时消息会直接投到q4),消息始终处于内存中;而负载较高无法及时消费时,消息则可能存储到磁盘,增加开销并降低系统性能。

你可能感兴趣的:(rabbitmq,分布式)