RocketMQ消息系统 - pull模式

RocketMQ消息系统 - pull模式

一、消费模式

消息系统常见的消费模式分为push模式和pull模式，push模式是服务端主动给客户端推送数据，也是比较常见的模式，pull模式则是客户端主动去服务端拉取数据。

 

1.1 push模式

① 服务端保存push状态，失败重发；

② 客户端无状态；

③ push是实时的；

④ 负载均衡，服务端统一处理和控制，需要根据消费者的消费能力做流控；

 

1.2 pull模式

① 服务端无状态；

② 客户端保存当前pull状态，以便在故障或者重启时恢复；

③ pull分长轮询（实时）和短轮询（与pull的时间间隔有关）；

④ 负载均衡，消费者自行控制；

 

 

二、pull模式原理

  

PullMessageTask:

① 每3s拉取一次；

② 更新拉取的队列的offset到broker；

③ 每个队列启动一个PullMessageTask，负责这个队列的消息拉取； 

④ 消费失败，或者listener执行的时候出错的消息，保存到H2数据库中；

 

ReconsumerMessgaeTask:

对于消费失败的消息，从数据库中获取并重新消费；

 

三、pull模式使用

3.1 消费者

消息topic：mengka-cc2

groupId:  consumerG2

消息模式:  PULL

拉取间隔时间：3000ms

 

 

/**
 * User: mengka
 * Date: 15-8-8
 */
@Component
public class TaaPullMessageListener implements MessageListenerPull {

    private static final Logger log = LoggerFactory.getLogger(TaaPullMessageListener.class);

    @Override
    public ConsumeConcurrentlyStatus consumeMessage(MessageExt msg) {
        log.info("---------------, receive message id = "+msg.getMsgId()+" , content = "+new String(msg.getBody())+" , tags = "+msg.getTags());
        return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
    }
}

 

 

3.2 生产者

消息topic：mengka-cc2

groupId:  consumerG2

 

 

String serviceConfigXMLs[] = new String[]{"rocketmq_pull_06/rocketmq-pull-producer.xml"};
ApplicationContext context = new ClassPathXmlApplicationContext(serviceConfigXMLs);
NotifyManager producterNotifyManager = (NotifyManager) context.getBean("producterNotifyManager");

String content = "Just for test[" + TimeUtil.toDate(new Date(), TimeUtil.format_1);
Message message = new BytesMessage(content.getBytes());
SendResult result = producterNotifyManager.sendMessage(message);

 

 

3.3 拉取消息消费

生产者发送消息之后，在下一次的轮询中，消费者就拉取到了未消费的消息数据，消息消费成功后并更新offset到服务端；