在上一篇文章中,我们详细介绍了ActiceMQ的功能作用以及代码实现。本文,我们继续来对ActiveMQ的消息存储方式进行进一步的研究。作为一个消息中中间件,当消费者或者发布者将消息生成或者发布后,这个消息需要暂存到一个地方,用于过渡,然后交给消费者或者订阅者。那么这些消息在中途存到哪里去了呢?我们本章就来探讨一下。
阅读本文前,请保证已经阅读过了《消息队列的实现原理和ActiveMQ详解》这篇文章,或者你已经对ActiveMQ有了充分的学习和认识。
如图所示,ActiveMQ提供了插件式的消息存储,主要有如下几种:
AMQ Message Store:AMQ消息存储-基于文件的存储方式,是以前的默认消息存储
kahaDB Message Store:KahaDB消息存储-提供了容量的提升和恢复能力,是现在的默认存储方式
JDBC Store:JDBC消息存储-消息基于JDBC存储的
Memory Message Store:Memory消息存储-基于内存的消息存储
关于ActiceMQ的所有配置信息,都配置在置activemq.xml文件中,这个文件在安装成功后的根路径下的conf目录下,打开即可修改。为什么要提到这个文件,那肯定是一会所有的配置都要围绕它展开,如果不知道它在哪,将没有办法对它进行修改,只能使用默认配置~
下面就来分别介绍一下这几种方式。
KahaDB是目前默认的存储方式,可用于任何场景,提高了性能和恢复能力。消息存储使用一个事务日志和仅仅用一个索引文件来存储它所有的地址。
KahaDB是一个专门针对消息持久化的解决方案,它对典型的消息使用模式进行了优化。在kaha中,数据被追加到 data logs(数据日志)中。 当不再需要log文件中的数据的时候,log(日志)文件会被丢弃。
KahaDB基本配置如下:
<persistenceAdapter>
<kahaDB directory="${activemq.data}/kahadb"/>
</persistenceAdapter>
这个配置是默认的,如果不做任何修改,你在打开配置文件后看到的就是这个样子。
当然,这种配置方式下,还有需要可用的属性。这里默认只有一个directory属性,下面来介绍一下这里的可用属性:
AMQ Message Store是ActiveMQ5.0的持久化存储,它是一个基于文件、事务存储设计为快速消息存储的一个结构,该结构是以流的形式来进行消息交互的。
这种方式中,Messages被保存到data logs中,同时被reference store进行索引以提高存取速度。Data logs由一些简单的data log文件组成,缺省的文件大小是32M,如果某个消息的大小超过了data log文件的大小,那么可以修改配置以增加data log文件的大小。如果某个data log文件中所有的消息都被成功消费了,那么这个data log文件将会被标记,以便在下一轮的清理中被删除或者归档。
AMQ Message Store基本配置如下:
<broker brokerName="broker" persistent="true" useShutdownHook="false">
<persistenceAdapter>
<amqPersistenceAdapter directory="${activemq.base}/data" maxFileLength="32mb" />
</persistenceAdapter>
</broker>
ActiveMQ支持使用JDBC来持久化消息,预定义的表如下:
在activemq.xml中的配置如下:
<persistenceAdapter>
<jdbcPersistenceAdapter dataSource="#mysql-ds" />
</persistenceAdapter>
这里基本的配置就是将默认的KahaDB配置注解删除,换成上面的注解。当然,这里可以对数据库进行配置,例如可以添加 transactionIsolation=“4” 事务隔离级别,useDatabaseLock=“false” 是否开启数据库锁等。
另外,这里的将持久化方式配置成数据库后,我们就需要创建一个数据库的配置,用来供给ActiveMQ对接存储数据,我们可以直接在当前的activemq.xml配置文件中创建一个< bean >标签来定义数据库的配置信息。此处配置的是一个数据源对象,运用的数据源实现产品是dbcp,因为这是ActiceMQ自带的一种数据源实现方式。
代码:
<bean id="mysql-ds" class="org.apache.commons.dbcp2.BasicDataSource" destroy-method="close">
<property name="driverClassName" value="com.mysql.jdbc.Driver" />
<property name="url" value="jdbc:mysql://localhost:3306/test" />
<property name="username" value="root" />
<property name="password" value="root" />
<property name="initialSize" value="5" />
<property name="maxTotal" value="100" />
<property name="maxIdle" value="30" />
<property name="maxWaitMillis" value="10000" />
<property name="minIdle" value="1" />
</bean>
完成上面的配置和jar包的引入,就可以在开发过程中直接使用了,使用的方法就是在使用MessageProducer消息生产者/发布者时,将持久化方式进行修改。代码如下:
//设置消息持久化
producer.setDeliveryMode(DeliveryMode.PERSISTENT);
这种方式克服了JDBC Store的不足,使用快速的缓存写入技术,大大提高了性能。
配置如下:
<beans>
<broker brokerName="test-broker" xmlns="http://activemq.apache.org/schema/core">
<persistenceFactory>
<journalPersistenceAdapterFactory journalLogFiles="4" journalLogFileSize="32768"
useJournal="true" useQuickJournal="true" dataSource="#mysql_ds" dataDirectory="activemq-data">
</persistenceFactory>
</broker>
</beans>
内存消息存储主要是存储所有的持久化的消息在内存中。这里没有动态的缓存存在,所以你必须注意设置你的broker所在的JVM和内存限制。
配置:
<beans>
<broker brokerName="test_broker" persistent="false" xmlns="http://activemq.apache.org/schema/core">
<transportConnectors>
<transportConnector uri="tcp://localhost:61635">
</transportConnectors>
</broker>
</beans>