本文中,将深入研究Pub/Sub架构,在软件架构中一个消息模式,它支持不同组件或系统之间以解耦的方式进行通信。
在前一片文章[MQTT简介]http://t.csdnimg.cn/6lNeZ中,对MQTT有一个整体的理解。现在来探究Pub/Sub模型对IoT应用的好处,以及各种消息过滤技术,理解MQTT、Pub/Sub和消息队列之间的区别。为了做好准备工作,我们通过清晰定义发布/订阅模式做为开始。
在发布/订阅架构中,有产生消息的发布者和接收消息的订阅者。但是发布-订阅是一个宽泛的概念,有请多技术或协议可以实现。
MQTT就是这样一种遵循发布-订阅架构的特定消息传递协议。MQTT使用一种以代理为基础的模型,客户端可以连接到代理,消息被发送到主题。订阅者然后可以订阅指定的主题,然后接收被发布的消息。
相对于传统的客户端-服务端(请求-响应)模型,发布/订阅架构提供了一种独特的替代方案。在请求-响应方式中,客户端直接和服务端通信,从而会造成降低性能的瓶颈。另外,发布/订阅模型解耦了消息的发布者和订阅者。发布者和订阅者并不关心对方的存在。作为一个第三方,代理处理处理他们之间的连接。这种解耦产生了一种更快速、更高效的通信流程。
通过消除发布者和订阅者之间直接通信的需要,发布/订阅架构消除了IP和端口的交换。它还提供解耦功能,允许两个组件上的操作在发布或接收期间连续通信而不间断。发布/订阅具有三个维度的解耦功能,以实现最佳效率:
在MQTT协议中的解耦
MQTT从空间上将发布者和订阅者解耦,这就意味着,它们只需要知道代理的主机名称或IP及端口,就可以发布和接收消息。另外,MQTT在时间上进行解耦,允许代理为不在线的客户端存储消息。必须满足两个条件来存储数据:客户端必须已经连接代理,并订阅了QoS大于0的主题。
发布/订阅软件架构最重要的一个优点是能够过滤所有消息,并准确的分发给订阅者,消除了发布者和订阅者要知道对方存在的需要。
消息过滤功能是发布/订阅架构中非常重要的一个方面,因为这可以使订阅者只接收它们关心的消息。发布/订阅代理(broker)提供了几种过滤选择,包括基于主题的过滤、基于内容的过滤和基于类型的过滤。
这是最常用的过滤选择,代理通过主题(topic)过滤消息。客户端通过主题订阅它们感兴趣的消息,而代理通过主题层次结构将消息路由到相应的订阅者。主题的结构是有层级的,通过斜杠(/)分层,允许订阅者接收与特定主题级别或主题层级结构匹配的消息。下面是一个主题层级示例:
基于主题的过滤最适合于订阅者对主题特定子集感兴趣的场景。比如,在一个智能家居系统中,订阅者可能对某个房间的温度变化感兴趣,那该订阅者会订阅一个类似smart-home/living-root/temperature
的主题,然后代理(broker)就只会发送匹配这个主题的消息给订阅者。
MQTT使用基于主题的方式过滤消息。每个消息都对应一个主题,代理基于此确定订阅者是否接收该消息。关于主题的更多内容,会在后续章节介绍。为了处理发布/订阅中的一些业务,MQTT有三个QoS等级(前面章节介绍过),基于此,MQTT可以轻松处理客户端发送消息到代理,或代理推送消息到客户端。但是,有一种可能,没有订阅者订阅某个主题,此时代理要知道如何处理这种情况。不同的代理软件有不同的处理机制。
为了保证层级主题的灵活性,认真设计主题层级树非常重要,要给未来的情况保留空间,遵循这个策略,MQTT会非常适合生产环境。
在这种过滤类型中,代理(broker)使用过滤表达式,基于消息的内容进行过滤。订阅者通过订阅一个指定的过滤表达式来表明它们感兴趣的消息,代理基于消息内容将消息路由给合适的订阅者。
这种过滤模式,要根据具体的代理(broker)进行处理,不同的代理,处理方式可能不一样。
最适用于消息未按主题组织,且订阅者根据消息内容对特定消息子集感兴趣的场景。
比如,在物流应用中,订阅者只对包含某个指定单号的消息感兴趣,则该订阅者就会订阅一个过滤表达式,例如tracking-number='123456'
,代理(broker)就只会发送匹配这个表达式的消息给订阅者。
该类型的过滤,代理(broker)通过消息的类型过滤消息。当和面向对象语言配合使用时,消息被当作对象呈现出来,这种过滤非常有用。订阅者通过订阅指定的消息类型来获取感兴趣的消息,代理(broker)根据消息类型路由给订阅者。
基于类型的过滤,最适用于按类层级组织的消息和订阅者根据类,对指定的类型或子类型感兴趣的消息。
比如,在一个财务类应用中,订阅者只对股票价格类型的消息感兴趣,订阅者就会订阅“股票价格”类型的消息,代理(broker)则只会发送此类消息给订阅者。
这些过滤选项在决定将哪些消息发送给哪些订阅者时提供了灵活性和粒度。根据用例,可以使用这些过滤选项中的一个或多个来确保订阅者仅接收他们感兴趣的消息。
但是,需要注意的是,发布/订阅模型并不是适用于所有的情形,有一些情况需要考虑,比如,在使用基于主题的过滤时,需要确保发布和订阅双方知道使用哪一个主题。如何处理没有订阅者订阅消息。需要提前考虑待发布消息结构。
对基于主题的过滤,发布者和订阅者需要提前知道使用哪个主题。另外,对于消息发布,发布者不能假设有人在订阅这个消息,这是一个重要的点,因为在发布/订阅模型中,发布者将消息发布到代理(broker),并不知道订阅者是谁,也不知道订阅是否连接到代理(broker)。代理负责将消息发送给所有订阅该主题的订阅者。但是,如果没有该主题订阅者连接到代理(broker),则这消息永远都不会发送出去。因此,对于消息发布者来说,牢记消息发送是无法保证的,并进行相应的系统设计是至关重要的。
扩展性是发布/订阅架构的一个重要优点。传统的客户端-服务端模型在扩展性上存在局限,特别是在处理大量客户端的情况下。但是,在发布/订阅模型中,代理(broker)能够以事件驱动的方式处理消息,能够高并发操作,这就意味着系统可以在不恓性性能的情况下处理高并发。
另外,事件驱动处理中,消息缓存和智能消息路由也有助于提高发布/订阅的可扩展性。通过缓存消息,代理(broker)可以快速检索消息并将之发送给订阅者,而无需额外的处理。另一方面,智能路由确保消息只被发送给需要它们的订阅者,减少不必要的网络拥堵,使扩展性更佳。
MQTT遵循发布/订阅架构,很自然的具体扩展性,使之IoT应用场景的理想选择。尽管有这些优势,扩展到支持成千上万个连接依然是个挑战。在这种场景下,代理(broker)集群可以用来在多个服务器之间分配负载,负载均衡器可以确保流量均匀分布。
现在我们已经对发布/订阅架构的基本概念有了一个认识,接下来,我们看下使用它对IoT通信的好处。
发布/订阅架构有几个优势,使之成为诸多应用的理想选择。这时列举一些主要优势:
尽管发布/订阅架构有诸多上述优点,但同样也有一些挑战必须处理,才能确保成功的应用。下面列的是一些常见的挑战及处理方法:
因为MQTT是异步工作的,因此在等待或发布消息是不会阻塞任务。大多数客户端库都基于回调或类似的模型,因此消息流通常是异步的。在一些案例中,同步是可取的也是可能的。一些库有同步API来等待指定的消息。
你可以通过完备的设计和实现来解决使用发布/订阅架构中的挑战。开发人员理解了挑战,可以构建出可扩展、安全、高效的消息系统,有效的利用MQTT的功能。
关于MQTT,有很多疑惑,该协议是否是消息队列的一个实现,这里会阐明该主题并解释其中的差异。在前一篇文章(http://t.csdnimg.cn/HhjzK)中,提到MQTT指的是IBM的MQ系统产品,与“消息队列”无关。无论名字的由来,了解MQTT和传统消息队列之间的区别都很有用:
发布/订阅架构提供了一个灵活、可扩展的方式来构建分布式系统,可以处理许多的客户端连接。MQTT的轻是级和高效的发布/订阅消息特性帮助它在IoT、移动和其他分布式应用程序得到广泛应用。
使用MQTT,架构师和公司可以构建系统,在各种实际场景中可靠、高效地传输数据。通过其空间和时间上的解耦、异步消息、基于主题的过滤和QoS等级等特性,MQTT提供了一组强大的功能来帮助开发人员克服构建分布式系统的挑战。总之,发布/订阅架构和MQTT协议是想要开发高效、可扩展分布式系统开发人员的有效工具。
在后续章节中,将会近距离的探究MQTT客户端和代理(broker)的构建及两者之间如何连接。