消息队列

在计算机科学中,消息队列和邮箱是用于进程间通讯或同一进程内的线程间通讯的软件工程组件。他们使用一个队列来传播消息——传递控制或者内容。群体传播系统提供相似的功能。数据库

 

概述编程

 

消息队列提供一个异步通讯协议,这意味着该消息的发送者和接收者不须要在同一时间与消息队列进行交互。消息被放入队列保存,直到接收方处理他们。消息队列对于一条消息中传输的数据大小有显示或隐式的限制,这样队列中才能保持良好的的消息数量。安全

消息队列的不少功能由内部实现:在操做系统或应用程序内部。这种队列的存在只为运行于该系统。服务器

其余实现容许不一样的计算机系统之间传递消息,可能会链接多个应用程序和多个操做系统。这些消息队列系统一般提供加强的弹性功能,以确保系统故障时消息不会“丢失”。这种消息队列软件(也被称为面向消息中间件)的商业实现的例子包括IBM的WebSphere MQ(MQ系列)和Oracle高级队列(AQ)。Java标准中的Java消息服务(JMS),有几个专有软件和免费软件实现。异步

各类实现有专有软件,提供消息队列服务,开源软件,或者是基于硬件编程语言

专有选项拥有最长的历史,包括从一开始的消息队列产品,如IBM的WebSphere MQ(MQ系列 ),还有依赖特定操做系统的,如Microsoft消息队列 。spa

消息队列服务选项,如StormMQ或IronIO。操作系统

有不少开放源码选项的消息中间件系统,包括JBoss Messaging,JORAM,Apache ActiveMQ,Sun Open Message Queue,Apache Qpid,[8] RabbitMQ,Beanstalk’d,Tarantool和HTTPSQS [9]线程

除了开源系统,基于硬件的消息中间件的存在有供应商如Solace系统 ,Sonoa / Apigee和Tervela经过硅或硅/软件数据通路提供队列。orm

大多数RTOS鼓励使用消息队列做为主要的IPC或线程间通讯机制,如VxWorks和QNX操做系统。致使消息传递与CPU调度紧密集成的主要缘由是RTOS实时应用程序的可用性。早期的商用的RTOS例子鼓励消息队列基于线程间通讯,包括VRTX和pSOS +,可追溯至20世纪80年代初。

使用

在典型消息队列实现中,系统管理员安装配置现成的消息队列软件(队列管理器或中介),并定义一个命名的消息队列。或者注册一个消息队列服务

而后,应用程序注册一个软件例程,来“监听”放入队列的消息。

后续的应用程序能够链接到队列并转移其中的消息。

队列管理器软件存储消息,直到接收应用程序链接后调用注册的软件例程。而后,接收应用程序以适当的方式处理该消息。

一般有许多选项做为消息传递的精确语义,包括:

  • 持久性 – 消息可能被保存在内存中,写入到磁盘,或甚至提交到DBMS,若是可靠性要求代表了更加资源密集型的解决方案。
  • 安全策略 – 哪些应用程序能够访问这些消息?
  • 消息清理策略 – 队列或消息应当有存活时间
  • 消息过滤 – 一些系统支持过滤数据,所以,订阅者只能看到匹配预约义兴趣标准的消息
  • 交付策略 – 咱们是否是应该保证消息传递至少一次,或不超过一次?
  • 路由策略 – 在一个有许多队列服务器的系统中,哪些服务器应该收到一条消息或一队列的消息?
  • 批量策略 – 是否当即将消息传送?仍是说系统应该稍等,并尝试一次传递多条消息?
  • 排队标准 – 何时应当考虑消息“入队”?何时队列有了?或者,什么时候它被转发到至少一个远程队列?或全部队列?
  • 已收通知 – 发布者可能须要知道,什么时候部分或所有订阅者收到了消息。

这些因素都是要考虑的,会显著影响到传输语义,系统的可靠性,系统效率。

标准和协议

从历史来看,消息队列使用了专有的,封闭的协议,以约束不一样的操做系统或编程语言在异构环境中交互的能力。

让消息队列更加普遍认知的早期尝试是Sun Microsystem的JMS规范,它提供了仅供Java的客户端API。容许Java开发人员切换消息队列提供者,相似开发人员使用SQL数据库的方式。在实践中,多样化的消息队列技术和方案,并不老是像应有的那般实用。

最近,已经出现了三个标准,使得消息队列开放而普遍:

  • 高级消息队列协议
  • MQTT
  • 面向流文本的消息传递协议

这些全都处于标准化和采纳的不一样阶段。他们运转在HTTP的同一层次。

一些专有实现,也使用HTTP来提供消息队列,如Amazon的SQS。

这是由于它总能使用请求-响应语义经由同步协议来分层异步行为(这正是消息队列须要的)。然而这种状况下,这种实现受到底层协议限制,并且可能没法给传递的消息提供必须的完整保真度或设置选项。

同步与异步

许多同步操做的通讯协议更加众所周知。HTTP协议 – 用于万维网和Web服务 – 提供了一个明显的例子,用户发送一个网页请求,而后等待答复。

然而,存在这样的状况,此时同步的行为是不恰当的。例如,AJAX( 异步JavaScript和XML)可用于异步发送文本或XML消息,来用更多的相关信息更新一个网页的一部分。谷歌在他的谷歌建议(自动填充)中使用了这种途径,搜索功能将用户输入的部分查询发送到谷歌的服务器,并返回一个列表,包含用户会录入的可能的完整查询。这个列表是在用户录入时异步更新的。

其余异步的例子存在于事件通知系统和发布/订阅系统。

  • 一个应用程序可能须要通知别人事件发生了,但并不须要等待响应。
  • 在发布/订阅系统中,应用程序“发布”信息,任意数量的客户端阅读

在上面的例子中,让信息发送者等待是不合理的,例如,若是其中一个接收方已崩溃。

应用程序没必要仅做同步或异步 。交互的应用程序可能须要当即回应部分请求(如告诉客户,销售请求已被接受,正在处理库存调货预定),可是也许队列中的其余部分(如完成费用计算,将数据转发到中心记帐系统,还有调用各类其它服务)会过一会才完成。

在这些状况下,用一个子系统进行消息排队(或可选择广播消息系统)可有助于提升总体系统的行为。

相关文章
相关标签/搜索