消息处理方法以及消息处理装置制造方法及图纸

本发明专利技术公开了一种消息处理方法以及消息处理装置，涉及数据处理技术领域。其中的消息处理方法包括：消息处理客户端在进行当前消息处理的同时，向消息处理服务端发送消息请求以拉取消息；消息处理客户端将拉取到的消息存储在消息缓存队列中；消息处理客户端在当前消息处理结束后，对存储在消息缓存队列中的消息进行处理。本发明专利技术能够提升消息处理装置的吞吐率。

【技术实现步骤摘要】
消息处理方法以及消息处理装置
本专利技术涉及数据处理
，特别涉及一种消息处理方法以及消息处理装置。
技术介绍
消息处理装置是指支持与保障分布式应用程序之间收发消息数据的中间层，常见的产品有RabbitMQ、RocketMQ等。分布式应用程序之间的通信接口由消息处理装置提供，消息发送方和接收方之间的连接完全是松耦合的，通信是非阻塞的。在如今互联网应用海量消息交互过程中，消息处理装置承载消息数据的存储和转发，消息处理装置资源利用的效率，直接影响系统平台的性能和可靠性。其基本工作原理是：消息数据存储于服务端的消息队列中，消息处理端从消息队列中拉取消息进行处理。图1示出了传统方法中消息处理装置的消息处理流程。消息发送端向服务端的消息队列发送消息；各个系统应用中的消息客户端根据需求请求消息队列中的消息，服务端根据负载均衡策略分配消息所发往的客户端；消息客户端获取消息后进行消息数据的处理。
技术实现思路
专利技术人研究，传统的消息处理装置的吞吐率较低。传统的消息处理客户端在执行消息处理时，网络通常相对空闲，往往造成网络和硬件资源的浪费，从而降低消息处理装置系统的吞吐率。同时，当阶段性地出现消息请求高峰时，消息处理装置系统的压力过大，难以满足消息应用端性能需求。本专利技术解决的一个技术问题是，如何提升消息处理装置的吞吐率。根据本专利技术实施例的一个方面，提供了一种消息处理方法，包括：消息处理客户端在进行当前消息处理的同时，向消息处理服务端发送消息请求以拉取消息；消息处理客户端将拉取到的消息存储在消息缓存队列中；消息处理客户端在当前消息处理结束后，对存储在消息缓存队列中的消息进行处理。在一个实施例中，消息处理方法还包括：消息处理服务端根据消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定为消息处理客户端分发的消息数量；消息处理服务端根据为消息处理客户端分发的消息数量，向消息处理客户端分发消息。在一个实施例中，消息处理服务端根据消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定为消息处理客户端分发的消息数量包括：消息处理服务端将消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量进行加权求和，确定为消息处理客户端分发的消息数量。在一个实施例中，消息处理方法还包括：消息处理服务端根据消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定消息处理客户端的消息缓冲队列的容量。在一个实施例中，消息处理服务端根据消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定消息处理客户端的消息缓冲队列的容量包括：消息处理服务端将消息请求的请求消息数量与消息处理客户端的优先级相乘后与消息处理客户端所在系统应用的吞吐量相加，确定消息缓冲队列的容量。在一个实施例中，消息处理方法还包括：若在预设时间内消息处理客户端发送消息请求的请求消息数量大于为消息处理客户端分发的消息数量，则消息处理服务端降低消息处理客户端的优先级，并重新确定为消息处理客户端分发的消息数量。在一个实施例中，消息处理方法还包括：若在预设时间内消息处理客户端发送消息请求的请求消息数量大于为消息处理客户端分发的消息数量，则消息处理服务端降低消息处理客户端的优先级，并重新确定消息处理客户端的消息缓冲队列的容量。在一个实施例中，消息处理方法还包括：若在预设时间内消息缓存队列的消息数量触发第一阈值达到预设次数，则消息处理服务端提升消息处理客户端的优先级，并重新确定为消息处理客户端分发的消息数量。在一个实施例中，消息处理方法还包括：若在预设时间内消息缓存队列的消息数量触发第一阈值达到预设次数，则消息处理服务端提升消息处理客户端的优先级，并重新确定消息处理客户端的消息缓冲队列的容量。在一个实施例中，消息处理方法还包括：若消息缓存队列中的消息数量小于等于第一阈值，则消息处理客户端向消息处理服务端发送消息请求。在一个实施例中，消息处理方法还包括：若消息缓存队列中的消息数量大于等于第二阈值，则消息处理客户端停止向消息处理服务端发送消息请求。根据本专利技术实施例的另一个方面，提供了一种消息处理装置，包括消息处理客户端以及消息处理服务端，其中，消息处理客户端用于：在进行当前消息处理的同时，向消息处理服务端发送消息请求以拉取消息；将拉取到的消息存储在消息缓存队列中；在当前消息处理结束后，对存储在消息缓存队列中的消息进行处理。在一个实施例中，消息处理服务端用于：根据消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定为消息处理客户端分发的消息数量；根据为消息处理客户端分发的消息数量，向消息处理客户端分发消息。在一个实施例中，消息处理服务端用于：将消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量进行加权求和，确定为消息处理客户端分发的消息数量。在一个实施例中，消息处理服务端还用于：根据消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定消息处理客户端的消息缓冲队列的容量。在一个实施例中，消息处理服务端用于：将消息请求的请求消息数量与消息处理客户端的优先级相乘后与消息处理客户端所在系统应用的吞吐量相加，确定消息缓冲队列的容量。在一个实施例中，消息处理服务端还用于：若在预设时间内消息处理客户端发送消息请求的请求消息数量大于为消息处理客户端分发的消息数量，则降低消息处理客户端的优先级，并重新确定为消息处理客户端分发的消息数量。在一个实施例中，消息处理服务端还用于：若在预设时间内消息处理客户端发送消息请求的请求消息数量大于为消息处理客户端分发的消息数量，则降低消息处理客户端的优先级，并重新确定消息处理客户端的消息缓冲队列的容量。在一个实施例中，消息处理服务端还用于：若在预设时间内消息缓存队列的消息数量触发第一阈值达到预设次数，则提升消息处理客户端的优先级，并重新确定为消息处理客户端分发的消息数量。在一个实施例中，消息处理服务端还用于：若在预设时间内消息缓存队列的消息数量触发第一阈值达到预设次数，则提升消息处理客户端的优先级，并重新确定消息处理客户端的消息缓冲队列的容量。在一个实施例中，消息处理客户端还用于：若消息缓存队列中的消息数量小于等于第一阈值，则向消息处理服务端发送消息请求。在一个实施例中，消息处理客户端还用于：若消息缓存队列中的消息数量大于等于第二阈值，则停止向消息处理服务端发送消息请求。本专利技术能够提升消息处理装置的吞吐率。通过以下参照附图对本专利技术的示例性实施例的详细描述，本专利技术的其它特征及其优点将会变得清楚。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1示出了传统方法中消息处理装置的消息处理流程。图2示出了本专利技术一个实施例的消息处理方法的流程示意图。图3示出了本专利技术另一个实施例的消息处理方法的流程示本文档来自技高网...

【技术保护点】
1.一种消息处理方法，其特征在于，包括：消息处理客户端在进行当前消息处理的同时，向消息处理服务端发送消息请求以拉取消息；消息处理客户端将拉取到的消息存储在消息缓存队列中；消息处理客户端在当前消息处理结束后，对存储在消息缓存队列中的消息进行处理。

【技术特征摘要】
1.一种消息处理方法，其特征在于，包括：消息处理客户端在进行当前消息处理的同时，向消息处理服务端发送消息请求以拉取消息；消息处理客户端将拉取到的消息存储在消息缓存队列中；消息处理客户端在当前消息处理结束后，对存储在消息缓存队列中的消息进行处理。2.如权利要求1所述的消息处理方法，其特征在于，所述消息处理方法还包括：消息处理服务端根据所述消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定为消息处理客户端分发的消息数量；消息处理服务端根据为消息处理客户端分发的消息数量，向消息处理客户端分发消息。3.如权利要求2所述的消息处理方法，其特征在于，所述消息处理服务端根据所述消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定为消息处理客户端分发的消息数量包括：消息处理服务端将所述消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量进行加权求和，确定为消息处理客户端分发的消息数量。4.如权利要求2所述的消息处理方法，其特征在于，所述消息处理方法还包括：消息处理服务端根据所述消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定消息处理客户端的消息缓冲队列的容量。5.如权利要求4所述的消息处理方法，其特征在于，所述消息处理服务端根据所述消息请求的请求消息数量、消息处理客户端的优先级以及消息处理客户端所在系统应用的吞吐量，确定消息处理客户端的消息缓冲队列的容量包括：消息处理服务端将所述消息请求的请求消息数量与消息处理客户端的优先级相乘后与消息处理客户端所在系统应用的吞吐量相加，确定消息缓冲队列的容量。6.如权利要求2所述的消息处理方法，其特征在于，所述消息处理方法还包括：若在预设时间内消息处理客户端发送消息请求的请求消息数量大于为消息处理客户端分发的消息数量，则消息处理服务端降低消息处理客户端的优先级，并重新确定为消息处理客户端分发的消息数量。7.如权利要求4所述的消息处理方法，其特征在于，所述消息处理方法还包括：若在预设时间内消息处理客户端发送消息请求的请求消息数量大于为消息处理客户端分发的消息数量，则消息处理服务端降低消息处理客户端的优先级，并重新确定消息处理客户端的消息缓冲队列的容量。8.如权利要求2所述的消息处理方法，其特征在于，所述消息处理方法还包括：若在预设时间内所述消息缓存队列的消息数量触发第一阈值达到预设次数，则消息处理服务端提升消息处理客户端的优先级，并重新确定为消息处理客户端分发的消息数量。9.如权利要求4所述的消息处理方法，其特征在于，所述消息处理方法还包括：若在预设时间内所述消息缓存队列的消息数量触发第一阈值达到预设次数，则消息处理服务端提升消息处理客户端的优先级，并重新确定消息处理客户端的消息缓冲队列的容量。10.如权利要求1至9中任一项所述的消息处理方法，其特征在于，所述消息处理方法还包括：若所述消息缓存队列中的消息数量小于等于第一阈值，则消息处理客户端向消息处理服务端发送消息请求。11.如权利要...

【专利技术属性】
技术研发人员：林棋，夏勇，郑东建，肖庆云，段江南，黄景平，曾康，彭亮，
申请(专利权)人：中国电信股份有限公司，
类型：发明
国别省市：北京,11