一种基于高利用率非阻断队列处理IOT设备数据的方法技术

本发明专利技术公开了一种基于高利用率非阻断队列处理IOT设备数据的方法，涉及IOT设备数据处理，根据不同的业务场景生成业务消息；根据所述业务消息的消息类型查询与消息类型对应的执行指标，并根据所述执行指标查询业务消息的消息优先级，并根据所述消息优先级将业务消息调度到指定的队列中；根据所述消息类型对业务消息按优先级进行消息分发，以将所述业务消息分发至消费端；获取所述消息分发的执行结果，并根据所述执行结果执行业务消息的后处理任务。本发明专利技术通过消息类型与执行指标的相结合用于协调各消息任务执行的顺序，并通过动态调整各任务的执行队列降低阻塞风险，从而达到了提高整体消息消费效率的目的。

【技术实现步骤摘要】

本专利技术涉及iot设备数据处理，更具体地说，它涉及一种基于高利用率非阻断队列处理iot设备数据的方法。

技术介绍

1、iot设备数据接口承载着大量设备数据，其中包含设备状态数据、运行数据、日志数据、统计数据等。iot平台随着业务量上升，设备数据接口的压力上升明显。目前iot平台普遍的做法是使用队列对数据生产端和消费者模块进行解耦，以避免接口阻塞。但如果消费者模块的处理能力跟不上，则非常容易在队列中产生消息积压，严重的甚至会产生雪崩效应。

2、同时，在消息消费过程中，由于不同类型和场景的设备信息消费会存在一定的时效性问题，用传统的方式通过场景划分队列可能会导致部分消息消费速率快，使得队列空闲利用率不高；而部分队列消费速率慢，使得消息挤压甚至阻断。基于此背景下，需寻求一种更高效且非阻断形式的消息消费机制来优化整个iot设备消息的处理场景，保障系统可用性的同时提高整体数据的消费性能。

技术实现思路

1、本专利技术要解决的技术问题是针对现有技术的不足，提供一种基于高利用率非阻断队列处理iot设备数据的方本文档来自技高网...

【技术保护点】

1.一种基于高利用率非阻断队列处理IOT设备数据的方法，其特征在于，该方法包括以下步骤：

2.根据权利要求1所述的一种基于高利用率非阻断队列处理IOT设备数据的方法，其特征在于，在步骤二中，若查询不到所述业务消息所对应的消息优先级，则将所述业务消息调度到中优先级队列；若查询到所述业务消息所对应的消息优先级，则将所述业务消息调度到指定优先级的队列中。

3.根据权利要求2所述的一种基于高利用率非阻断队列处理IOT设备数据的方法，其特征在于，所述队列包括高优先级队列、中优先级队列、低优先级队列和慢速处理队列。

4.根据权利要求1所述的一种基于高利用率非阻断队...

【技术特征摘要】

1.一种基于高利用率非阻断队列处理iot设备数据的方法，其特征在于，该方法包括以下步骤：

2.根据权利要求1所述的一种基于高利用率非阻断队列处理iot设备数据的方法，其特征在于，在步骤二中，若查询不到所述业务消息所对应的消息优先级，则将所述业务消息调度到中优先级队列；若查询到所述业务消息所对应的消息优先级，则将所述业务消息调度到指定优先级的队列中。

3.根据权利要求2所述的一种基于高利用率非阻断队列处理iot设备数据的方法，其特征在于，所述队列包括高优先级队列、中优先级队列、低优先级队列和慢速处理队列。

4.根据权利要求1所述的一种基于高利用率非阻断队列处理iot设备数据的方法，其特征在于，在步骤三中，位于同一队列中的所述业务消息按先进先出的顺序进行消息分发。

5.根据权利要求1或4所述的一种基于高利用率非阻断队列处理iot设备数据的方法，其特征在于，在进行消息分发时，首先将所述队列中的业务消息调度到空闲队列工作线程中，然后再将所述业务消息分发至消费端。

6.根据权利要求1所述的一种基于高利用率非阻...

【专利技术属性】
技术研发人员：陈廉，陈驹远，张皓，杨光，谭添戈，
申请(专利权)人：广西东信数建信息科技有限公司，
类型：发明
国别省市：