一种流事件的处理方法及装置制造方法及图纸

本发明专利技术涉及一种流事件的处理方法及装置，用于避免发生流事件的溢出和遗漏。该方法为：设计了流队列和数据库的双层缓存池，在捕获到流事件后，先确定所述流事件的事件类型对应的流队列，若所述流队列中没有空闲空间，则将所述流事件保存至所述流队列在数据库中对应的存储空间内，以及在确定满足预设条件时，将所述流事件读取至所述流队列中等待处理，同时，还需要根据流队列的使用情况对流队列的队列长度进行适应性调整；这样，可以在高并发的流事件到达时，快速接收流事件并进行保存，防止了因流队列溢出而造成的流事件的丢失和遗漏，保证了系统的处理性能和处理效率，同时，又可以灵活控制流事件存储空间大小，减少资源浪费。

【技术实现步骤摘要】
一种流事件的处理方法及装置
本专利技术涉及计算机技术，特别涉及一种流事件的处理方法及装置。
技术介绍
目前，实时流事件并发处理方法按照系统架构可以分为基于web架构的网络处理方法和基于操作系统的客户端处理方法。基于web架构的网络处理方法技术比较成熟，通常是通过监听网络端口获取流事件相关信息并进行处理。然而，基于web架构的网络处理方法技术很难处理大数据的实时流事件，以睡眠监测数据为例，其原因如下：大数据的实时显示，要求足够的数据存储空间，即使将睡眠监测数据按时间切片后存储，每个片段的大小也在10M左右。对于基于web架构的网络处理方法而言，其主要是通过浏览器方式进行显示，而浏览器的存储空间一般是在内存中，且实时显示数据的空间大小一般控制在5-10M。因此，若需要显示多个待显示片段，则需要通过浏览器在多个待显示片段之间频繁切换；由于每个待显示片段的数据量较大，因此，会造成系统负荷过大，数据加载不全等问题。进一步的，针对高并发的实时流事件进行处理，要求高效获取流事件并进行分析。而基于web架构的网络处理方法，其事件通信方式取决于底层网络的质量，在高并发流事件的传输过程中，容易导致丢包、本文档来自技高网...

【技术保护点】
1.一种流事件的处理方法，其特征在于，包括：确定捕获的流事件的事件类型，以及确定对应所述流事件的事件类型设置的流队列；确定所述流队列中不存在能够保存所述流事件的空闲空间时，将所述流事件保存至所述流队列在数据库中对应的存储空间内，以及在确定满足预设条件时，将所述流事件保存至所述流队列中等待处理；其中，在所述流队列使用过程中，对所述流队列的使用情况进行监听，根据监听结果对所述流队列的队列长度进行相应调整。

【技术特征摘要】
1.一种流事件的处理方法，其特征在于，包括：确定捕获的流事件的事件类型，以及确定对应所述流事件的事件类型设置的流队列；确定所述流队列中不存在能够保存所述流事件的空闲空间时，将所述流事件保存至所述流队列在数据库中对应的存储空间内，以及在确定满足预设条件时，将所述流事件保存至所述流队列中等待处理；其中，在所述流队列使用过程中，对所述流队列的使用情况进行监听，根据监听结果对所述流队列的队列长度进行相应调整。2.如权利要求1所述的方法，其特征在于，在确定满足预设条件时，将所述流事件保存至所述流队列中等待处理，包括：获知所述流事件被指定为最高处理优先级时，确定满足预设条件，从所述流队列在数据库中对应的存储空间内读取所述流事件，并将所述流事件保存至所述流队列中等待处理；或者，获知所述流队列中已存在能够保存所述流事件的空闲空间，且所述流队列在数据库中对应的存储空间内未保存有其他流事件时，确定满足预设条件，直接将所述流事件保存至所述流队列中等待处理。3.如权利要求1所述的方法，其特征在于，进一步包括：获知所述流队列中已存在能够保存所述流事件的空闲空间，而所述流队列在数据库中对应的存储空间内保存有其他流事件时，从所述流队列在数据库中对应的存储空间内读取所述其他流事件，并将所述其他流事件保存至所述流队列中等待处理。4.如权利要求1、2或3所述的方法，其特征在于，将所述流事件保存至所述流队列中等待处理之后，进一步包括：读取所述流事件，确定所述流事件的事件类型和分片序号；基于所述事件类型确定所述流事件对应的路由通道；基于所述分片序号在所述路由通道中确定相应的解析模块；将所述流事件发往所述解析模块进行处理。5.如权利要求4所述的方法，其特征在于，进一步包括：针对各个解析模块进行监听，获得监听结果；基于监听结果，每确定一个解析模块生成流事件的处理结果时，选取一个视窗，...

【专利技术属性】
技术研发人员：方若洁，常耀斌，吴娜，许利群，
申请(专利权)人：中国移动通信有限公司研究院，中国移动通信集团公司，
类型：发明
国别省市：北京,11