数据处理方法及系统、电子设备和计算机可读存储介质技术方案

本发明专利技术提出了一种数据处理方法及系统、电子设备和计算机可读存储介质，该方法包括：若已收集数据满足

Data processing method and system, electronic equipment and computer-readable storage medium

【技术实现步骤摘要】
数据处理方法及系统、电子设备和计算机可读存储介质
本专利技术涉及数据处理
，尤其涉及一种数据处理方法及系统、电子设备和计算机可读存储介质。
技术介绍
在环境质量检测领域，一般可通过拍摄视频和对视频内容进行识别来判断车辆等移动源对环境质量的影响，为此，往往在大量路段设置拍摄装置，来拍摄移动源的视频文件用于检测。然而，由于待监测的地理空间极大，传输拍摄的视频和对拍摄的视频进行逐个检验所消耗的系统资源和人工成本都相当巨大，不利于环境质量检测工作的开展和进行。因此，如何提升环境质量检测的效率，成为目前亟待解决的技术问题。
技术实现思路
本专利技术实施例提供了一种数据处理方法及系统、电子设备和计算机可读存储介质，旨在解决相关技术中环境质量检测消耗系统资源和人工成本过多的技术问题。第一方面，本专利技术实施例提供了一种数据处理方法，包括：确定已收集数据是否满足，其中，为所述已收集数据在当前预设时间段内的子信息之数量，为所述已收集数据在所述当前预设时间段之前的指定预设时间段内的子信息之数量，每条所述子信息包括检测终端ID和所述检测终端中移动源ID的检测上报时间，为第一预设值；若所述已收集数据满足，对于所述已收集数据内的任一移动源ID，若所述移动源ID对应的所述子信息之数量大于或等于第二预设值，将所述移动源ID对应的所述子信息存储至发送列表；若所述移动源ID对应的所述子信息之数量小于所述第二预设值，当所述子信息中所述移动源ID的检测上报时间位于所述当前预设时间段的第i个计算周期内时，将所述检测上报时间所属的子信息存储至中转列表，其中，当满足时，将所述中转列表添加至发送列表，其中，为所述中转列表中的子信息之数量，为所述已收集数据在所述当前预设时间段之前的指定预设时间段内第i个计算周期中的子信息之数量，为第三预设值，与正相关；当满足时，放弃所述中转列表；若所述已收集数据满足，将所述已收集数据中的所有子信息添加至所述发送列表；向所述发送列表中的检测终端ID发送与所述检测终端ID关联存储的检测上报时间；获得来自所述发送列表中的检测终端ID的、与所述关联存储的检测上报时间对应的视频文件。第二方面，本专利技术实施例提供了一种数据处理系统，包括：多个检测终端，每个检测终端包括摄像模块、处理器和视频缓存模块，所述摄像模块用于拍摄具有移动源的视频文件，所述处理器用于识别所述视频文件是否满足预定缓存条件，并在所述视频文件满足所述预定缓存条件时，令所述视频缓存模块缓存所述视频文件，以及已收集数据发送至服务器，所述已收集数据包括所述视频文件的移动源ID、拍摄所述移动源的检测终端ID和检测上报时间；服务器，与所述多个检测终端连通，用于获取来自所述多个检测终端的所述已收集数据，并基于所述已收集数据执行上述第一方面所述的方法，从所述多个检测终端获取自身所需的视频文件。第三方面，本专利技术实施例提供了一种电子设备，包括：至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被设置为用于执行上述第一方面中任一项所述的方法。第四方面，本专利技术实施例提供了一种计算机可读存储介质，存储有计算机可执行指令，所述计算机可执行指令用于执行上述第一方面中任一项所述的方法流程。以上技术方案，针对相关技术中环境质量检测消耗系统资源和人工成本过多的技术问题，可基于移动源本身是否具有足够检测价值，来筛选移动源对应的子信息，从而获得更为精简、有效的发送列表，最终只检测精简后的发送列表所对应的视频文件，而无需对拍摄的全部视频文件进行检测。由此，大大减少了环境质量检测过程中所需检测的视频文件，减少了对视频文件进行传输和检验所消耗的资源，提升了环境质量检测的效率。附图说明为了更清楚地说明本专利技术实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。图1示出了根据本专利技术的一个实施例的数据处理方法的流程图。具体实施方式为了更好的理解本专利技术的技术方案，下面结合附图对本专利技术实施例进行详细描述。应当明确，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。在本专利技术实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本专利技术。在本专利技术实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。实施例一本专利技术实施例提供了一种用于环境质量检测的数据处理系统，该数据处理系统包括多个检测终端和服务器。其中，每个检测终端包括摄像模块、处理器和视频缓存模块，所述摄像模块用于拍摄具有移动源的视频文件，这里所说的移动源为物理环境中可能对环境产生负面影响的物体，如车辆等。所述处理器用于识别所述视频文件是否满足预定缓存条件，例如，通过处理器对视频文件中的图像进行车辆识别和黑烟识别，当识别出该图像中确有排放黑烟的车辆时，对该图像进行林格曼黑度等级判断，若图像的林格曼黑度等级超过1级，则确定该车辆对环境具有负面影响，认定该视频文件满足预定缓存条件。在所述视频文件满足所述预定缓存条件时，处理器令视频缓存模块缓存所述视频文件，同时，处理器可发送视频文件的移动源ID、拍摄所述移动源的检测终端ID和检测上报时间等已收集数据至服务器。在一种可能的设计中，处理器将已收集数据的每条子信息按照移动源的检测顺序关联存储，这里的子信息即移动源ID和当次检测到该移动源的检测终端ID、检测上报时间。可选地，已收集数据的数据格式如下：移动源ID1，检测终端ID1，t1；移动源ID1，检测终端ID2，t2；移动源ID2，检测终端ID3，t3；移动源ID3，检测终端ID1，t4。在另一种可能的设计中，处理器每获得新的子信息，就在已收集数据中检索该子信息中的移动源ID，若检测到该移动源ID，将新的子信息中的检测终端ID、检测上报时间添加至该移动源ID的历史子信息后。反之，未检测到该移动源ID，将新的子信息添加至已收集数据的最后一行。可选地，已收集数据的数据格式如下：移动源ID1，（检测终端ID1，t1），（检测终端ID2，t2）；移动源ID2，（检测终端ID3，t3）；移动源ID3，（检测终端ID1，t4）。服务器与所述多个检测终端连通，用于获取来自所述多个检测终端的所述已收集数据，并基于所述已收集数据从所述多个检测终端获取自身所需的视频文件。如图1所示，服务器基于所述已收集数据获取自身所需的视频文件的流程包括：步骤102，确定已收集数据是否满足。其中，为所述已收集数据在当前预设时间段内的子信息之数量，为所述已收集数据在所述当前预设时间段本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，包括：/n确定已收集数据是否满足

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：
确定已收集数据是否满足，其中，为所述已收集数据在当前预设时间段内的子信息之数量，为所述已收集数据在所述当前预设时间段之前的指定预设时间段内的子信息之数量，每条所述子信息包括检测终端ID和所述检测终端中移动源ID的检测上报时间，为第一预设值；
若所述已收集数据满足，对于所述已收集数据内的任一移动源ID，
若所述移动源ID对应的所述子信息之数量大于或等于第二预设值，将所述移动源ID对应的所述子信息存储至发送列表，所述第二预设值与所述当前预设时间段正相关；
若所述移动源ID对应的所述子信息之数量小于所述第二预设值，当所述子信息中所述移动源ID的检测上报时间位于所述当前预设时间段的第i个计算周期内时，将所述检测上报时间所属的子信息存储至中转列表，
其中，当满足时，将所述中转列表添加至发送列表，其中，为所述中转列表的子信息之数量，为所述已收集数据在所述当前预设时间段之前的指定预设时间段内第i个计算周期中的子信息之数量，为第三预设值，与正相关；当满足时，放弃所述中转列表；
若所述已收集数据满足，将所述已收集数据中的所有子信息添加至所述发送列表；
向所述发送列表中的检测终端ID发送与所述检测终端ID关联存储的检测上报时间；
获得来自所述发送列表中的检测终端ID的、与所述关联存储的检测上报时间对应的视频文件。


2.根据权利要求1所述的数据处理方法，其特征在于，

为所述已收集数据在所述当前预设时间段的前一个历史预设时间段内的子信息之数量，或者

，其中，为所述已收集数据在第i个历史预设时间段内的子信息之数量，x为历史预设时间段的数量；

为所述已收集数据在所述当前预设时间段的前一个历史预设时间段内第i个计算周期中的子信息之数量，或者

，其中，为所述已收集数据在第j个历史预设时间段内第i个计算周期中的子信息之数量。


3.根据权利要求2所述的数据处理方法，其特征在于，若所述已收集数据满足，还包括：
获取所述当前预设时间段内的多个计算周期，其中，所述多个计算周期各自在时间轴上离散分布且互无交集，所述多个计算周期的并集为所述当前预设时间段。


4.根据权利要求3所述的数据处理方法，其特征在于，
所述当前预设时间段包括第一计算周期和第二计算周期，其中，所述第一...

【专利技术属性】
技术研发人员：张英志，叶峰，陈星光，
申请(专利权)人：智联万维科技有限公司，
类型：发明
国别省市：北京;11