用于视觉检测的数据处理方法、装置、计算机设备及介质制造方法及图纸

本发明专利技术涉及数据处理技术领域，尤其涉及一种用于视觉检测的数据处理方法、装置、计算机设备及介质。该方法将按照时间顺序采集的待处理数据存储至内存中，根据待处理数据的平均采集时间和内存的实时空间映射得到数据获取速度，将任务管道内各个任务的执行信息输入速度预测模型中，得到任务处理速度，在任务处理速度大于数据获取速度时，为待处理数据创建目标任务管道，将待处理数据调度至目标任务管道进行数据处理，将待处理数据存储于内存中，提高数据的调用效率，便于数据流通，根据数据获取速度和任务处理速度的比较结果，调度任务管道的生成，在保证执行中任务的处理效率的同时，快速响应新的待处理数据，从而有效提高了整体数据处理的效率。数据处理的效率。数据处理的效率。

【技术实现步骤摘要】
用于视觉检测的数据处理方法、装置、计算机设备及介质


[0001]本专利技术涉及数据处理
，尤其涉及一种用于视觉检测的数据处理方法、装置、计算机设备及介质。

技术介绍

[0002]目前，随着人工智能技术的快速发展，在工业中视觉检测的应用场景越来越广泛，而视觉检测过程中产生的数据通常需要进行大量的计算，在待处理数据量较大的情况下，数据处理设备的性能并没有进行相应的升级以适配较大计算资源量的数据处理。
[0003]现有的数据处理方法通常根据待处理数据的优先级为待处理数据分配对应的资源，而待处理数据的优先级通常基于待处理数据所需的计算资源量确定，此类方法在资源分配后，会导致所分配的资源量超限，进而导致部分待处理数据的处理滞后，降低了数据处理效率，并且，在新的待处理数据加入后，会因为资源占用量较大而导致新的待处理数据难以被及时处理，因此，如何提高数据处理的效率成为亟待解决的问题。

技术实现思路

[0004]有鉴于此，本专利技术实施例提供了一种用于视觉检测的数据处理方法、装置、计算机设备及介质，以解决数据处理的效率较低的问题。
[0005]第一方面，本专利技术实施例提供一种用于视觉检测的数据处理方法，所述数据处理方法包括：按照时间顺序采集N个待处理数据，将所述N个待处理数据存储至内存中，N为大于零的整数；获取所述内存的实时空间，计算所述N个待处理数据的平均采集时间，根据预设的映射表将所述实时空间和所述平均采集时间映射为数据获取速度，所述映射表包含所述实时空间和所述平均采集时间与所述数据获取速度的映射关系；将获取到的任务管道内各个任务的执行信息，输入训练好的速度预测模型中，得到预测的任务处理速度；在检测到所述任务处理速度大于所述数据获取速度时，为采集时间在前的待处理数据创建目标任务管道，从所述内存中将所述采集时间在前的待处理数据调度至所述目标任务管道进行数据处理。
[0006]第二方面，本专利技术实施例提供一种用于视觉检测的数据处理装置，所述数据处理装置包括：内存存储模块，用于按照时间顺序采集N个待处理数据，将所述N个待处理数据存储至内存中，N为大于零的整数；速度确定模块，用于获取所述内存的实时空间，计算所述N个待处理数据的平均采集时间，根据预设的映射表将所述实时空间和所述平均采集时间映射为数据获取速度，所述映射表包含所述实时空间和所述平均采集时间与所述数据获取速度的映射关系；
速度预测模块，用于将获取到的任务管道内各个任务的执行信息，输入训练好的速度预测模型中，得到预测的任务处理速度；数据处理模块，用于在检测到所述任务处理速度大于所述数据获取速度时，为采集时间在前的待处理数据创建目标任务管道，从所述内存中将所述采集时间在前的待处理数据调度至所述目标任务管道进行数据处理。
[0007]第三方面，本专利技术实施例提供一种计算机设备，所述计算机设备包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面所述的数据处理方法。
[0008]第四方面，本专利技术实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的数据处理方法。
[0009]本专利技术实施例与现有技术相比存在的有益效果是：按照时间顺序采集N个待处理数据，将N个待处理数据存储至内存中，获取内存的实时空间，计算N个待处理数据的平均采集时间，根据预设的映射表将实时空间和平均采集时间映射为数据获取速度，将获取到的任务管道内各个任务的执行信息，输入训练好的速度预测模型中，得到预测的任务处理速度，在检测到任务处理速度大于数据获取速度时，为采集时间在前的待处理数据创建目标任务管道，从内存中将采集时间在前的待处理数据调度至目标任务管道进行数据处理，将即将进行处理的待处理数据存储于内存中，提高数据的调用效率，便于数据处理过程中的数据流通，同时根据数据获取速度和任务处理速度的比较结果，动态调度任务管道的生成，使得能够在保证正在执行任务的处理效率的同时，快速响应新的待处理数据，从而有效提高了整体数据处理的效率。
附图说明
[0010]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0011]图1是本专利技术实施例一提供的一种用于视觉检测的数据处理方法的一应用环境示意图；图2是本专利技术实施例一提供的一种用于视觉检测的数据处理方法的流程示意图；图3是本专利技术实施例二提供的一种用于视觉检测的数据处理方法的流程示意图；图4是本专利技术实施例三提供的一种用于视觉检测的数据处理装置的结构示意图；图5是本专利技术实施例四提供的一种计算机设备的结构示意图。
具体实施方式
[0012]以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本专利技术实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本专利技术。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本专利技术的描述。
[0013]应当理解，当在本专利技术说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
[0014]还应当理解，在本专利技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
[0015]如在本专利技术说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
[0016]另外，在本专利技术说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
[0017]在本专利技术说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本专利技术的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
[0018]本专利技术实施例可以基于人工智能技术对相关的数据进行获取和处理。其中，人工智能（Artificial I本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于视觉检测的数据处理方法，其特征在于，所述数据处理方法包括：按照时间顺序采集N个待处理数据，将所述N个待处理数据存储至内存中，N为大于零的整数；获取所述内存的实时空间，计算所述N个待处理数据的平均采集时间，根据预设的映射表将所述实时空间和所述平均采集时间映射为数据获取速度，所述映射表包含所述实时空间和所述平均采集时间与所述数据获取速度的映射关系；将获取到的任务管道内各个任务的执行信息，输入训练好的速度预测模型中，得到预测的任务处理速度；在检测到所述任务处理速度大于所述数据获取速度时，为采集时间在前的待处理数据创建目标任务管道，从所述内存中将所述采集时间在前的待处理数据调度至所述目标任务管道进行数据处理。2.根据权利要求1所述的数据处理方法，其特征在于，所述将所述N个待处理数据存储至内存中包括：根据预设的词典确定每个待处理数据的关联数据，对所有关联数据进行统计，得到每个关联数据的调用频率，所述词典包含所述待处理数据与所述关联数据的对应关系；确定所述调用频率大于第一阈值的关联数据为目标数据，按照所述时间顺序，将采集时间在前的待处理数据及其对应的目标数据存储至所述内存中，并获取所述内存的剩余空间；在检测到所述剩余空间大于第二阈值时，返回执行所述按照所述时间顺序，将采集时间在前的待处理数据及其对应的目标数据存储至所述内存中，并获取所述内存的剩余空间的步骤，直至检测到所述剩余空间小于或者等于所述第二阈值，停止采用所述内存进行存储。3.根据权利要求2所述的数据处理方法，其特征在于，在所述停止采用所述内存进行存储之后，还包括：将未被存储的待处理数据和其对应的目标数据存储至预设的硬盘中；相应地，所述从所述内存中将所述采集时间在前的待处理数据调度至所述目标任务管道进行数据处理包括：若所述采集时间在前的待处理数据存储于所述内存，则从所述内存中将所述采集时间在前的待处理数据及其对应的目标数据调度至所述目标任务管道进行数据处理；若所述采集时间在前的待处理数据存储于所述硬盘，则从所述硬盘中将所述采集时间在前的待处理数据及其对应的目标数据调度至所述目标任务管道进行数据处理。4.根据权利要求1所述的数据处理方法，其特征在于，所述将所述N个待处理数据存储至内存中包括：将所述N个待处理数据进行切片处理，得到M个切片数据，M为大于零的整数；根据所述切片处理的顺序，为每个切片数据分配编号，按照所述编号的顺序，将所述M个切片数据依次存储至所述内存中。5.根据权利要求1所述的数据处理方法，其特征在于，所述执行信息包括执行状态，所述执行状态包括未执行、正在执行和执行完成；在所述得到预测的任务处理速度之后，还包括：
在检测到所述任...

【专利技术属性】
技术研发人员：李润杰，刘冰，高锦龙，
申请(专利权)人：深圳市壹倍科技有限公司，
类型：发明
国别省市：