数据控制方法、数据处理方法及相关设备技术

技术编号:35241167 阅读:36 留言:0更新日期:2022-10-19 09:46
本申请涉及数据处理技术领域,提供一种数据控制方法、数据处理方法、电子设备及存储介质,所述数据控制方法运行于引擎设备中,所述方法包括:获取待处理数据;接收多个加速器设备上报的运行情况;根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备;根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分,得到多个子待处理数据;将每个子待处理数据发送至对应的目标加速器设备进行处理。本申请提供的方法提高了数据处理的效率。提高了数据处理的效率。提高了数据处理的效率。

【技术实现步骤摘要】
数据控制方法、数据处理方法及相关设备


[0001]本申请涉及数据处理
,尤其涉及一种数据控制方法、数据处理方法、电子设备及存储介质。

技术介绍

[0002]在人工智能领域,尤其是人工神经网络、机器视觉和机器学习等领域,往往采用加速器设备来进行加速。加速器设备是一类专门的硬件加速器设备或计算机系统旨在加速人工智能的应用,如人工智能(AI)加速器设备。目前在人工智能应用中使用入门级的网络拓扑时,如ResNet和MobileNet等网络拓扑,加速器设备可以很好地进行加速,但是面对更复杂的网络拓扑时,加速器设备往往不能满足加速的需求,加速效率较低。

技术实现思路

[0003]有鉴于此,本申请的主要目的在于提供一种数据控制方法、数据处理方法、电子设备及存储介质,旨在解决如何提高数据处理效率的技术问题。
[0004]本申请的第一方面提供一种数据控制方法,运行于引擎设备中,所述数据控制方法包括:
[0005]获取待处理数据;
[0006]接收多个加速器设备上报的运行情况;
[0007]根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备;
[0008]根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分,得到多个子待处理数据;
[0009]将每个子待处理数据发送至对应的目标加速器设备进行处理。
[0010]根据本申请的一个可选的实施例,所述根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备包括:<br/>[0011]根据所述运行情况计算每个加速器设备的负载量;
[0012]基于所述负载量,在所述多个加速器设备中确定多个待选加速器设备;
[0013]根据所述待处理数据在所述多个待选加速器设备中,确定多个目标加速器设备。
[0014]根据本申请的一个可选的实施例,所述根据所述待处理数据在所述多个待选加速器设备中,确定多个目标加速器设备包括:
[0015]基于所述待处理数据,计算加速量;
[0016]根据所述加速量在所述多个待选加速器设备中,确定多个目标加速器设备。
[0017]根据本申请的一个可选的实施例,所述根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分,得到处理数据包括:
[0018]获取每个目标加速器设备的预设负载阈值;
[0019]根据所述每个目标加速器设备的运行情况和对应的所述预设负载阈值计算得到
目标加速量;
[0020]根据所述目标加速量对所述待处理数据进行切分,得到多个子待处理数据。
[0021]根据本申请的一个可选的实施例,所述根据所述目标加速量对所述待处理数据进行切分,得到多个子待处理数据包括:
[0022]获取所述待处理数据的数据标签;
[0023]根据所述目标加速量和所述数据标签对所述待处理数据进行切分,得到多个子待处理数据。
[0024]根据本申请的一个可选的实施例,所述方法还包括:
[0025]当根据所述待处理数据和所述运行情况在所述多个加速器设备中无法确定多个目标加速器设备时,在所述引擎设备中对所述待处理数据进行处理。
[0026]根据本申请的一个可选的实施例,所述将每个子待处理数据发送至对应的目标加速器设备进行处理之后,所述方法还包括:
[0027]获取所述多个目标加速器设备对所述多个子待处理数据的处理结果;
[0028]根据所述处理结果生成所述待处理数据的处理报告。
[0029]本申请的第二方面提供一种数据处理方法,运行于加速器设备中,所述数据控制方法包括:
[0030]响应于引擎设备发送的数据处理指令,判断是否满足所述数据处理指令对应的计算要求;
[0031]当不满足所述计算要求时,上报所述加速器设备的运行情况给所述引擎设备;
[0032]当满足所述计算要求时,对所述数据处理指令对应的数据进行加速,并将加速结果发送至所述引擎设备,所述引擎设备用于执行如上所述的数据控制方法。
[0033]本申请的第三方面提供一种电子设备,所述电子设备包括:
[0034]存储器,用于存储至少一个指令;
[0035]处理器,用于执行所述至少一个指令时实现如上所述的数据控制方法或如上所述的数据处理方法。
[0036]本申请的第四方面提供一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一个指令,所述至少一个指令被处理器执行时实现如上所述的数据控制方法或如上所述的数据处理方法。
[0037]由以上技术方案可以看出,本申请通过获取待处理数据和多个加速器设备的运行情况,并根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备;接着根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分,得到多个子待处理数据;最后将每个子待处理数据发送至对应的目标加速器设备进行处理,通过根据多个目标加速器设备的运行情况对所述待处理数据进行切分,确定每个目标加速器设备能处理完对应的子待处理数据,提高加速的效率。
附图说明
[0038]图1为本申请实施例的一种数据控制方法的示意流程图;
[0039]图2为本申请实施例的待处理数据切分得到多个子待处理数据的场景示意图;
[0040]图3为本申请实施例的一种数据处理方法的示意流程图;
[0041]图4为本申请实施例提供的一种电子设备的结构示意性框图。
具体实施方式
[0042]下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
[0043]附图中所示的示意流程图仅是示例说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解、组合或部分合并,因此实际执行的顺序有可能根据实际情况改变。
[0044]本申请实施例提供一种数据控制方法、数据处理方法、电子设备及计算机可读存储介质。
[0045]下面结合附图,对本申请的一些实施方式作详细说明。在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。
[0046]请参阅图1,图1是本申请实施例提供的一种数据控制方法的示意流程图。
[0047]如图1所示,所述数据控制方法具体包括步骤S11至S15,根据不同的需求,该示意流程图中步骤的顺序可以改变,某些可以省略。该数据控制方法运行于引擎设备中,所述引擎设备包括推论引擎。
[0048]步骤S11、获取待处理数据。
[0049]获取待处理数据,所述待处理数据可以包括影像数据和/或文档数据。
[0050]在一些实施方式中,所述引擎设备可以和目标装置建立通信,以接受所述目标装置发送的资料数据,对所本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据控制方法,运行于引擎设备中,其特征在于,所述数据控制方法包括:获取待处理数据;接收多个加速器设备上报的运行情况;根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备;根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分,得到多个子待处理数据;将每个子待处理数据发送至对应的目标加速器设备进行处理。2.根据权利要求1所述的数据控制方法,其特征在于,所述根据所述待处理数据和所述运行情况在所述多个加速器设备中确定多个目标加速器设备包括:根据所述运行情况计算每个加速器设备的负载量;基于所述负载量,在所述多个加速器设备中确定多个待选加速器设备;根据所述待处理数据在所述多个待选加速器设备中确定多个目标加速器设备。3.根据权利要求2所述的数据控制方法,其特征在于,所述根据所述待处理数据在所述多个待选加速器设备中确定多个目标加速器设备包括:基于所述待处理数据计算加速量;根据所述加速量在所述多个待选加速器设备中确定多个目标加速器设备。4.根据权利要求1所述的数据控制方法,其特征在于,所述根据所述多个目标加速器设备的运行情况对所述待处理数据进行切分,得到多个子待处理数据包括:获取每个目标加速器设备的预设负载阈值;根据所述每个目标加速器设备的运行情况和对应的所述预设负载阈值计算得到目标加速量;根据所述目标加速量对所述待处理数据进行切分,得到多个子待处理数据。5.根据权利要求4所述的数据控制方法,其特征在于,所述根据所述目标加速量对所述待处理数据进行切分,得到多个子待处理数据包括:获取所述待处理数据的数据标签;...

【专利技术属性】
技术研发人员:陈文瑞
申请(专利权)人:鸿海精密工业股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1