数据处理方法及装置制造方法及图纸

本公开提供一种数据处理方法及装置，涉及数据处理领域，能够解决数据处理效率较低的问题。具体技术方案为：接收数据信息；确定对数据信息的处理动作；根据预设处理动作处理数据信息；向目标相邻处理单元节点发送数据包，数据包中包括：处理动作标识和目标数据，处理动作标识指示目标相邻处理单元节点对数据包中的目标数据的处理动作，目标数据包括：数据信息，或者，处理后的数据信息。本发明专利技术由于将每个处理单元节点与其相邻的处理单元节点相连接，在当前处理单元节点根据预设处理动作处理数据信息后，还会确定目标相邻处理单元节点的处理动作，从而通过该种处理方式可以将每个处理单元节点的处理能力充分发挥出来，提升处理效率。

Data processing method and device

【技术实现步骤摘要】
数据处理方法及装置
本公开涉及数据处理领域，尤其涉及数据处理方法及装置。
技术介绍
基于处理单元(ProcessElement，简称为：PE)的编码方式是目前比较常见的一种编码实现方式，依据这种方式进行编码时，可以通过增加PE的数量或者增加编码器(英文：Encoder)核心数量的方式来提高编码能力，但这种方式虽然能够扩展PE的编码处理能力，但各个PE之间是独立的，从而不能将多个PE的处理能力充分发挥出来，使得数据处理效率较低。
技术实现思路
本公开实施例提供一种数据处理方法及装置，能够解决数据处理效率较低的问题。所述技术方案如下：根据本公开实施例的第一方面，提供一种数据处理方法，所述方法应用于编码器网络中的处理单元节点，所述编码器网络包括N×M个处理单元节点，每个处理单元节点与其相邻的处理单元节点相连接，N为大于1的正整数，M为大于1的正整数：所述方法包括：接收数据信息；确定对所述数据信息的处理动作；根据所述处理动作处理所述数据信息；向目标相邻处理单元节点发送数据包，所述数据包中包括：本文档来自技高网...

【技术保护点】
1.一种数据处理方法，其特征在于，所述方法应用于编码器网络中的处理单元节点，所述编码器网络包括N×M个处理单元节点，每个处理单元节点与其相邻的处理单元节点相连接，N为大于1的正整数，M为大于1的正整数；所述方法包括：/n接收数据信息；/n确定对所述数据信息的处理动作；/n根据所述处理动作处理所述数据信息；/n向目标相邻处理单元节点发送数据包，所述数据包中包括：处理动作标识和目标数据，所述处理动作标识指示所述目标相邻处理单元节点对所述数据包中的目标数据的处理动作，所述目标数据包括：所述数据信息，或者，处理后的所述数据信息。/n

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法应用于编码器网络中的处理单元节点，所述编码器网络包括N×M个处理单元节点，每个处理单元节点与其相邻的处理单元节点相连接，N为大于1的正整数，M为大于1的正整数；所述方法包括：
接收数据信息；
确定对所述数据信息的处理动作；
根据所述处理动作处理所述数据信息；
向目标相邻处理单元节点发送数据包，所述数据包中包括：处理动作标识和目标数据，所述处理动作标识指示所述目标相邻处理单元节点对所述数据包中的目标数据的处理动作，所述目标数据包括：所述数据信息，或者，处理后的所述数据信息。


2.根据权利要求1所述的方法，其特征在于，所述确定对所述数据信息的处理动作，包括：
判断自身是否有空闲的编码器核心；
如果自身有空闲的编码器核心，确定对所述数据信息的处理动作为按照预设处理方式对所述数据信息进行处理；
如果自身没有空闲的编码器核心，确定对所述数据信息的处理动作为寻找可用的目标相邻处理单元节点，以让所述目标相邻处理单元节点按照所述预设处理方式对所述数据信息进行处理。


3.根据权利要求2所述的方法，其特征在于，所述确定对所述数据信息的处理动作为寻找可用的目标相邻处理单元节点，所述根据所述处理动作处理所述数据信息，包括：
获取所有的相邻处理单元节点的编码器核心使用率；
根据所述编码器核心使用率检测各个相邻处理单元节点中是否有空闲的编码器核心：
当检测到相邻处理单元节点有空闲的编码器核心，则确定所述有空闲的编码器核心的相邻处理单元节点为所述目标相邻处理单元节点；
生成所述数据包，所述数据包中包括的所述处理动作标识指示所述目标相邻处理单元节点对所述目标数据的处理动作为按照所述预设处理方式对所述目标数据进行处理，所述数据包中包括的所述目标数据为所述数据信息；
当检测到所有相邻处理单元节点中均无空闲的编码器核心，按照第一预设规则从所有相邻处理单元节点中选择所述目标相邻处理单元节点；
生成所述数据包，所述数据包中包括的所述处理动作标识指示所述目标相邻处理单元节点对所述目标数据的处理动作为寻找可用的目标相邻处理单元节点，所述数据包中包括的所述目标数据为所述数据信息；以让所述目标相邻处理单元节点重新执行上述寻找可用的目标相邻处理单元节点的步骤。


4.根据权利要求3所述的方法，其特征在于，所述当检测到相邻处理单元节点有空闲的编码器核心，则确定所述有空闲的编码器核心的相邻处理单元节点为所述目标相邻处理单元节点，包括：
若检测到多个相邻处理单元节点均有空闲的编码器核心，则确定编码器核心使用率最小的相邻处理单元节点为所述目标相邻处理单元节点；
若检测到编码器核心使用率最小的相邻处理单元节点有多个，则根据第一预设规则选择其中一个为所述目标相邻处理单元节点。


5.根据权利要求3所述的方法，其特征在于，所述获取所有相邻处理单元节点的编码器核心使用率，包括：
接收所有相邻处理单元节点的编码器核心使用率；
将所述所有相邻处理单元节点的编码器核心使用率保存至本地数据库；
从所述本地数据库中获取所有相邻处理单元节点的编码器核心使用率。


6.根据权利要求2所述的方法，其特征在于，确定对所述数据信息的处理动作为按照预设处理方式对所述数据信息进行处理，所述根据所述处理动作处理所述数据信息，包括：
将所述数据信息发送至本地的空闲编码器核心；
控制所述本地的空闲编码器核心根据所述预设处理方式对所述数据信息进行处理；
根据第二预设规则从所有相邻处理单元节点中选择所述目标相邻处理单元节点；
生成所述数据包，所述数据包中包括的所述处理动作标识指示所述目标相邻处理单元节点对所述目标数据的处理动作为转发，所述数据包中包括的所述目标数据为处理后的所述数据信息。


7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
更新自身的编码器核心使用率；
并将更新后的编码器核心使用率发送给相邻处理单元节点。


8.根据权利要求3或4所述的方法，其特征在于，所述第一预设规则包括：
选择编号最小的相邻处理单元节点为所述目标相邻处理单元节点；
或者，
选择编号最大的相邻处理单元节点为所述目标相邻处理单元节点；
或者，
随机选择其中一个相邻处理单元节点为所述目标相邻处理单元节点。


9.根据权利要求6或7所述的方法，其特征在于，所述第二预设规则包括：
计算当前处理单元节点与数据输出节点之间的最优路径；
确定在所述最优路径中与所述当前处理单元节点相邻的处理单元节点为所述目标相邻处理单元节点。


10.一种数据处理方法，其特征...

【专利技术属性】
技术研发人员：马传文，范志刚，卢涛，
申请(专利权)人：西安万像电子科技有限公司，
类型：发明
国别省市：陕西;61