一种数据处理方法和装置制造方法及图纸

本申请公开一种数据处理方法和装置，该方法包括：获取待处理的至少两个数据对象，分别确定各个数据对象中的有效数据，和有效数据在相应数据对象中所对应的存储位置信息，确定不同数据对象之间的存储位置对应的有效数据，得到位置对应的有效数据所形成的数据组，之后对得到的数据组执行对应的数据处理，以完成对所述至少两个数据对象的处理。述至少两个数据对象的处理。述至少两个数据对象的处理。

【技术实现步骤摘要】
一种数据处理方法和装置


[0001]本申请属于人工智能
，尤其涉及一种数据处理方法和装置。

技术介绍

[0002]在深度神经网络的模型训练中，常常会对权重进行量化与裁剪操作，导致权重会产生大量的0值，同时，因为ReLU操作(激活操作)，特征图也会产生大量的0值，此种网络中的大量0值现象被称为稀疏化。目前，如何基于数据对象中数据的稀疏化特性，提升对其进行处理时的计算性能，成为本领域一个值得研究的问题。

技术实现思路

[0003]为此，本申请公开如下技术方案：
[0004]一种数据处理方法，所述方法包括：
[0005]获取待处理的至少两个数据对象；
[0006]分别确定各个数据对象中的有效数据，和所述有效数据在相应数据对象中所对应的存储位置信息；
[0007]确定不同数据对象之间的存储位置对应的有效数据，得到位置对应的有效数据所形成的数据组；
[0008]对所述数据组执行对应的数据处理，以完成对所述至少两个数据对象的处理。
[0009]可选的，所述分别确定各个数据对象中的有效数据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，所述方法包括：获取待处理的至少两个数据对象；分别确定各个数据对象中的有效数据，和所述有效数据在相应数据对象中所对应的存储位置信息；确定不同数据对象之间的存储位置对应的有效数据，得到位置对应的有效数据所形成的数据组；对所述数据组执行对应的数据处理，以完成对所述至少两个数据对象的处理。2.根据权利要求1所述的方法，所述分别确定各个数据对象中的有效数据，和有效数据在相应数据对象中所对应的存储位置信息，包括：依次确定所述数据对象中的有效值，得到有效值序列，所述有效值序列中的有效值作为所述数据对象中的有效数据；确定所述有效值序列中各个有效值分别在所述数据对象中所对应的存储位置信息，得到位置信息序列。3.根据权利要求2所述的方法，所述确定所述有效值序列中各个有效值分别在所述数据对象中所对应的存储位置信息，得到位置信息序列，包括：依次采用对应的位掩码表示所述数据对象中的各个值是否为有效值，得到所述数据对象对应的位掩码序列；识别所述位掩码序列中表示有效值的各个第一目标位掩码；依次确定表示有效值的各个第一目标位掩码在所述位掩码序列中分别对应的存储位置，得到位掩码位置序列，作为所述位置信息序列。4.根据权利要求1所述的方法，所述确定不同数据对象之间的存储位置对应的有效数据，得到位置对应的有效数据所形成的数据组，包括：确定不同的位置信息序列中，取值相同的目标位置信息；其中，一个数据对象对应一个位置信息序列，每一位置信息序列为：相应数据对象中的各个有效数据在该数据对象中所对应的存储位置信息形成的序列；确定每一目标位置信息在不同数据对象中分别对应的目标数据，将每一目标位置信息在不同数据对...

【专利技术属性】
技术研发人员：陈勇，
申请(专利权)人：鼎道智芯上海半导体有限公司，
类型：发明
国别省市：