数据处理方法、装置以及芯片制造方法及图纸

技术编号:28838124 阅读:26 留言:0更新日期:2021-06-11 23:35
本公开涉及计算机技术领域,提供了一种数据处理方法、装置以及芯片。数据处理方法,其特征在于,包括:基于第一矩阵的第一参数和第二矩阵的第二参数,确定结果矩阵的第三参数;基于所述第三参数和目标分块参数,对所述结果矩阵进行分块处理,得到多个矩阵块;每个所述矩阵块包括至少一个数据操作块,每个所述数据操作块包括至少一个元素;所述目标分块参数基于各所述数据操作块对应的私有存储单元的存储容量确定;将各所述数据操作块对应的操作数据,分配至对应的计算单元执行。本公开数据处理方法充分利用芯片系统的存储层次,提高芯片实现矩阵运算的并行计算性能。

【技术实现步骤摘要】
数据处理方法、装置以及芯片
本公开涉及计算机
,具体涉及一种数据处理方法、装置以及芯片。
技术介绍
随着计算机硬件的不断提升,计算机性能越来越强大,高性能计算被广泛应用于深度学习、图像处理和数据信号处理等任务中,对于例如矩阵运算等并行任务的优化,是高性能计算领域最为重要的研究方向之一。相关技术中,芯片系统在实现矩阵运算时,并未充分利用芯片存储层次,导致矩阵运算等并行任务的运算效率低、速度慢。
技术实现思路
为解决相关技术的芯片系统进行矩阵运算时效率较低的技术问题,本公开实施方式提供了一种数据处理方法、装置以及芯片。第一方面,本公开实施方式提供了一种数据处理方法,包括:基于第一矩阵的第一参数和第二矩阵的第二参数,确定结果矩阵的第三参数;基于所述第三参数和目标分块参数,对所述结果矩阵进行分块处理,得到多个矩阵块;每个所述矩阵块包括至少一个数据操作块,每个所述数据操作块包括至少一个元素;所述目标分块参数基于各所述数据操作块对应的私有存储单元的存储容量确定;将各所述数据操作块对应的操作数据,分配本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,包括:/n基于第一矩阵的第一参数和第二矩阵的第二参数,确定结果矩阵的第三参数;/n基于所述第三参数和目标分块参数,对所述结果矩阵进行分块处理,得到多个矩阵块;每个所述矩阵块包括至少一个数据操作块,每个所述数据操作块包括至少一个元素;所述目标分块参数基于各所述数据操作块对应的私有存储单元的存储容量确定;/n将各所述数据操作块对应的操作数据,分配至对应的计算单元执行。/n

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:
基于第一矩阵的第一参数和第二矩阵的第二参数,确定结果矩阵的第三参数;
基于所述第三参数和目标分块参数,对所述结果矩阵进行分块处理,得到多个矩阵块;每个所述矩阵块包括至少一个数据操作块,每个所述数据操作块包括至少一个元素;所述目标分块参数基于各所述数据操作块对应的私有存储单元的存储容量确定;
将各所述数据操作块对应的操作数据,分配至对应的计算单元执行。


2.根据权利要求1所述的数据处理方法,其特征在于,还包括:
获取每个所述矩阵块中各个所述数据操作块对应的操作数据;
将所有操作数据存储至所述矩阵块对应的共享存储单元,并将各数据操作块对应的操作数据存储至对应的私有存储单元。


3.根据权利要求1所述的数据处理方法,其特征在于,还包括预先确定所述目标分块参数,所述预先确定所述目标分块参数包括:
基于所述结果矩阵中每个元素对应的所述操作数据量和所述数据操作块对应的私有存储单元的存储容量,确定所述私有存储单元的最大存储数量;
基于所述最大存储数量和所述第三参数,确定分块参数集合;
从所述分块参数集合中确定所述目标分块参数。


4.根据权利要求3所述的数据处理方法,其特征在于,从所述分块参数集合中确定所述目标分块参数,包括:
将所述分块参数集合中,包括元素数量最多的分块参数确定为所述目标分块参数。


5.根据权利要求1所述的数据处理方法,其特征在于,还包括:
获取所述结果矩阵对应的所有操作数据,并将所有操作数据存储至全局存储单元。

【专利技术属性】
技术研发人员:李秀红颜深根
申请(专利权)人:上海商汤智能科技有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1