数据处理方法、装置及相关产品制造方法及图纸

技术编号:24330982 阅读:73 留言:0更新日期:2020-05-29 19:35
本申请涉及一种数据处理方法、装置及相关产品,传输电路根据内部或者外部设备发送的携带第一类型标志位和第二类型标志位的数据操作信号,对存储器中的待操作的数据执行对应的操作,并得到所需的输入数据。在本实施例中,由于数据操作信号携带第一类型标志位和第二类型标志位,传输电路可以在接收到该数据操作信号后,根据其中的数据操作信号的第一类型标志位和第二类型标志位判断该数据操作信号的具体类型,然后对存储器中的待操作的数据执行对应的操作。这样,根据数据操作信号的类型标志位先进行分类可以快速定位到对应的操作,简化了数据访问逻辑,提高了数据访问效率,大大提高了机器学习芯片在数据访问时的访问速度。

Data processing methods, devices and related products

【技术实现步骤摘要】
数据处理方法、装置及相关产品
本申请涉及信息处理
,特别是涉及一种数据处理方法、装置及相关产品。
技术介绍
随着信息技术的不断发展和日益增长的需求,人们对数据访问和数据处理的需求越来越高,随之对一些处理数据和访问数据的处理器的要求也越来越严格。以一种通用处理器为例,多个通用处理器核(例如,CPU核)构成的多核处理器,以其强大的并行计算能力,成为一种主流。但是随着目前人工神经网络的不断发展,越来越多架构的机器学习芯片逐渐问世,这些机器学习芯片在运行中需要根据指令来进行数据访问或者处理共享存储中的数据。在数据访问或者共享存储数据较多时,机器学习芯片的指令逐渐变得复杂,进而影响通过指令读取共享存储中的速度,导致神经元数据处理效率低下。因此,如何提高机器学习芯片在数据访问时的访问速度,成为当前技术人员亟待解决的技术问题。
技术实现思路
基于此,有必要针对上述在数据访问或者共享存储数据较多时,如何提高机器学习芯片在数据访问时访问速度的技术问题,提供一种数据处理方法、装置及相关产品。第一方面,本专利技术实施例提供一种数据处理方法,所述方法包括:接收内部或者外部设备发送的数据操作信号,所述数据操作信号包括操作域和操作码,所述操作码包括第一类型标志位,所述操作域包括第二类型标志位,所述第一类型标志位用于表征所述数据操作信号是否I/O指令,所述第二类型标志位用于表征所述数据操作信号是否为所述I/O指令中的广播或者多播指令;根据所述数据操作信号对存储器中的待操作的数据执行对应的操作,得到所需的输入数据。在其中一个实施例中,所述操作域还包括数据接收标志位,所述数据接收标志位用于表征接收所述输入数据的装置或者处理电路。。在其中一个实施例中,所述数据接收标志位的个数表征能够与所述存储器进行交互的装置的个数或者处理电路的个数。在其中一个实施例中,所述操作域还包括待操作的数据的信息;所述待操作的数据的信息包括所述待操作的数据在所述存储器中的源地址、待操作的数据长度、以及操作数据后的数据返回地址;所述根据所述数据操作信号对存储器中的待操作的数据执行对应的操作,得到所需的输入数据,包括:自所述源地址开始读取所述存储器,获取满足所述数据长度的输入数据;根据所述数据接收标志位,确定接收输入数据的装置或者处理电路;按照所述数据返回地址,将所述输入数据返回至所述装置或者处理电路中的所述数据返回地址对应的存储空间。在其中一个实施例中,所述装置包括至少一个机器学习单元,每个机器学习单元包括主处理电路和多个从处理电路。在其中一个实施例中,所述操作域还包括跳转子操作域,所述跳转子操作域包括跳转步长以及每次跳转后所操作的数据长度;所述自所述源地址开始读取所述存储器,获取满足所述数据长度的输入数据,包括:自所述源地址开始读取所述存储器,根据当前次跳转后的跳转数据长度获取第一跳转数据;获取所述跳转数据的最后一个地址,并根据所述跳转步长从所述最后一个地址跳转至目标跳转地址;自所述目标跳转地址开始,根据跳转后的跳转数据长度获取第二跳转数据,直至每次跳转后得到的跳转数据的长度满足所述数据长度为止。在其中一个实施例中,所述跳转子操作域包括stride操作域和/或segment操作域;所述stride操作域用于表征所述数据操作信号每次的跳转步长;所述segment操作域用于表征预设的所述数据操作信号每次的分割大小。在其中一个实施例中,所述操作域还包括功能标志位,用于表征对所读取的数据进行的处理操作。在其中一个实施例中,所述方法还包括:若所述第一类型标志位的值为I/O,则确定所述数据操作信号为I/O指令;若所述第二类型标志位的值为1,则确定所述数据操作信号为所述I/O指令中的广播或者多播指令。在其中一个实施例中,所述接收内部或者外部设备发送的数据操作信号,包括:对所述数据操作信号进行解析,以得到所述数据操作信号的类型标志位以及待操作的数据的信息;依照指令队列执行所述解析的数据操作信号;所述指令队列用于表征所述数据操作信号的执行顺序。在其中一个实施例中,在依照指令队列执行所述解析的数据操作信号之前,所述方法还包括:判断相邻的所述解析的数据操作信号的依赖关系,得到判断结果;所述依赖关系表征第s个数据操作信号与所述第s个数据操作信号之前的第s-1个数据操作信号是否存在关联关系;若所述判断结果为所述第s个数据操作信号与所述第s-1个数据操作信号存在依赖关系,缓存所述第s个数据操作信号,在所述第s-1个数据操作信号执行完毕后,提取所述第s个数据操作信号。在其中一个实施例中,所述判断相邻的所述解析的数据操作信号的依赖关系,包括:分别获取依据所述第s个数据操作信号提取所述第s个数据操作信号中所需数据的第一存储地址区间,和依据所述第s-1个数据操作信号提取所述第s-1个数据操作信号中所需数据的第零存储地址区间;若所述第一存储地址区间与所述第零存储地址区间具有重叠的区域,确定所述第s个数据操作信号与所述第s-1个数据操作信号具有依赖关系;若所述第一存储地址区间与所述第零存储地址区间不具有重叠的区域,确定所述第s个数据操作信号与所述第s-1个数据操作信号不具有依赖关系。第二方面,本专利技术实施例提供一种数据处理装置,包括处理器和存储器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:接收内部或者外部设备发送的数据操作信号,所述数据操作信号包括操作域和操作码,所述操作码包括第一类型标志位,所述操作域包括第二类型标志位,所述第一类型标志位用于表征所述数据操作信号是否I/O指令,所述第二类型标志位用于表征所述数据操作信号是否为所述I/O指令中的广播或者多播指令;根据所述数据操作信号对存储器中的待操作的数据执行对应的操作,得到所需的输入数据。第三方面,本专利技术实施例提供一种组合处理装置,所述组合处理装置包括如上第二方面实施例所述的数据处理装置、通用互联接口和除所述数据处理装置以外的其它处理装置;所述数据处理装置与所述其它处理装置进行交互。在其中一个实施例中,所述装置还包括:存储装置,所述存储装置分别与所述数据处理装置和所述其它处理装置连接,用于保存所述数据处理装置和所述其它处理装置的数据。第四方面,本专利技术实施例提供一种机器学习芯片,所述机器学习芯片包括如上第三方面实施例提供的组合处理装置。第五方面,本专利技术实施例提供一种机器学习芯片封装结构,所述机器学习芯片封装结构包括如上第四方面实施例所述的机器学习芯片。第六方面,本专利技术实施例提供一种板卡,所述板卡包括如上第五方面实施所述的机器学习芯片封装结构。第七方面,本专利技术实施例提供一种电子设备,所述电子设备包括如上第六方面所述的板卡。本申请提供一种数据处理方法、装置及相关产品,传输电路根据内部或者外部设备发送的携带第一类型标志位和第二类型标志本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,所述方法包括:/n接收内部或者外部设备发送的数据操作信号,所述数据操作信号包括操作域和操作码,所述操作码包括第一类型标志位,所述操作域包括第二类型标志位,所述第一类型标志位用于表征所述数据操作信号是否I/O指令,所述第二类型标志位用于表征所述数据操作信号是否为所述I/O指令中的广播或者多播指令;/n根据所述数据操作信号对存储器中的待操作的数据执行对应的操作,得到所需的输入数据。/n

【技术特征摘要】
1.一种数据处理方法,其特征在于,所述方法包括:
接收内部或者外部设备发送的数据操作信号,所述数据操作信号包括操作域和操作码,所述操作码包括第一类型标志位,所述操作域包括第二类型标志位,所述第一类型标志位用于表征所述数据操作信号是否I/O指令,所述第二类型标志位用于表征所述数据操作信号是否为所述I/O指令中的广播或者多播指令;
根据所述数据操作信号对存储器中的待操作的数据执行对应的操作,得到所需的输入数据。


2.根据权利要求1所述的方法,其特征在于,所述操作域还包括数据接收标志位,所述数据接收标志位用于表征接收所述输入数据的装置或者处理电路。


3.根据权利要求2所述的方法,其特征在于,所述数据接收标志位的个数表征能够与所述存储器进行交互的装置的个数或者处理电路的个数。


4.根据权利要求1-3任一项所述的方法,其特征在于,所述操作域还包括待操作的数据的信息;所述待操作的数据的信息包括所述待操作的数据在所述存储器中的源地址、待操作的数据长度、以及操作数据后的数据返回地址;所述根据所述数据操作信号对存储器中的待操作的数据执行对应的操作,得到所需的输入数据,包括:
自所述源地址开始读取所述存储器,获取满足所述数据长度的输入数据;
根据所述数据接收标志位,确定接收输入数据的装置或者处理电路;
按照所述数据返回地址,将所述输入数据返回至所述装置或者处理电路中的所述数据返回地址对应的存储空间。


5.根据权利要求4所述的方法,其特征在于,所述装置包括至少一个机器学习单元,每个机器学习单元包括主处理电路和多个从处理电路。


6.根据权利要求5所述的方法,其特征在于,所述操作域还包括跳转子操作域,所述跳转子操作域包括跳转步长以及每次跳转后所操作的跳转数据长度;所述自所述源地址开始读取所述存储器,获取满足所述数据长度的输入数据,包括:
自所述源地址开始读取所述存储器,根据当前次跳转后的跳转数据长度获取第一跳转数据;
获取所述跳转数据的最后一个地址,并根据所述跳转步长从所述最后一个地址跳转至目标跳转地址;
自所述目标跳转地址开始,根据跳转后的跳转数据长度获取第二跳转数据,直至每次跳转后得到的跳转数据的长度满足所述数据长度为止。


7.根据权利要求6所述的方法,其特征在于,所述跳转子操作域包括stride操作域和/或segment操作域;所述stride操作域用于表征所述数据操作信号每次的跳转步长;所述segment操作域用于表征预设的所述数据操作信号每次的分割大小。


8.根据权利要求7所述的方法,其特征在于,所述操作域还包括功能标志位,用于表征对所读取...

【专利技术属性】
技术研发人员:不公告发明人
申请(专利权)人:上海寒武纪信息科技有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1