用于大数据应用的多个多维计算机架构制造技术

技术编号:16672743 阅读:41 留言:0更新日期:2017-11-30 17:16
根据本发明专利技术的一些实施例,提供一种数据处理装置,所述数据处理装置包括以电子方式耦合到主处理器的前端接口。所述前端接口用于接收存储在存储库,具体地说,存储在外部存储装置和/或网络中的数据。所述前端接口用于通过分析表示所述数据的存取参数来确定所述数据是单存取数据还是多路存取数据。所述前端接口用于路由所述多路存取数据以供所述主处理器进行处理。所述前端接口用于路由所述单存取数据以供所述前端接口进行预处理并将所述预处理的结果路由到所述主处理器。

【技术实现步骤摘要】
【国外来华专利技术】用于大数据应用的多个多维计算机架构

技术介绍
本专利技术在其一些实施例中涉及一种计算机化装置,并且更确切地说,但非排他地,涉及一种用于执行数据处理应用的计算机化装置。在现代计算机系统中,数据处理应用在包括标准计算机架构的计算机系统上执行。当数据处理应用一直持续地分析更大数据集,例如大数据应用时,计算机系统正得到改进以满足所述应用和较大数据集的需要。如本文所使用,术语“大数据”是指太大而不能使用传统的数据处理方法和计算机进行处理的数据的任何集合。例如,通过数据处理应用分析超过百万兆字节的数据以确定市场趋势。执行大数据应用的典型计算机系统可并入有64千兆字节的随机存取存储器。下文描述了大数据应用中的传统计算机和数据流。现在参考图1A,图1A是目前的计算机组件和互连的示意性说明。主中央处理器和/或处理单元111(centralprocessorand/orprocessingunit,CPU)使用计算机存储器112、使用直接存储器存取(directmemoryaccess,DMA)接口、前端总线等等来执行数据处理应用。如本文所使用,术语“处理单元和/或处理器”是指计算机、计算机化设备、计本文档来自技高网...
用于大数据应用的多个多维计算机架构

【技术保护点】
一种数据处理装置(100),其特征在于,包括:以电子方式耦合到主处理器(111)的前端接口(101);所述前端接口(101)用于:接收存储在存储库,具体地说,存储在外部存储装置(122)和/或网络(121)中的数据;通过分析表示所述数据的存取参数来确定所述数据是单存取数据还是多路存取数据;路由所述多路存取数据以供所述主处理器(111)进行处理;以及路由所述单存取数据以供所述前端接口(101)进行预处理并将所述预处理的结果路由到所述主处理器(111)。

【技术特征摘要】
【国外来华专利技术】1.一种数据处理装置(100),其特征在于,包括:以电子方式耦合到主处理器(111)的前端接口(101);所述前端接口(101)用于:接收存储在存储库,具体地说,存储在外部存储装置(122)和/或网络(121)中的数据;通过分析表示所述数据的存取参数来确定所述数据是单存取数据还是多路存取数据;路由所述多路存取数据以供所述主处理器(111)进行处理;以及路由所述单存取数据以供所述前端接口(101)进行预处理并将所述预处理的结果路由到所述主处理器(111)。2.根据权利要求1所述的数据处理装置(100),其特征在于,所述存取参数是基于在所述前端接口(101)上两次接收相同数据之间的接收时间和所述主处理器(111)两次请求相同数据之间的请求时间的群组中的任一个。3.根据权利要求2所述的数据处理装置(100),其特征在于,所述存取参数测量为在所述前端接口(101)上两次接收和/或两次请求相同数据之间的相对时间。4.根据权利要求2所述的数据处理装置(100),其特征在于,所述存取参数测量为在所述前端接口(101)上第二次存取相同数据的绝对时间。5.根据权利要求2所述的数据处理装置(100),其特征在于,所述存取参数通过对在所述前端接口(101)上两次存取相同数据之间的多个不同数据进行计数来测量。6.根据权利要求2所述的数据处理装置(100),其特征在于,所述单存取数据通过比较所述存取参数与阈值来确定。7.根据前述权利要求中任一项所述的数据处理装置(100),其特征在于,所述前端接口(101)包括至少一个本地处理器(106),用于:存取本地存储器单元(104);对所述单存取数据进行预处理和/或将所述单存取数据存储到所述本地存储器单元(104);将所述预处理的结果路由到所述主处理器(111)以进行进一步处理。8.根据前一权利要求所述的数据处理装置(100),其特征在于,所述预处理包括用于对所述单存取数据中的多个数据元素进行过滤和聚合的专用指令群组。9.根据权利要求8所述的数据处理装置(100),其特征在于,所述前端接口(101)的所述至少一个本地处理器(106)并入有预处理指令传递模块,其中所述预处理指令传递模块用...

【专利技术属性】
技术研发人员:乌里·韦泽塔尔·霍洛维茨王金堂
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1