【技术实现步骤摘要】
数据处理系统
本专利技术基本上涉及数据库领域，更具体地来说，涉及一种数据处理系统。
技术介绍
在数据库领域，处理海量数据一般采用的传统硬件系统，其结构大多为单机(使用本机存储)、单机或者集群加共享存储(单个存储设备)两种模式。数据处理系统提交使用之前需要集成各部分组件，包括机柜、电源、节点机、存储、网络等各部件。目前使用的数据处理业务的硬件系统，对使用环境和人员有较高要求，如专用机房、专用制冷设备、独立的电源系统，网络等，同时对人员使用带来诸多不便，如管理、技能、各品牌兼容性等方面。
技术实现思路
为了克服上述现有技术的缺陷，本专利技术提供了一种数据处理系统，解决了如何提高数据处理系统处理效率的技术问题。具体来说，本专利技术针对传统数据处理系统通常需要把大量数据从共享存储读取到服务器内存这一过程，而这一过程存在很多瓶颈，比如服务器内存处与磁盘IO速率差异很大、数据传输管道的数量和带宽是否满足大量数据传输、共享存储是否存在单点故障 以及共享存储是否存在单点性能不足情况从以下五个方面进行了改进(I)数据筛选；(2)减少内存与磁盘三者之间的IO速率差异；(3)增加数据传输的...
【技术保护点】
一种数据处理系统，其特征在于，包括：数据处理模块、数据存储模块和数据通信模块，所述数据通信模块用于在所述数据处理模块和所述数据存储模块之间传送数据，其中，所述数据处理模块中包括数据缓存子模块，所述数据缓存子模块用于存储处理频率高于预定频率阈值的数据。
【技术特征摘要】
【专利技术属性】
技术研发人员：李柳，范玉峰，曹振南，
申请(专利权)人：曙光信息产业北京有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。