一种超融合系统及基于超融合系统的数据处理方法技术方案

技术编号:34326110 阅读:75 留言:0更新日期:2022-07-31 01:10
本发明专利技术公开了一种超融合系统及基于超融合系统的数据处理方法,涉及计算机技术领域,包括冷数据存储单元、轮换单元、记录单元、数据输出单元,所述记录单元分别连接两组不同的第一记录存储单元和第二记录存储单元,所述轮换单元分别连接两组不同的第一热数据存储单元和第二热数据存储单元,所述第二热数据存储单元通过轮换单元连接筛分单元,所述筛分单元连接有筛分存储单元,所述筛分存储单元连接第一记录存储单元。本发明专利技术通过缩短另一组热数据存储单元的轮换周期,根据用户在不同时段搜索不同数据频率不同的特性,提高了数据调出的速度和效率,避免了相同的数据占用热数据存储单元的情况,提高了热数据存储单元的存储效率。提高了热数据存储单元的存储效率。提高了热数据存储单元的存储效率。

A super fusion system and data processing method based on super fusion system

【技术实现步骤摘要】
一种超融合系统及基于超融合系统的数据处理方法


[0001]本专利技术涉及计算机
,具体为一种超融合系统及基于超融合系统的数据处理方法。

技术介绍

[0002]超融合存储系统是一种面向对象的分布式存储系统,采取SSD+HDD的混合存储方式,将所有物理服务器上的硬盘组成一个存储资源池,其中所有机械硬盘组成存储容量层,SSD闪存盘组成存储性能层,两者一起构建了分层持久存储。
[0003]现有的超融合存储系统采用的方式为将访问频度高的热数据,提升到SSD存储设备上,将访问频度低的冷数据,沉至HDD存储设备上,从而有效的提高用户的数据访问效率,提高超融合产品的性能。
[0004]但现有的超融合存储系统在轮换冷数据与热数据时,由于轮换周期长,不能很好的利用热数据存储单元的容量,数据长时间不轮换会导致用户搜索效率降低,且用户搜索数据也具有时段性,即在不同时段一部分相同的数据搜索频率会不同,导致数据处理效率低。

技术实现思路

[0005]基于此,本专利技术的目的是提供一种超融合系统及基于超融合系统的数据处理方法,以解决但现有的超融合存储系统由于轮换周期长,不能很好的利用热数据存储单元的容量,数据处理效率低的技术问题。
[0006]为实现上述目的,本专利技术提供如下技术方案:一种超融合系统,包括冷数据存储单元、轮换单元、记录单元、数据输出单元,所述记录单元分别连接两组不同的第一记录存储单元和第二记录存储单元,所述轮换单元分别连接两组不同的第一热数据存储单元和第二热数据存储单元,所述第二热数据存储单元通过轮换单元连接筛分单元,所述筛分单元连接有筛分存储单元,所述筛分存储单元连接第一记录存储单元。
[0007]通过采用上述技术方案,设置另一组热数据存储单元,通过缩短另一组热数据存储单元的轮换周期,保证了系统能够更快且更高效的轮换热数据与冷数据,根据用户在不同时段搜索不同数据频率不同的特性,提高了数据调出的速度和效率,避免了相同的数据占用热数据存储单元的情况,提高了热数据存储单元的存储效率。
[0008]本专利技术进一步设置为,所述冷数据存储单元、第一热数据存储单元、第二热数据存储单元皆与轮换单元双向连接。
[0009]通过采用上述技术方案,保证冷数据存储单元、第一热数据存储单元、第二热数据存储单元能够受轮换单元控制轮换内部的数据。
[0010]本专利技术进一步设置为,所述所述冷数据存储单元、第一热数据存储单元、第二热数据存储单元皆连接有记录单元,所述记录单元连接有数据输出单元。
[0011]通过采用上述技术方案,通过记录单元记录所有数据的被搜索次数。
[0012]本专利技术进一步设置为,所述第一记录存储单元直接连接轮换单元,且还连接有筛分存储单元。
[0013]通过采用上述技术方案,第一记录存储单元为轮换单元提供轮换第一热数据存储单元和冷数据存储单元的轮换数据信息,同时为筛分存储单元提供比对数据,供筛分单元比对。
[0014]本专利技术进一步设置为,所述第二记录存储单元连接筛分单元,所述筛分单元连接有轮换单元。
[0015]通过采用上述技术方案,筛分单元筛分过第二记录存储单元与筛分存储单元内的数据后,将轮换数据信息发送给轮换单元。
[0016]本专利技术进一步设置为,所述筛分单元与筛分存储单元双向连接。
[0017]通过采用上述技术方案,保证筛分单元能够比对第一记录存储单元输入的数据与第二存储记录单元输入的数据,筛除相同的数据后输出正确的轮换数据。
[0018]本专利技术还提出了一种基于超融合系统的数据处理方法,包括以下步骤:步骤一:分别设定第一记录存储单元和第二记录存储单元的数据输出周期,记第一记录存储单元的记录输出输出周期为第一周期,记第二记录存储单元的记录输出周期为第二周期,第一周期的时长大于第二周期,根据以往数据输出记录将冷数据存入冷数据存储单元,将热数据存储进入第一热数据存储单元步骤二:在首个第一周期内,数据输出单元输出冷数据存储单元和第一热数据存储单元内的数据,第一记录存储单元和第二记录存储单元记录数据通过记录单元的次数;步骤三:在首个第一周期结束后,第一记录存储单元将存储的数据按照热度排名后输送给轮换单元和筛分存储单元,轮换单元轮换冷数据存储单元和第一热数据存储单元内的数据;步骤四:在下一个第一周期开始后,经过一个第二周期,第二记录存储单元将存储的数据传输给筛分单元,筛分单元根据筛分存储单元内存储的第一热数据存储单元内的数据,筛分去除与第一热数据存储单元内相同的数据,将记录按照热度排名后输送至轮换单元,轮换单元轮换冷数据存储单元和第二热数据存储单元内的数据。
[0019]综上所述,本专利技术主要具有以下有益效果:1、本专利技术通过设置另一组热数据存储单元,通过缩短另一组热数据存储单元的轮换周期,保证了系统能够更快且更高效的轮换热数据与冷数据;2、本专利技术通过根据用户在不同时段搜索不同数据频率不同的特性,很好的将一部分在特定时段内被高频搜索的冷数据轮换进入热数据存储单元内,提高了数据调出的速度和效率;3、本专利技术通过筛分单元筛分第二记录存储单元的数据,防止两组热数据存储单元内存储重复的数据,避免了相同的数据占用热数据存储单元的情况,提高了热数据存储单元的存储效率。
附图说明
[0020]图1为本专利技术的系统图。
具体实施方式
[0021]下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述。下面通过参考附图描述的实施例是示例性的,仅用于解释本专利技术,而不能理解为对本专利技术的限制。
[0022]下面根据本专利技术的整体结构,对其实施例进行说明。
[0023]实施例一:如图1所示,记录单元分别连接两组不同的第一记录存储单元和第二记录存储单元,轮换单元分别连接两组不同的第一热数据存储单元和第二热数据存储单元,第二热数据存储单元通过轮换单元连接筛分单元,筛分单元连接有筛分存储单元,筛分存储单元连接第一记录存储单元,为了保证冷数据存储单元、第一热数据存储单元、第二热数据存储单元能够受轮换单元控制轮换内部的数据,第一记录存储单元直接连接轮换单元,且还连接有筛分存储单元,第一记录存储单元为轮换单元提供轮换第一热数据存储单元和冷数据存储单元的轮换数据信息,同时为筛分存储单元提供比对数据,供筛分单元比对,冷数据存储单元、第一热数据存储单元、第二热数据存储单元皆与轮换单元双向连接,冷数据存储单元、第一热数据存储单元、第二热数据存储单元皆连接有记录单元,记录单元连接有数据输出单元,通过记录单元记录所有数据的被搜索次数,第二记录存储单元连接筛分单元,筛分单元连接有轮换单元,筛分单元筛分过第二记录存储单元与筛分存储单元内的数据后,将轮换数据信息发送给轮换单元,为了保证筛分单元能够比对第一记录存储单元输入的数据与第二存储记录单元输入的数据,筛除相同的数据后输出正确的轮换数据,筛分单元与筛分存储单元双向连接。
[0024]实施例二:分别设定第一记录存储单元和第二记录存储单元的数据输出周期,记第一记录存储单元的记录输出本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种超融合系统,包括冷数据存储单元、轮换单元、记录单元、数据输出单元,其特征在于:所述记录单元分别连接两组不同的第一记录存储单元和第二记录存储单元,所述轮换单元分别连接两组不同的第一热数据存储单元和第二热数据存储单元,所述第二热数据存储单元通过轮换单元连接筛分单元,所述筛分单元连接有筛分存储单元,所述筛分存储单元连接第一记录存储单元。2.根据权利要求1所述的一种超融合系统及基于超融合系统的数据处理方法,其特征在于:所述冷数据存储单元、第一热数据存储单元、第二热数据存储单元皆与轮换单元双向连接。3.根据权利要求1所述的一种超融合系统及基于超融合系统的数据处理方法,其特征在于:所述所述冷数据存储单元、第一热数据存储单元、第二热数据存储单元皆连接有记录单元,所述记录单元连接有数据输出单元。4.根据权利要求1所述的一种超融合系统及基于超融合系统的数据处理方法,其特征在于:所述第一记录存储单元直接连接轮换单元,且还连接有筛分存储单元。5.根据权利要求1所述的一种超融合系统及基于超融合系统的数据处理方法,其特征在于:所述第二记录存储单元连接筛分单元,所述筛分单元连接有轮换单元。6.根据权利要求1所述的一种超融合系统及基于超融合系统的数据处理方法,其特征在于:所述筛分单元与筛分存储单元双向连接。7.一种基于超融合系统的数据处理方法,选用权利要求1

6任意一项超融合系统,其特征在于:包括以下步骤:步骤一:分别设定第一记录存储单元和第二记录存储单元的数据输出周期,记第一记录存储单元的记录输出输出周期...

【专利技术属性】
技术研发人员:马永胜罗金平
申请(专利权)人:苏州米塔计算科技有限公司
类型:发明
国别省市:

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1