一种数据存储方法、系统、设备及计算机可读存储介质技术方案

技术编号:20819402 阅读:21 留言:0更新日期:2019-04-10 05:48
本申请公开了一种数据存储方法、系统、设备及计算机可读存储介质,应用于分布式存储系统中,该方法包括:在分布式存储系统的数据存储目录下创建聚合文件;打开聚合文件;获取待存储数据,将待存储数据存储至聚合文件中,并保持聚合文件为打开状态。本申请公开的一种数据存储方法,分布式存储系统在创建聚合文件后,直接打开聚合文件,并且在将获取的待存储数据存储至聚合文件中后,保持聚合文件为打开状态,从而使得后续在存储新的待存储数据时,不需再额外的执行打开聚合文件的操作,使得分布式存储系统进行数据存储的整体时间较短,效率较高。本申请公开的一种数据存储系统、设备及计算机可读存储介质也解决了相应技术问题。

【技术实现步骤摘要】
一种数据存储方法、系统、设备及计算机可读存储介质
本申请涉及分布式存储
,更具体地说,涉及一种数据存储方法、系统、设备及计算机可读存储介质。
技术介绍
在分布式存储系统的应用中,客户读写的数据通常存储在分布式存储系统的特定目录下的文件中,然而,分布式存储系统的特定目录下存储有大量的文件,客户进行数据读写时,每次都需要打开文件,当有多个数据读写时,需打开大量的文件,增加磁盘压力,降低读写速率。综上所述,如何提高分布式存储系统的数据读写速率是目前本领域技术人员亟待解决的问题。
技术实现思路
本申请的目的是提供一种数据存储方法,其能在一定程度上解决如何提高分布式存储系统的数据读写速率的技术问题。本申请还提供了一种数据存储系统、设备及计算机可读存储介质。为了实现上述目的,本申请提供如下技术方案:一种数据存储方法,应用于分布式存储系统中,包括:在所述分布式存储系统的数据存储目录下创建聚合文件;打开所述聚合文件;获取待存储数据,将所述待存储数据存储至所述聚合文件中,并保持所述聚合文件为打开状态。优选的,所述在所述分布式存储系统的数据存储目录下创建聚合文件,包括:在所述分布式存储系统的数据存储目录下创建第一预设数量的所述聚合文件,其中,每个所述聚合文件的容量为1T。优选的,所述将所述待存储数据存储至所述聚合文件中之后,还包括:记录所述待存储数据在所述聚合文件中的初始存储地址及存储长度。优选的,所述在所述分布式存储系统的数据存储目录下创建预设数量的所述聚合文件之后,还包括:设置各个所述聚合文件的标识。优选的,所述记录所述待存储数据在所述聚合文件中的初始存储地址及存储长度之后,还包括:建立并记录所述初始存储地址、所述存储长度与存储所述待存储数据的所述聚合文件的标识间的映射关系。优选的,所述建立并记录所述初始存储地址、所述存储长度与存储所述待存储数据的所述聚合文件的标识间的映射关系,包括:建立键值对,基于所述键值对记录所述初始存储地址、所述存储长度与存储所述待存储数据的所述聚合文件的标识间的映射关系;其中,所述键值对的键表示所述待存储数据,所述键值对的值表示所述初始存储地址、所述存储长度及存储所述待存储数据的所述聚合文件的标识。优选的,所述在所述分布式存储系统的数据存储目录下创建聚合文件,包括:在所述分布式存储系统的数据存储目录下,将预先创建的旧文件整合为所述聚合文件,其中,每个所述聚合文件由第二预设数量的所述旧文件整合而成。一种数据存储系统,应用于分布式存储系统中,包括:第一创建模块,用于在所述分布式存储系统的数据存储目录下创建聚合文件;第一打开模块,用于打开所述聚合文件;第一存储模块,用于获取待存储数据,将所述待存储数据存储至所述聚合文件中,并保持所述聚合文件为打开状态。一种数据存储设备,应用于分布式存储系统中,包括:存储器,用于存储计算机程序;处理器,用于执行所述计算机程序时实现如上任一所述的数据存储方法的步骤。一种计算机可读存储介质,应用于分布式存储系统中,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现如上任一所述的数据存储方法的步骤。本申请提供的一种数据存储方法,应用于分布式存储系统中,在分布式存储系统的数据存储目录下创建聚合文件;打开聚合文件;获取待存储数据,将待存储数据存储至聚合文件中,并保持聚合文件为打开状态。本申请提供的一种数据存储方法,分布式存储系统在创建聚合文件后,直接打开聚合文件,并且在将获取的待存储数据存储至聚合文件中后,保持聚合文件为打开状态,从而使得后续在存储新的待存储数据时,不需再额外的执行打开聚合文件的操作,节省打开文件的次数,进而节省打开文件所消耗的时间,使得分布式存储系统进行数据存储的整体时间较短,效率较高。本申请提供的一种数据存储系统、设备及计算机可读存储介质也解决了相应技术问题。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。图1为本申请实施例提供的一种数据存储方法的第一流程图;图2为本申请实施例提供的一种数据存储方法的第二流程图;图3为本申请实施例提供的一种数据存储系统的结构示意图;图4为本申请实施例提供的一种数据存储设备的结构示意图;图5为本申请实施例提供的一种数据存储设备的另一结构示意图。具体实施方式下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。在分布式存储系统的应用中,客户读写的数据通常存储在分布式存储系统的特定目录下的文件中,然而,分布式存储系统的特定目录下存储有大量的文件,客户进行数据读写时,每次都需要打开文件,当有多个数据读写时,需打开大量的文件,增加磁盘压力,降低读写速率。本申请提供的一种数据存储方法可以提高数据读写速率。请参阅图1,图1为本申请实施例提供的一种数据存储方法的第一流程图。本申请实施例提供的一种数据存储方法,应用于分布式存储系统中,可以包括:步骤S101:在分布式存储系统的数据存储目录下创建聚合文件。实际应用中,分布式存储系统可以先在其数据存储目录下创建聚合文件,这里所描述的聚合文件指的是容量大于预设容量值的文件,也即聚合文件指的是容量较大的文件。具体的,分布式存储系统的数据存储目录可以为SSD数据存储目录,也即固态硬盘数据存储目录,还可以为HDD数据存储目录,也即硬盘驱动器数据存储目录等。具体应用场景中,聚合文件的容量越大,每个聚合文件所能容纳的待存储数据越多,也即打开一个聚合文件即可保存较多的待存储数据,与容量较小的聚合文件相比,容量较小的聚合文件存储较多的待存储数据时,其需要打开聚合文件的数量较多,相应的,需要执行打开聚合文件的次数较多,所以聚合文件的容量越大,其所需要打开聚合文件的次数越少,所以在分布式存储系统的数据存储目录下创建聚合文件的步骤可以具体为:在分布式存储系统的数据存储目录下创建第一预设数量的聚合文件,其中,每个聚合文件的容量为1T。第一预设数量的值可以根据实际需要确定,比如其可以为1024等。具体应用场景中,在分布式存储系统的数据存储目录下已经存有保存待存储数据的旧文件时,为了提高创建聚合文件的效率,可以直接将旧文件整合为聚合文件,则在分布式存储系统的数据存储目录下创建聚合文件的步骤可以具体为:在分布式存储系统的数据存储目录下,将预先创建的旧文件整合为聚合文件,其中,每个聚合文件由第二预设数量的旧文件整合而成。步骤S102:打开聚合文件。实际应用中,分布式存储系统在创建完聚合文件后,便可以打开聚合文件,以便分布式存储系统可以将待存储数据存储至聚合文件中。步骤S103:获取待存储数据,将待存储数据存储至聚合文件中,并保持聚合文件为打开状态。实际应用中,由于已经打开了聚合文件,所以分布式存储系统可以直接获取待存储数据,并将待存储数据存储至聚合文件,在此之后,并保持聚合文本文档来自技高网...

【技术保护点】
1.一种数据存储方法,其特征在于,应用于分布式存储系统中,包括:在所述分布式存储系统的数据存储目录下创建聚合文件;打开所述聚合文件;获取待存储数据,将所述待存储数据存储至所述聚合文件中,并保持所述聚合文件为打开状态。

【技术特征摘要】
1.一种数据存储方法,其特征在于,应用于分布式存储系统中,包括:在所述分布式存储系统的数据存储目录下创建聚合文件;打开所述聚合文件;获取待存储数据,将所述待存储数据存储至所述聚合文件中,并保持所述聚合文件为打开状态。2.根据权利要求1所述的方法,其特征在于,所述在所述分布式存储系统的数据存储目录下创建聚合文件,包括:在所述分布式存储系统的数据存储目录下创建第一预设数量的所述聚合文件,其中,每个所述聚合文件的容量为1T。3.根据权利要求2所述的方法,其特征在于,所述将所述待存储数据存储至所述聚合文件中之后,还包括:记录所述待存储数据在所述聚合文件中的初始存储地址及存储长度。4.根据权利要求3所述的方法,其特征在于,所述在所述分布式存储系统的数据存储目录下创建预设数量的所述聚合文件之后,还包括:设置各个所述聚合文件的标识。5.根据权利要求4所述的方法,其特征在于,所述记录所述待存储数据在所述聚合文件中的初始存储地址及存储长度之后,还包括:建立并记录所述初始存储地址、所述存储长度与存储所述待存储数据的所述聚合文件的标识间的映射关系。6.根据权利要求5所述的方法,其特征在于,所述建立并记录所述初始存储地址、所述存储长度与存储所述待存储数据的所述聚合文件的标识间的映射关系,包括:建立键值对,基...

【专利技术属性】
技术研发人员:李军站
申请(专利权)人:郑州云海信息技术有限公司
类型:发明
国别省市:河南,41

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1