数据存储方法、装置、设备及介质制造方法及图纸

技术编号:29132332 阅读:18 留言:0更新日期:2021-07-02 22:27
本申请提供的数据存储方法、装置、设备及介质中,电子设备将第一存储器中的多个缓存区域,按照目标业务对缓存区域的需求情况,为需要缓存区域的目标业务动态分配目标缓存区域;其中,目标业务分得的缓存区域的数量与目标业务热数据产量相关,从而实现根据各业务对缓存区域的需求,动态分配缓存区域,提高了缓存区域的利用率。

【技术实现步骤摘要】
数据存储方法、装置、设备及介质
本申请涉及计算机领域,具体而言,涉及一种数据存储方法、装置、设备及介质。
技术介绍
近年来,随着大数据技术的发展,需要对产生的海量数据进行存储。出于成本考量,通常使用机械硬盘进行存储。然而,受限于机械硬盘IO性能的瓶颈,当面对大量小IO请求时,机械硬盘处理能力较差。鉴于此,相关技术中将需要经常访问的热数据存储在缓存区域,以提高数据访问效率。然而,专利技术人研究发现,相关技术中存在缓存区域利用率欠佳的问题。
技术实现思路
为了克服现有技术中的至少一个不足,第一方面,本申请实施例提供一种数据存储方法,应用于电子设备,所述电子设备配置有第一存储器,所述第一存储器包括多个缓存区域,所述方法包括:从所述多个缓存区域中为目标业务分配目标缓存区域;建立所述目标缓存区域与所述目标业务之间的对应关系,其中,所述对应关系表征所述目标缓存区域属于所述目标业务;将所述目标业务生成的热数据写入所述目标缓存区域;当所述目标缓存区域无剩余空间时,则从未建立所述对应关系的缓存区域中为所述目标业务分配新的目标缓存区域。第二方面,本申请实施例提供一种数据存储装置,应用于电子设备,所述电子设备配置有第一存储器,所述第一存储器包括多个缓存区域,所述数据存储装置包括:区域分配模块,用于从所述多个缓存区域中为目标业务分配目标缓存区域;关系构建模块,用于建立所述目标缓存区域与所述目标业务之间的对应关系,其中,所述对应关系表征所述目标缓存区域属于所述目标业务;数据写入模块,用于将所述目标业务生成的热数据写入所述目标缓存区域;所述区域分配模块,还用于当所述目标缓存区域无剩余空间时,则从剩余的缓存区域中为所述目标业务分配新的目标缓存区域。第三方面,本申请实施例提供一种电子设备,所述电子设备包括处理器及存储器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,实现所述的数据存储方法。第四方面,本申请实施例提供一种存储介质,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时,实现所述的数据存储方法。相对于现有技术而言,本申请具有以下有益效果:本申请实施例提供的数据存储方法、装置、设备及介质中,电子设备将第一存储器中的多个缓存区域,按照目标业务对缓存区域的需求情况,为需要缓存区域的目标业务动态分配目标缓存区域;其中,目标业务分得的缓存区域的数量与目标业务热数据产量相关,从而实现根据各业务对缓存区域的需求,动态分配缓存区域,提高了缓存区域的利用率。附图说明为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。图1为本申请实施例提供的电子设备结构示意图;图2为本申请实施例提供的数据存储方法步骤流程示意图;图3为本申请实施例提供的缓存区域示意图;图4为本申请实施例提供的第二存储器中存储区域示意图;图5为本申请实施例提供的缓存区域结构示意图;图6为本申请实施例提供的监控存储系统结构示意图;图7为本申请实施例提供的数据存储装置结构示意图。图标:120-存储器;130-处理器;140-通信装置;201-监控数据输入端;202-数据处理端;203-调度服务器;204-存储服务节点;301-区域分配模块;302-关系构建模块;304-数据写入模块。具体实施方式为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。在本申请的描述中,需要说明的是,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。相关技术中,为了提高数据访问效率,将需要经常访问的热数据存储在缓存区域中。本申请实施例中,不对缓存区域的类型做具体地限定,只要缓存区域的IO性能高于机械硬盘即可。示例性的,该缓存区域可以是内存区域。其中,热数据即为用户需要经常访问的数据,因此,数据在使用时会被频繁访问。并且访问热数据的IO操作通常为小文件读写操作,而机械硬盘并不擅长于对小文件进行读写。鉴于此,提出了通过缓存区域提高热数据读写性能的方案,然而,目前的缓存区域通常为固定大小,存在缓存区域利用率欠佳的问题。例如,假定服务器中有业务A以及业务B。服务器为业务A分配一固定大小的缓存区域A,为业务B分配一固定大小的缓存区域B。业务A将自身的热数据存储在缓存区域A中,业务B将自身的热数存储在缓存区域B中。应理解的是,缓存区域的空间大小与热数据的缓存量成正相关,缓存区域越大,则能够显著减少对机械硬盘的访问频率,提高数据访问效率。然而,在一些应用场景中,业务A以及业务B并不是一直处于运行状态,即使一直处于运行状态,业务A以及业务B在不同的时段对缓存区域大小的需求,同样存在差异。因此,固定大小的缓存区域,限制了缓存区域的利用效率。鉴于此,本申请实施例提供一种应用于电子设备的数据存储方法,用于高效利用缓存区域存储热数据。其中,该电子设备可以是,但不限于,服务器、终端设备等。服务器可以是Web(网站)服务器、或者FTP(FileTransferProtocol,文件传输协议)服务器等。该终端设备可以是,智能手机、个人电脑(PersonalComputer,PC)、平板电脑、个人数字助理(PersonalDigitalAssistant,PDA)或者移动上网设备(MobileInternetDevice,MID)等。本申请实施例提供一种上述电子设备的结构示意图。如图1所示,该电子设备包括存储器120、处理器130、通信装置140。该存储器120、处理器130以及通信装置140各元件相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。其中,该存储器120可以是,但不限于,随机存取存储器(RandomAccessMemory,RAM),只读存储器(ReadOnlyMemory,ROM),可编程只读存储器(ProgrammableRead-On本文档来自技高网...

【技术保护点】
1.一种数据存储方法,其特征在于,应用于电子设备,所述电子设备配置有第一存储器,所述第一存储器包括多个缓存区域,所述方法包括:/n从所述多个缓存区域中为目标业务分配目标缓存区域;/n建立所述目标缓存区域与所述目标业务之间的对应关系,其中,所述对应关系表征所述目标缓存区域属于所述目标业务;/n将所述目标业务生成的热数据写入所述目标缓存区域;/n当所述目标缓存区域无剩余空间时,则从未建立所述对应关系的缓存区域中为所述目标业务分配新的目标缓存区域。/n

【技术特征摘要】
1.一种数据存储方法,其特征在于,应用于电子设备,所述电子设备配置有第一存储器,所述第一存储器包括多个缓存区域,所述方法包括:
从所述多个缓存区域中为目标业务分配目标缓存区域;
建立所述目标缓存区域与所述目标业务之间的对应关系,其中,所述对应关系表征所述目标缓存区域属于所述目标业务;
将所述目标业务生成的热数据写入所述目标缓存区域;
当所述目标缓存区域无剩余空间时,则从未建立所述对应关系的缓存区域中为所述目标业务分配新的目标缓存区域。


2.根据权利要求1所述的数据存储方法,其特征在于,所述第一存储器属于固态硬盘,所述电子设备还配置有第二存储器,所述第二存储器属于内存,所述将所述目标业务生成的热数据写入所述目标缓存区域,包括:
通过所述第二存储器收集所述目标业务生成的热数据;
当所述第二存储器每收集预设容量阈值的热数据时,则将所述预设容量阈值的热数据写入所述目标缓存区域。


3.根据权利要求2所述的数据存储方法,其特征在于,所述第二存储器为所述目标业务配置有多个收集区域,所述通过所述第二存储器收集所述目标业务生成的热数据,包括:
当当前使用的收集区域无剩余空间时,则从剩余的收集区域中选取处于空闲状态的收集区域,其中,所述空闲状态表征所述收集区域中的热数据全部写入了所述目标缓存区域。


4.根据权利要求2所述的数据存储方法,其特征在于,所述方法还包括:
根据所述热数据在所述目标缓存区域中的写入位置,生成所述热数据在所述目标缓存区域中的位置索引信息。


5.根据权利要求4所述的数据存储方法,其特征在于,所述方法还包括:
当所述目标缓存区域与所述目标业务之间的对应关系被销毁时,则将所述热数据在所述目标缓存区域中的位置索引信息销毁。


6.根据权利要求4所述的...

【专利技术属性】
技术研发人员:马钦
申请(专利权)人:重庆紫光华山智安科技有限公司
类型:发明
国别省市:重庆;50

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1