一种智能数据存取方法、装置及设备制造方法及图纸

技术编号:17704484 阅读:21 留言:0更新日期:2018-04-14 17:35
本发明专利技术公开了一种智能数据存取方法、装置、设备及计算机可读存储介质,其中该方法包括:接收待处理数据流;将待处理数据流输入至预先训练得到的智能模块中,智能模块为利用预设量的、设定有对应分类标签的数据流训练得到的,智能模块具有识别输入至该智能模块的数据流的分类标签并输出该分类标签的功能;获取智能模块输出的待处理数据流的分类标签为目标分类标签,并查找与该目标分类标签具有对应关系的存储区间为目标存储区间,基于该目标存储区间实现与待处理数据流对应的数据存取操作。本申请中通过具有分类器功能的智能模块自动将待处理数据流快速而准确的打上对应分类标签,进而实现对应数据存取操作,能够实现高效存取数据的目的。

【技术实现步骤摘要】
一种智能数据存取方法、装置及设备
本专利技术涉及数据处理
,更具体地说,涉及一种智能数据存取方法、装置、设备及计算机可读存储介质。
技术介绍
随着大数据时代的到来,数据的存储需求越来越大,数据读取请求的响应速度越来越被关注。传统的数据存储系统为了提高数据读取速度在存储数据时通常是通过数据访问频率将待存储的数据区分为热数据和冷数据,然后将热数据存放在一类硬盘或者一个存储区间内,冷数据存放在另一类硬盘或者另一个存储区间内,这样在读取数据时,就能较快的根据待读取数据的热度到相应的硬盘或者存储区间内读取。现有技术中通常是由类似计数器的模块通过记录待读取数据的访问次数来确定该数据属于热数据还是冷数据,进而再到与热数据或冷数据对应的硬盘或存储区间实现对应的数据读取操作。但是这种实现数据读取的方式确定待读取数据属于热数据还是冷数据所需时间较长,数据读取效率较差。综上所述,如何提供一种数据读取效率较高的数据存储技术方案,是目前本领域技术人员亟待解决的问题。
技术实现思路
本专利技术的目的是提供一种智能数据存取方法、装置、设备及计算机可读存储介质,以解决现有技术中存在的数据读取效率较差的问题。为了实现上述目的,本专利技术提供如下技术方案:一种智能数据存取方法,包括:接收待处理数据流;将所述待处理数据流输入至预先训练得到的智能模块中,所述智能模块为利用预设量的、设定有对应分类标签的数据流训练得到的,所述智能模块具有识别输入至该智能模块的数据流的分类标签并输出该分类标签的功能;获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,并查找与该目标分类标签具有对应关系的存储区间为目标存储区间,基于该目标存储区间实现与所述待处理数据流对应的数据存取操作。优选的,获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,包括:获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,所述目标分类标签包括所述待处理数据流本身的类型、所述待处理数据流对应数据的数据信息,所述待处理数据流本身的类型包括待存储数据及读取数据请求,所述数据信息包括数据类型及数据访问频率。优选的,还包括:如果未查找到目标存储区间且所述待处理数据流为待存储数据,则将所述待存储数据存储至空闲的存储区间,并存储该存储区间与所述目标分类标签的对应关系,所述空闲的存储区间为未存储有其他数据的存储区间;如果未查找到目标存储区间且所述待处理数据流为读取数据请求,则返回获取数据失败的信息。优选的,确定与所述目标分类标签对应的存储区间为目标存储区间,包括:判断映射地址区间表中是否存在与所述目标分类标签对应的地址区间,如果是,则确定该地址区间对应存储区间为目标存储区间;所述映射地址区间表为预先创建的存储有分类标签及地址区间之间的对应关系的表。优选的,基于所述目标存储区间实现与所述待处理数据流对应的数据存取操作之前,还包括:将用于实现数据存储的数据存储介质划分为多个存储区间,并确定每个存储区间的起始地址为该存储区间的地址区间,其中每个存储区间对应一分类标签。一种智能数据存取装置,包括:接收模块,用于:接收待处理数据流;输入模块,用于:将所述待处理数据流输入至预先训练得到的智能模块中,所述智能模块为利用预设量的、设定有对应分类标签的数据流训练得到的,所述智能模块具有识别输入至该智能模块的数据流的分类标签并输出该分类标签的功能;操作模块,用于:获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,并查找与该目标分类标签具有对应关系的存储区间为目标存储区间,基于该目标存储区间实现与所述待处理数据流对应的数据存取操作。优选的,所述操作模块包括:获取单元,用于:获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,所述目标分类标签包括所述待处理数据流本身的类型、所述待处理数据流对应数据的数据信息,所述待处理数据流本身的类型包括待存储数据及读取数据请求,所述数据信息包括数据类型及数据访问频率。优选的,还包括:处理模块,用于:如果未查找到目标存储区间且所述待处理数据流为待存储数据,则将所述待存储数据存储至空闲的存储区间,并存储该存储区间与所述目标分类标签的对应关系,所述空闲的存储区间为未存储有其他数据的存储区间;如果未查找到目标存储区间且所述待处理数据流为读取数据请求,则返回获取数据失败的信息。一种智能数据存取设备,包括:存储器,用于存储计算机程序;处理器,用于执行所述计算机程序时实现如上任一项所述智能数据存取方法的步骤。一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上任一项所述智能数据存取方法的步骤。本专利技术提供了一种智能数据存取方法、装置、设备及计算机可读存储介质,其中该方法包括:接收待处理数据流;将所述待处理数据流输入至预先训练得到的智能模块中,所述智能模块为利用预设量的、设定有对应分类标签的数据流训练得到的,所述智能模块具有识别输入至该智能模块的数据流的分类标签并输出该分类标签的功能;获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,并查找与该目标分类标签具有对应关系的存储区间为目标存储区间,基于该目标存储区间实现与所述待处理数据流对应的数据存取操作。本申请中通过具有分类器功能的智能模块自动将待处理数据流快速而准确的打上对应分类标签,进而基于该分类标签确定待处理数据流对应存储区间以实现对应数据存取操作,能够实现高效存取数据的目的。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。图1为本专利技术实施例提供的一种智能数据存取方法的流程图;图2为本专利技术实施例提供的一种智能数据存取装置的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。请参阅图1,其示出了本专利技术实施例提供的一种智能数据存取方法的流程图,可以包括:S11:接收待处理数据流。待处理数据流即为待处理的数据流,也即任一待处理的数据流均可以为本申请中的待处理数据流。S12:将待处理数据流输入至预先训练得到的智能模块中,智能模块为利用预设量的、设定有对应分类标签的数据流训练得到的,智能模块具有识别输入至该智能模块的数据流的分类标签并输出该分类标签的功能。预设量可以根据实际需要确定,预设量越大对应训练得到的智能模块的精度越高。获取预设量的数据流,且每个数据流均设定有对应的分类标签,以利用这些设定有分类标签的数据流训练得到能够起到分类器功能的智能模块,该智能模块能够对输入智能模块的数据流进行分类标签的识别,即智能模块能够输出与输入的数据流对应的分类标签。S13:获取智能模块输出的待处理数据流的分类标签为目标分类标签,并查找与该目标分类标签具有对应关系的存储区间为目标存储区间,基于该目标存储区间实现与本文档来自技高网...
一种智能数据存取方法、装置及设备

【技术保护点】
一种智能数据存取方法,其特征在于,包括:接收待处理数据流;将所述待处理数据流输入至预先训练得到的智能模块中,所述智能模块为利用预设量的、设定有对应分类标签的数据流训练得到的,所述智能模块具有识别输入至该智能模块的数据流的分类标签并输出该分类标签的功能;获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,并查找与该目标分类标签具有对应关系的存储区间为目标存储区间,基于该目标存储区间实现与所述待处理数据流对应的数据存取操作。

【技术特征摘要】
1.一种智能数据存取方法,其特征在于,包括:接收待处理数据流;将所述待处理数据流输入至预先训练得到的智能模块中,所述智能模块为利用预设量的、设定有对应分类标签的数据流训练得到的,所述智能模块具有识别输入至该智能模块的数据流的分类标签并输出该分类标签的功能;获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,并查找与该目标分类标签具有对应关系的存储区间为目标存储区间,基于该目标存储区间实现与所述待处理数据流对应的数据存取操作。2.根据权利要求1所述的方法,其特征在于,获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,包括:获取所述智能模块输出的所述待处理数据流的分类标签为目标分类标签,所述目标分类标签包括所述待处理数据流本身的类型、所述待处理数据流对应数据的数据信息,所述待处理数据流本身的类型包括待存储数据及读取数据请求,所述数据信息包括数据类型及数据访问频率。3.根据权利要求2所述的方法,其特征在于,还包括:如果未查找到目标存储区间且所述待处理数据流为待存储数据,则将所述待存储数据存储至空闲的存储区间,并存储该存储区间与所述目标分类标签的对应关系,所述空闲的存储区间为未存储有其他数据的存储区间;如果未查找到目标存储区间且所述待处理数据流为读取数据请求,则返回获取数据失败的信息。4.根据权利要求1所述的方法,其特征在于,确定与所述目标分类标签对应的存储区间为目标存储区间,包括:判断映射地址区间表中是否存在与所述目标分类标签对应的地址区间,如果是,则确定该地址区间对应存储区间为目标存储区间;所述映射地址区间表为预先创建的存储有分类标签及地址区间之间的对应关系的表。5.根据权利要求4所述的方法,其特征在于,基于所述目标存储区间实现与所述待处理数据流对应的数据存取操作之前,还包括:将用于实现数据存储的数据存储介质划分为多个...

【专利技术属性】
技术研发人员:尹云峰
申请(专利权)人:郑州云海信息技术有限公司
类型:发明
国别省市:河南,41

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1