数据存取方法、数据存取设备和推荐系统技术方案

技术编号:33137587 阅读:24 留言:0更新日期:2022-04-22 13:45
本公开涉及一种数据存取方法、数据存取设备和推荐系统。其中,数据存取方法包括:在数据块中添加与数据块的特征时刻相应的时间戳,其中,数据块的特征时刻与数据块一一对应;将数据块写入内存文件中;每当内存文件达到预设文件大小时,将该内存文件写入一个新的磁盘文件中,并将磁盘文件存储在非暂态数据存储介质中,其中,多个磁盘文件被配置为根据磁盘文件中所包含的时间戳来按照时间顺序排列。中所包含的时间戳来按照时间顺序排列。中所包含的时间戳来按照时间顺序排列。

【技术实现步骤摘要】
数据存取方法、数据存取设备和推荐系统


[0001]本公开涉及数据存取
,具体来说,涉及一种数据存取方法、数据存取设备和推荐系统。

技术介绍

[0002]在互联网服务中,可以采用推荐系统来为用户提供精准化的个性服务。在推荐系统的运行过程中,往往会产生海量的缓存数据,且有必要快速地存取这些缓存数据。目前,可以基于Redis集群(分布式高速缓冲存储器(cache)集群)使用内存来实现缓存数据的存取。然而,内存的成本很高,随着缓存数据的增多,已难以满足推荐系统中的存取需求。

技术实现思路

[0003]本公开的目的在于提供一种数据存取方法、数据存取设备和推荐系统。
[0004]根据本公开的第一方面,提供了一种数据存取方法,包括:
[0005]在数据块中添加与数据块的特征时刻相应的时间戳,其中,数据块的特征时刻与数据块一一对应;
[0006]将数据块写入内存文件中;
[0007]每当内存文件达到预设文件大小时,将该内存文件写入一个新的磁盘文件中,并将磁盘文件存储在非暂态数据存储介质中,其中,多个磁盘文件本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据存取方法,其特征在于,所述数据存取方法包括:在数据块中添加与数据块的特征时刻相应的时间戳,其中,数据块的特征时刻与数据块一一对应;将数据块写入内存文件中;每当内存文件达到预设文件大小时,将该内存文件写入一个新的磁盘文件中,并将磁盘文件存储在非暂态数据存储介质中,其中,多个磁盘文件被配置为根据磁盘文件中所包含的时间戳来按照时间顺序排列。2.根据权利要求1所述的数据存取方法,其特征在于,数据块包括键值对,其中,时间戳被添加在数据块的关键字中。3.根据权利要求2所述的数据存取方法,其特征在于,特征时刻包括关键字的产生时刻。4.根据权利要求1所述的数据存取方法,其特征在于,将数据块写入内存文件中包括:解析所述数据块的时间戳;根据所述时间戳,更新所述内存文件的最小时间戳和最大时间戳,使得由所述最小时间戳和所述最大时间戳限定的时间范围涵盖所述时间戳。5.根据权利要求1所述的数据存取方法,其特征在于,内存文件被配置为基于LSM树结构来组织。6.根据权利要求1所述的数据存取方法,...

【专利技术属性】
技术研发人员:毛琦吴成超郭一
申请(专利权)人:行吟信息科技上海有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1