一种内存数据获取优化的方法和系统技术方案

技术编号:40033991 阅读:23 留言:0更新日期:2024-01-16 18:41
本发明专利技术公开了一种内存数据获取优化的方法和系统,应用于分布式数据库平台中,该方法包括:对内存数据进行预加载处理,并添加数据访问标签;接收并根据内存数据读取请求,对所述高速存储空间进行搜索,根据搜索结果返回请求处理结果,并更新所述数据访问标签的值;根据所述数据访问标签的值、访问标准值和所述高速存储空间的容量,实时对内存数据进行动态均衡处理;其中,在内存数据预加载时,基于数据键和数据键值,根据服务器节点数量和数据存储优化算法对提取的内存数据进行分区压缩存储;在响应所述内存数据读取请求的同时,对内存数据进行动态均衡处理,通过应用本发明专利技术提供的方法和系统提高了分布式数据库平台中的数据获取速度。

【技术实现步骤摘要】

本申请涉及数据库技术和数据可视化领域,更具体地,涉及一种内存数据获取优化的方法和系统


技术介绍

1、自助分析业务系统为电信运营商提供数据提取和分析的自助化平台。此平台通过提取和分析,将电信运营商已有的用户数据资源,变为具有商业价值的可用资源。自助分析业务系统支撑运营商内部业务运营分析及其用户自助查询消费记录、套餐使用情况等业务需求,是一种自助类型的数据统计分析服务平台,业务人员在自助分析平台进行数据模型上架、自助取数、数据关联分析、自助报表等操作。

2、以某省运营商为例,系统服务的用户覆盖全省及下属各个地市。此前,该省级运营商各个地市的业务及用户数据主要集中存储于省级数据库中,部分存储于地市级数据库中,因此在业务运营过程中,不仅要从省级数据库中取数据,也要从地市级数据库中取数据。为满足用户的个性化自助查询和分析的要求,保证数据高质量和数据完整性,该省级运营商一方面需要汇聚运营商各个市、县的所有业务及用户数据,另一方面需要保障数据读取和处理的高效性,以确保系统能够根据用户查询条件快速查找出相关数据,并将查询结果反馈给用户。</p>

3、但在本文档来自技高网...

【技术保护点】

1.一种内存数据获取优化的方法,其特征在于,所述方法应用于分布式数据库平台中,所述方法包括:

2.如权利要求1所述的方法,其特征在于,步骤S1中,对内存数据进行预加载处理的步骤包括:

3.如权利要求2所述的方法,其特征在于,所述对所述预加载的数据表进行数据提取处理的步骤还包括:

4.如权利要求1所述的方法,其特征在于,步骤S1中,在将数据从低速存储中预加载至高速存储空间后,还包括索引构建的步骤,具体为:

5.如权利要求1所述的方法,其特征在于,所述S2,响应请求:接收并根据内存数据读取请求,对所述高速存储空间进行搜索,根据搜索结果返回请求处...

【技术特征摘要】

1.一种内存数据获取优化的方法,其特征在于,所述方法应用于分布式数据库平台中,所述方法包括:

2.如权利要求1所述的方法,其特征在于,步骤s1中,对内存数据进行预加载处理的步骤包括:

3.如权利要求2所述的方法,其特征在于,所述对所述预加载的数据表进行数据提取处理的步骤还包括:

4.如权利要求1所述的方法,其特征在于,步骤s1中,在将数据从低速存储中预加载至高速存储空间后,还包括索引构建的步骤,具体为:

5.如权利要求1所述的方法,其特征在于,所述s2,响应请求:接收并根据内存数据读取请求,对所述高速存储空间进行搜索,根据搜索结果返回请求处理结果,并更新所述数据访问...

【专利技术属性】
技术研发人员:李文峰蒿章龙林学博
申请(专利权)人:北京柏睿数据技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1