一种数据存储及查询方法、系统、设备及存储介质技术方案

本发明专利技术公开了一种数据存储及查询方法、系统、设备及存储介质，所述方法包括：将待存索引存储到数据库的第一存储区域，所述数据库包括所述第一存储区域和第二存储区域，所述第一存储区域的存取速度和存储成本均高于所述第二存储区域；在满足存储数据迁移条件的情况下，基于目标线性规划模型，分别更新所述第一存储区域中各已存索引的第一应存时长，以及所述第二存储区域中各已存索引的第二应存时长；根据更新的第一应存时长和更新的第二应存时长，确定是否将各所述已存索引迁移到所述第二存储区域，以及将所述第二存储区域中各已存索引删除，并执行。利用本发明专利技术公开的方法，可以实现在控制存储成本的基础上提高数据查询效率。

【技术实现步骤摘要】

本专利技术涉及计算机，具体涉及一种数据存储及查询方法、系统、设备及存储介质。

技术介绍

1、在当今的数字化时代，企业依赖于应用程序的日志来监控、分析和优化其运营。这些日志数据量巨大，往往达到tb(terabyte，太字节)或pb(petabyte，拍字节)级别。为了快速检索和查询这些数据，许多企业采用了如elasticsearch这样的高性能搜索引擎。尽管elasticsearch本身是高性能的，但由于日志数据量的持续增长和复杂的查询需求，查询响应时间逐渐变慢，有时达到十多秒之久，这大大影响了业务效率和用户体验。

2、为了提高查询性能，现有技术中通常采用高速磁盘，如ssd(solid state disk，固态硬盘)，作为数据存储介质。但高速磁盘的存储成本远高于传统的hdd(hard diskdrive，机械硬盘)，将所有数据迁移到ssd上将导致存储成本大幅增加。

技术实现思路

1、本专利技术提供一种数据存储及查询方法、系统、设备及存储介质，用以解决如何在控制存储成本的基础上提高数据查询效率的技术本文档来自技高网...

【技术保护点】

1.一种数据存储方法，其特征在于，包括：

2.根据权利要求1所述的数据存储方法，其特征在于，所述目标线性规划模型以最小化所述数据库的查询时间和存储成本为目标函数、以下述条件中的一种或多种为约束条件构建而成；

3.根据权利要求1或2所述的数据存储方法，其特征在于，所述目标线性规划模型的目标函数为minL(ti,wi)，其中：

4.根据权利要求1或2所述的数据存储方法，其特征在于，所述目标线性规划模型的约束条件为如下公式：

5.根据权利要求1或2所述的数据存储方法，其特征在于，所述目标线性规划模型的约束条件为如下公式：>

6.根据权利...

【技术特征摘要】

1.一种数据存储方法，其特征在于，包括：

2.根据权利要求1所述的数据存储方法，其特征在于，所述目标线性规划模型以最小化所述数据库的查询时间和存储成本为目标函数、以下述条件中的一种或多种为约束条件构建而成；

3.根据权利要求1或2所述的数据存储方法，其特征在于，所述目标线性规划模型的目标函数为minl(ti,wi)，其中：

4.根据权利要求1或2所述的数据存储方法，其特征在于，所述目标线性规划模型的约束条件为如下公式：

5.根据权利要求1或2所述的数据存储方法，其特征在于，所述目标线性规划模型的约束条件为如下公式：...

【专利技术属性】
技术研发人员：曹智杰，马奔，
申请(专利权)人：深圳市跨越速运有限公司，
类型：发明
国别省市：