一种基于多双活存储的数据处理方法、系统及介质技术方案

技术编号:29043826 阅读:25 留言:0更新日期:2021-06-26 05:54
本发明专利技术公开了一种基于多双活存储的数据处理方法,包括以下步骤:获取业务需求,基于业务需求创建双活卷以及设定第一资源阈值,根据第一资源阈值创建与双活卷对应的缓存分区;获取与业务需求对应的第一业务数据,基于缓存分区对第一业务数据执行数据重构步骤和算法处理步骤,得到第二业务数据,并将其存储至双活卷;设定统计周期,第二业务数据存储至双活卷后,每隔统计周期执行统计步骤,基于统计步骤对缓存分区执行保存步骤或调整步骤;本发明专利技术能够为多个双活卷创建对应的缓存分区,通过缓存分区对业务数据的读写重构和分解重组实现对业务数据的均衡同步处理,进而提高业务数据的传输效率和一致性,弥补了现有技术的空缺。弥补了现有技术的空缺。弥补了现有技术的空缺。

【技术实现步骤摘要】
一种基于多双活存储的数据处理方法、系统及介质


[0001]本专利技术涉及服务器存储优化
,特别是涉及一种基于多双活存储的数据处理方法、系统及介质。

技术介绍

[0002]随着新型技术的发展,存储技术的要求越来越高;双活卷作为一种安全性极高的技术被广泛应用;随着数据量的增加,双活卷技术也同时被扩充,现在通常采用多个双活卷对数据进行读取、存储以及其他处理,由于双活卷的个数增多,随之而来的问题是存储资源的争抢、存储资源处理无法同步、存储资源分配不均匀,最终导致多个双活卷对于数据传输、读写及综合处理的效率极低。

技术实现思路

[0003]本专利技术主要解决的是多个双活卷对于数据传输、读写及综合处理的效率极低的问题。
[0004]为解决上述技术问题,本专利技术采用的一个技术方案是:提供一种基于多双活存储的数据处理方法,包括以下步骤:
[0005]获取业务需求,基于所述业务需求创建双活卷以及设定第一资源阈值,根据所述第一资源阈值创建与所述双活卷对应的缓存分区;
[0006]获取与所述业务需求对应的第一业务数据,本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多双活存储的数据处理方法,其特征在于,包括以下步骤:获取业务需求,基于所述业务需求创建双活卷以及设定第一资源阈值,根据所述第一资源阈值创建与所述双活卷对应的缓存分区;获取与所述业务需求对应的第一业务数据,基于所述缓存分区对所述第一业务数据执行数据重构步骤,得到第二业务数据;基于所述缓存分区对所述第二业务数据执行算法处理步骤,基于所述算法处理步骤将所述第二业务数据存储至所述双活卷;设定统计周期,所述第二业务数据存储至所述双活卷后,每隔所述统计周期执行统计步骤,基于所述统计步骤对所述缓存分区执行保存步骤或调整步骤。2.根据权利要求1所述的基于多双活存储的数据处理方法,其特征在于:所述获取业务需求,基于所述业务需求创建双活卷以及设定第一资源阈值,根据所述第一资源阈值创建与所述双活卷对应的缓存分区的步骤进一步包括:判断所述业务需求的业务类型,创建与所述业务类型对应的双活卷;设定与所述业务类型对应的第一资源阈值,创建与所述双活卷对应的数据处理容器,基于所述第一资源阈值为所述数据处理容器配置对应的存储资源和地址指针,得到所述缓存分区。3.根据权利要求1所述的基于多双活存储的数据处理方法,其特征在于:所述数据重构步骤包括:设定第二资源阈值和第一数量;根据所述第一业务数据所对应的所述业务需求选取所述缓存分区;根据所述第一业务数据的数据类型获取所述第一业务数据中的第一数据;通过被选取的所述缓存分区按照所述第一数量将所述第一数据划分为若干第二数据;通过所述被选取的所述缓存分区获取所述第二数据的资源占用值,并基于所述第二资源阈值和所述资源占用值将所述第二数据聚合为若干所述第二业务数据。4.根据权利要求3所述的基于多双活存储的数据处理方法,其特征在于:所述算法处理步骤包括:采用哈夫曼算法对所述第二业务数据进行压缩,得到压缩数据;采用对称加密算法对所述压缩数据进行加密,得到第三业务数据;通过所述被选取的所述缓存分区将所述第三业务数据存储至与所述被选取的所述缓存分区对应的所述双活卷。5.根据权利要求2所述的基于多双活存储的数据处理方法,其特征在于:所述统计步骤包括:获取所述业务需求的初始性能指标和所述业务需求所对应的缓存分区的现有性能参数;比对所述现有性能参数是否均达到所述初始性能指标;若均达到,则对所述缓存分区执行所述保存步骤;若未均达到,则对所述缓存分...

【专利技术属性】
技术研发人员:闫涛
申请(专利权)人:山东英信计算机技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1