一种实现数据全生命周期完整性管控的方法及系统技术方案

技术编号:41636687 阅读:32 留言:0更新日期:2024-06-13 02:32
本发明专利技术涉及一种实现数据全生命周期完整性管控的方法及系统,其特征在于,包括:基于预先确定的冷热数据识别因子和预先构建的热数据动态识别模型,将输入的时间窗口内的在线数据分为冷数据和热数据,得到冷数据队列和热数据队列;对识别后的冷数据和热数据自动进行周期扫描,识别符合预先设置的规则策略的数据,并进行自动归档或销毁操作,本发明专利技术可以广泛应用于数据完整性领域中。

【技术实现步骤摘要】

本专利技术涉及数据完整性领域,特别是关于一种实现数据全生命周期完整性管控的方法及系统


技术介绍

1、在数据资源的整个生命周期中,不同阶段的数据其性能、可用性、保存等要求也不一样。通常情况下,在数据资源的生命周期初期,数据的使用频率较高,需要使用高速存储,确保数据的高可用性。随着时间的推移,数据重要性会逐渐降低,使用频率会随之下降,应将数据进行不同级别的存储,为其提供适当的可用性、存储空间,以降低管理成本和资源开销。最终大部分数据将不再会被使用,可以将数据清理后归档保存,以备临时需要时使用。因此,精细化的数据资源全生命周期管控就显得尤其必要,在数据资源从在线、归档和最终销毁的整个过程中,对数据进行综合管控的方法或策略,这些策略通常由业务目标、存储容量、技术变革等驱动因素决定,通过管理流程、软件工具、策略组合等方式实现。管控的核心是基于策略从业务角度对膨胀的数据本身进行“冷热”识别,对冷数据采用归档及销毁处置措施,在节约存储、计算成本的同时,也可以提高业务数据化运营效率。

2、然而,传统模式下数据资源的全生命周期管控较为粗放,多为数据运维工程师人本文档来自技高网...

【技术保护点】

1.一种实现数据全生命周期完整性管控的方法,其特征在于,包括:

2.如权利要求1所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述冷热数据识别因子包括数据访问频率和访问时效;

3.如权利要求2所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述热数据动态识别模型的具体实施路径为:

4.如权利要求1所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述规则策略包括冷数据队列和热数据队列的生命周期阶段转换判定规则及其对应的处理措施:

5.如权利要求4所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述冷数...

【技术特征摘要】

1.一种实现数据全生命周期完整性管控的方法,其特征在于,包括:

2.如权利要求1所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述冷热数据识别因子包括数据访问频率和访问时效;

3.如权利要求2所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述热数据动态识别模型的具体实施路径为:

4.如权利要求1所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述规则策略包括冷数据队列和热数据队列的生命周期阶段转换判定规则及其对应的处理措施:

5.如权利要求4所述的一种实现数据全生命周期完整性管控的方法,其特征在于,所述冷数据在线阶段的生命周期阶段转换判定规则和处理措施包括:

6.如权利要求4所述的一种实...

【专利技术属性】
技术研发人员:孙福街武鹏张欢刘兆年刘小白袁帅岳翔高博姜曼管西竹
申请(专利权)人:中海石油中国有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1