一种数据库数据清理方法及装置制造方法及图纸

技术编号:33202455 阅读:24 留言:0更新日期:2022-04-24 00:41
本发明专利技术提供一种数据库数据清理方法、装置、电子设备及计算机程序产品,方法包括:获取数据同步平台与数据存储平台建立的数据存储映射关系,并获取个性化清理策略;基于个性化清理策略和数据库索引信息生成数据清理任务;基于数据存储映射关系将数据清理任务分发至预先创建的数据清理进程,以通过数据清理进程对数据存储平台进行数据清理。本发明专利技术通过建立数据同步平台与数据存储平台数据存储映射关系,快速获取数据的存储信息,并根据数据库索引信息和个性化清理策略生成数据清理任务,继而通过多个进程执行数据清理任务以实现数据存储平台的数据定期清理,从而实现轨道交通多专业数据清理的智能化,便捷化和高效化。便捷化和高效化。便捷化和高效化。

【技术实现步骤摘要】
一种数据库数据清理方法及装置


[0001]本专利技术涉及数据处理
,具体涉及一种数据库数据清理方法、装置、电子设备及计算机程序产品。

技术介绍

[0002]轨道交通是属于集多专业,多工种于一身的复杂系统,通常由轨道路线、车站、车辆、维护检修基地、供变电系统、通信信号系统、指挥控制中心等组成。每一个专业都自身作为一个独立的系统,在轨道交通管理中需要采集多种专业信号数据供相关系统解析存储,以达到轨道交通运营的目的。
[0003]数据的存储主要以mysql数据库为主,通过合理的表设计,采集到的数据会在解析服务解析后持续存储到相应的表中。
[0004]存储在数据库的数据是最具流动性的基础性资源,也是轨道交通运营监控的关键要素,这些数据可以通过算法运算预测或识别出故障并触发报警,抑或将数据通过图形化技术在页面持续展示出线路运营状况,因此对数据的管理显得至关重要。
[0005]目前对于轨道交通行业的数据管理,存在以下缺陷:
[0006]1、数据量庞大,占用存储空间多,数据清理慢,不利于长期存储;r/>[0007]2本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据库数据清理方法,其特征在于,包括:实时获取数据同步平台与数据存储平台建立的数据存储映射关系,并按预设的时间间隔获取个性化清理策略;根据所述个性化清理策略匹配出相应的数据库索引信息,并基于所述个性化清理策略和所述数据库索引信息生成数据清理任务;基于所述数据存储映射关系将所述数据清理任务分发至预先创建的数据清理进程,以通过所述数据清理进程对所述数据存储平台进行数据清理。2.根据权利要求1所述的数据库数据清理方法,其特征在于,所述个性化清理策略包括自增id删除策略、时间范围删除策略、业务字段删除策略和周期性过期删除策略中的一种或多种。3.根据权利要求1所述的数据库数据清理方法,其特征在于,所述基于所述个性化清理策略和所述数据库索引信息生成数据清理任务,包括:当根据所述个性化清理策略和所述数据库索引信息判断待删除数据包括目标数据表的全部数据时,则生成将该目标数据表进行删除的数据清理任务。4.根据权利要求1所述的数据库数据清理方法,其特征在于,在所述实时获取数据同步平台与数据存储平台建立的数据存储映射关系,并按预设的时间间隔获取个性化清理策略之前,还包括:根据所述数据存储平台存储的数据实时更新数据库索引信息,并将所述数据库索引信息存储至ES存储库。5.根据权利要求4所述的数据库数据清理方法,其特征在于,还包括...

【专利技术属性】
技术研发人员:贾杰周驰楠黄开雁
申请(专利权)人:广西交控智维科技发展有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1