数据存储方法、装置及电子设备制造方法及图纸

技术编号:46594790 阅读:1 留言:0更新日期:2025-10-10 21:28
本申请实施例提供一种数据存储方法、装置及电子设备,涉及大数据领域。该方法响应于扫描得到的作业日志,确定作业日志中任意一张数据表的访问数据,作业日志用于指示多张数据表的操作记录,根据数据表访问数据,确定数据表的访问频率与访问类型,根据数据表的访问频率和访问类型,确定数据表的存储标识,将数据表存储至存储标识匹配的存储集群中,充分利用系统资源,提高资源利用率、提高系统稳定性。

【技术实现步骤摘要】

本申请涉及大数据领域,尤其涉及一种数据存储方法、装置及电子设备


技术介绍

1、随着金融行业的快速发展,数据量正在迅速增加。这不仅包括传统的交易数据,还涵盖了从各种新渠道获得的数据,如掌上银行、在线支付平台、以及通过金融科技创新带来的其他形式的金融服务。面对数据存储的需求增长,金融机构要考虑如何高效地存储数据。

2、目前,金融行业的数据存储大多采用存算一体架构。在这种模式下,存储和计算资源绑定在同一节点上。且资源分配方式通常是静态的,即在系统设计初期就固定分配存储和计算资源,确保业务处理按照预设步骤执行。

3、然而,由于存储和计算资源绑定在同一节点上,一个节点同时承担存储和计算职责,一旦该节点发生故障,不仅会影响当前任务执行,还可能导致数据不可访问,进而影响整个系统的稳定性。资源静态分配难以适应动态变化的业务需求,容易导致资源利用不均。


技术实现思路

1、本申请提供一种数据存储方法、装置及电子设备,用以解决现有数据存储过程中静态分配方式所带来的问题,特别是在存储和计算节点未解耦的情况下本文档来自技高网...

【技术保护点】

1.一种数据存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述数据表访问数据,确定所述数据表的访问频率,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述数据表访问数据,确定所述数据表的访问类型,包括:

4.根据权利要求2和3所述的方法,其特征在于,根据所述数据表的访问频率和访问类型,确定所述数据表的存储标识,包括:

5.根据权利要求1所述的方法,其特征在于,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,所述根据所述访问频率高于第一阈值的数据表和访问频率低于第二...

【技术特征摘要】

1.一种数据存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述数据表访问数据,确定所述数据表的访问频率,包括:

3.根据权利要求1所述的方法,其特征在于,所述根据所述数据表访问数据,确定所述数据表的访问类型,包括:

4.根据权利要求2和3所述的方法,其特征在于,根据所述数据表的访问频率和访问类型,确定所述数据表的存储标识,包括:

5.根据权利要求1所述的方法,其特征在于,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,所述...

【专利技术属性】
技术研发人员:王之乐
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1