一种数据联邦存储方法、查询方法及系统技术方案

技术编号:31696883 阅读:35 留言:0更新日期:2022-01-01 10:57
本发明专利技术公开了一种数据联邦存储方法、查询方法及系统,其数据联邦存储方法包括利用SQL接入单元接收数据写入或更新请求,对请求进行解析后分发至计算集群中进行计算;利用计算集群中的各节点控制对应的上链处理单元分别将待上链列表中的加密数据进行上链以实现基于区块链的数据更新存储操作;其数据联邦查询方法,包括利用SQL接入单元接收数据查询请求,对查询请求进行解析后分发至计算集群中进行计算;利用计算集群中的各节点分别从区块链中获取对应数据后,并行对数据进行统计和计算,并汇聚计算结果返回至SQL接入单元。本发明专利技术解决数据联邦过程中数据新增、更新场景,提高数据安全性以及提高硬件针对性扩展,可适用更广泛的数据源进行数据联邦。的数据源进行数据联邦。的数据源进行数据联邦。

【技术实现步骤摘要】
一种数据联邦存储方法、查询方法及系统


[0001]本专利技术设计分布式数据库领域,尤其涉及一种数据联邦存储方法、查询方法及系统。

技术介绍

[0002]目前,传统的数据联邦方式数据更新必须制定确定的数据源进行存储更新,无法实现去中心化,使得更新过程中存在单点故障导致数据丢失等系列问题,往往仅用于数据联邦查询场景,难以很好的解决数据联邦过程中的数据新增,更新场景。

技术实现思路

[0003]为了克服现有技术的不足,本专利技术的目的之一在于提供一种数据联邦存储方法,解决上述数据联邦过程中数据新增、更新场景,提高数据安全性以及提高硬件针对性扩展,可适用更广泛的数据源进行数据联邦。
[0004]本专利技术的目的之二在于提供一种数据联邦查询方法。
[0005]本专利技术的目的之三在于提供一种数据联邦处理系统。
[0006]本专利技术的目的之四在于提供一种电子设备。
[0007]本专利技术的目的之五在于提供一种计算机存储介质。
[0008]本专利技术的目的之一采用如下技术方案实现:
[0009本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据联邦存储方法,其特征在于,包括:利用SQL接入单元接收数据写入或更新请求,对请求进行解析后分发至计算集群中进行计算;利用计算集群中对应节点所配置的上链处理单元分别将待上链列表中的加密数据进行上链以实现基于区块链的数据更新存储操作。2.根据权利要求1所述的数据联邦存储方法,其特征在于,将加密数据添加至待上链列表的方法为:利用上链处理单元扫描检测未上链数据源的元数据信息或数据信息以监测元数据变化或数据变化;将发生变化且需要上链的元数据或数据进行加密处理以获得加密后的上链数据,并将加密后的上链数据添加至待上链列表中。3.根据权利要求2所述的数据联邦存储方法,其特征在于,每个数据源均对应有一个上链处理单元,每个上链处理单元在每次循环中执行至少一次扫描检测操作。4.一种数据联邦查询方法,其特征在于,包括:利用SQL接入单元接收数据查询请求,对查询请求进行解析后分发至计算集群中进行计算;利用计算集群中的各节点分别从区块链中获取对应数据后,并行对数据进行统计和计算,并汇聚计算结果返回至SQL接入单元中以完成查询操作。5.根据权利要求4所述的数据联邦查询方法,其特征在于,从区块链中获取数据的方法为:利用区块链对数据添加及修改形成记账请求并广播,使计算集群中各节点接收区块链...

【专利技术属性】
技术研发人员:周秀耐陈光田丰
申请(专利权)人:广州广电运通金融电子股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1