一种数据处理方法及相关设备技术

技术编号:40007389 阅读:21 留言:0更新日期:2024-01-16 14:44
本申请提供了一种数据处理方法,应用于分布式数据管理系统,该系统包括多个数据管理装置。多个数据管理装置中的第一数据管理装置对应区块链网络的第一区块链节点,第二数据管理装置对应区块链网络的第二区块链节点。第一数据管理装置挂载的存储和第二数据管理装置挂载的存储,用于形成区块链网络的存储资源池,该方法包括:多个数据管理装置中的目标数据管理装置接收数据操作请求,目标数据管理装置根据数据操作请求,从区块链网络获取目标数据的多个数据分片的存储地址,根据多个数据分片的存储地址在存储资源池对所述目标数据进行IO。与存储资源池的交互均需数据管理装置进行处理,保障数据一致性,提升了数据的安全性、可用性、可访问性。

【技术实现步骤摘要】

本申请涉及区块链,尤其涉及一种数据处理方法、系统、装置、计算设备集群、计算机可读存储介质、计算机程序产品。


技术介绍

1、区块链(blockchain)技术是利用块链式数据结构来验证和存储数据,利用分布式节点共识算法来生成和更新数据,利用密码学的方式保证数据传输和访问的安全,以及利用由自动化脚本代码组成的智能合约来编程和操作数据的一种去中心化架构与计算范式。

2、基于区块链技术构建的网络称作区块链网络,区块链网络中的节点共同维护分布式账本,该分布式账本作为存储载体,一般存储键值或关系数据等一系列简单数据结构。随着区块链广泛应用于金融、能源、政务、航空、农业、民生、物流等行业,与行业相关的数据,如视频、音频、图像等富媒体数据或者建模文件等大数据,对高可靠性的链上存储的需求日益增长。

3、如果将上述富媒体数据或大数据直接上链,将占用大量的链上资源。基于此,业界提出了链上存储与链下存储结合的存储方式。具体地,将富媒体数据或大数据存储到链下的存储系统,同时将上述数据的哈希值上链。如此,用户可以通过获取链上的哈希值,以及从链下的存储系统中获取本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,应用于分布式数据管理系统,所述分布式数据管理系统包括多个数据管理装置;所述多个数据管理装置中的第一数据管理装置对应区块链网络的第一区块链节点,所述多个数据管理装置中的第二数据管理装置对应区块链网络的第二区块链节点;所述第一数据管理装置挂载的存储和所述第二数据管理装置挂载的存储,用于形成所述区块链网络的存储资源池;所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述数据操作请求为写请求,所述目标数据管理装置根据所述数据操作请求,从所述区块链网络获取所述目标数据的多个数据分片的存储地址,包括:

3.根据权利要求2所述的方法,...

【技术特征摘要】

1.一种数据处理方法,其特征在于,应用于分布式数据管理系统,所述分布式数据管理系统包括多个数据管理装置;所述多个数据管理装置中的第一数据管理装置对应区块链网络的第一区块链节点,所述多个数据管理装置中的第二数据管理装置对应区块链网络的第二区块链节点;所述第一数据管理装置挂载的存储和所述第二数据管理装置挂载的存储,用于形成所述区块链网络的存储资源池;所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述数据操作请求为写请求,所述目标数据管理装置根据所述数据操作请求,从所述区块链网络获取所述目标数据的多个数据分片的存储地址,包括:

3.根据权利要求2所述的方法,其特征在于,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,每个数据分片包括多个副本;

5.根据权利2至4任一项所述的方法,其特征在于,所述方法还包括:

6.根据权利要求1所述的方法,其特征在于,所述数据操作请求为读请求,所述目标数据管理装置根据所述数据操作请求,从所述区块链网络获取所述目标数据的多个数据分片的存储地址,包括:

7.根据权利要求6所述的方法,其特征在于,所述方法还包括:

8.根据权利要求6所述的方法,其特征在于,所述目标数据管理装置对所述多个数据分片进行聚合,获得所述目标数据,包括:

9.根据权利要求1至8任一项所述的方法,其特征在于,所述方法还包括:

10.根据权利要求1至8任一项所述的方法,其特征在于,所述方法还包括:

11.一种分布式数据管理系统,其特征在于,所述分布式数据管理系统包括多个数据管理装置;所述多个数据管理装置中的第一数据管理装置对应区块链网络的第一区块链节点,所述多个数据管理装置中的第二数据管理装置对应区块链网络的第二区块链节点;所述第一数据管理装置挂载的存储和所述第二数据管理装置挂载的存储,用于形成所述区块链网络的存储资源...

【专利技术属性】
技术研发人员:张子怡曲强杨锐捷杜明晓
申请(专利权)人:华为云计算技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1