一种制造技术

技术编号:39413888 阅读:8 留言:0更新日期:2023-11-19 16:05
本公开涉及计算机技术领域,尤其涉及一种

【技术实现步骤摘要】
一种GPU大数据平台、电子设备和存储介质


[0001]本公开涉及计算机
,尤其涉及一种
GPU
大数据平台

电子设备和存储介质


技术介绍

[0002]由于全功能图像处理器
(Graphics Processing Unit

GPU)
的研发在国内尚处于起始阶段,各
GPU
厂商尚未在
GPU
设计

实现

生产

销售

服务

传输

收集

计算

存储

监管

分析等关键步骤所涉及的大数据相关问题形成通用技术方案

因此,针对全功能
GPU
使用场景,构建一种
GPU
大数据平台,以应用于
GPU
大数据场景,是当前亟需解决的问题


技术实现思路

[0003]本公开提出了一种
GPU
大数据平台

电子设备和存储介质的技术方案

[0004]根据本公开的一方面,提供了一种
GPU
大数据平台,包括:
N

IDC
,其中,
N
是大于等于2的正整数;每个
IDC
,用于将本地
IDC
内产生的
GPU
数据,以区块链形式,存储到所述
N

IDC
;每个
IDC
,用于对本地
IDC
内存储的各区块链进行数据可靠性校验;每个
IDC
,用于根据其他
N
‑1个远程
IDC
中的至少一个,对本地
IDC
内数据可靠性校验失败的区块链进行数据恢复

[0005]在一种可能的实现方式中,所述平台包括:节点区块任务队列;第一
IDC
,用于根据本地产生的
GPU
数据生成数据区块,以及将所述数据区块发送至节点区块任务队列,其中,所述第一
IDC
为所述
N

IDC
中的任意一个;第二
IDC
,用于从所述节点区块任务队列获取所述数据区块,以及将所述数据区块加入本地的目标区块链,其中,所述第二
IDC
为所述
N

IDC
中的每一个

[0006]在一种可能的实现方式中,所述第一
IDC
中包括:本地交易产生者服务

本地分布式流平台

本地交易标题分类信息;所述本地交易产生者服务,用于对本地产生的
GPU
数据进行标准化打包,生成一个交易数据,以及将所述交易数据发送至所述本地分布式流平台;所述本地分布式流平台,用于按照所述本地交易标题分类信息中的预设交易标题信息,对所述交易数据进行分类,得到不同类别的交易流数据

[0007]在一种可能的实现方式中,所述第一
IDC
中包括:本地流消费者服务

本地区块创建者服务;所述本地流消费者服务,用于根据所述本地交易标题分类信息中的预设交易标题信息,从所述本地分布式流平台中获取多个目标交易流数据,以及将所述多个目标交易流数据发送至所述本地区块创建者服务;所述本地区块创建者服务,用于根据所述多个目标交易流数据,生成所述数据区块;所述本地区块创建者服务,用于将所述数据区块发送至所述节点区块任务队列

[0008]在一种可能的实现方式中,所述第二
IDC
中包括:节点区块消化器

节点区块链工作器

节点区块链;所述节点区块消化器,用于从所述节点区块任务队列中获取所述数据区块,对所述数据区块进行校验,以及将校验通过后的所述数据区块发送至所述节点区块链
工作器;所述节点区块链工作器,用于根据所述数据区块以及所述数据区块需要加入的所述节点区块链中的所述目标区块链,生成签名信息;所述节点区块链工作器,用于将所述数据区块加入所述目标区块链,以及将所述签名信息发送至所述目标区块链的尾部

[0009]在一种可能的实现方式中,所述第二
IDC
中包括:本地分布式数据库;所述节点区块链工作器,用于将所述数据区块对应的
GPU
数据,发送至所述本地分布式数据库中进行存储

[0010]在一种可能的实现方式中,第三
IDC
中包括:本地校验规划器

本地区块链

本地校验任务队列,其中,第三
IDC
为所述
N

IDC
中的任意一个;所述本地校验规划器,用于根据预设校验计划,为所述本地区块链中的一个待校验区块链创建对应的校验任务,以及将所述校验任务发送至所述本地校验任务队列

[0011]在一种可能的实现方式中,所述第三
IDC
中包括:本地校验工作器

本地消息中心;所述本地校验工作器,用于从所述本地校验任务队列中获取所述校验任务,以及对所述本地区块链中所述校验任务对应的所述待校验区块链进行数据可靠性校验,得到校验结果;所述本地校验工作器,用于将所述校验结果发送至所述本地消息中心

[0012]在一种可能的实现方式中,所述本地校验工作器,用于对所述待校验区块链中包括的每个数据区块的内部信息进行校验,以及对所述待校验区块链中包括的每个数据区块之间的关联信息进行校验

[0013]在一种可能的实现方式中,所述第三
IDC
中包括:本地恢复任务队列;所述本地校验工作器,用于在所述校验结果为校验失败的情况下,为校验失败的区块链创建对应的恢复任务,以及将所述恢复任务发送至所述本地恢复任务队列

[0014]在一种可能的实现方式中,所述第三
IDC
中包括:本地恢复任务工作器;第四
IDC
中包括:远程恢复任务管理器

远程恢复助手资源池

远程区块链,其中,所述第四
IDC
是所述
N

IDC
中除所述第三
IDC
外的一个
IDC
;所述本地恢复任务工作器,用于从所述本地恢复任务队列中获取所述恢复任务,以及向所述远程恢复任务管理器发送恢复请求,其中,所述恢复请求用于请求对所述本地区块链中存储的所述恢复任务对应的待恢复区块链进行数据恢复;所述远程本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.
一种
GPU
大数据平台,其特征在于,包括:
N
个互联网数据中心
IDC
,其中,
N
是大于等于2的正整数;每个
IDC
,用于将本地
IDC
内产生的
GPU
数据,以区块链形式,存储到所述
N

IDC
;每个
IDC
,用于对本地
IDC
内存储的各区块链进行数据可靠性校验;每个
IDC
,用于根据其他
N
‑1个远程
IDC
中的至少一个,对本地
IDC
内数据可靠性校验失败的区块链进行数据恢复
。2.
根据权利要求1所述的平台,其特征在于,所述平台包括:节点区块任务队列;第一
IDC
,用于根据本地产生的
GPU
数据生成数据区块,以及将所述数据区块发送至节点区块任务队列,其中,所述第一
IDC
为所述
N

IDC
中的任意一个;第二
IDC
,用于从所述节点区块任务队列获取所述数据区块,以及将所述数据区块加入本地的目标区块链,其中,所述第二
IDC
为所述
N

IDC
中的每一个
。3.
根据权利要求1所述的平台,其特征在于,所述第一
IDC
中包括:本地交易产生者服务

本地分布式流平台

本地交易标题分类信息;所述本地交易产生者服务,用于对本地产生的
GPU
数据进行标准化打包,生成一个交易数据,以及将所述交易数据发送至所述本地分布式流平台;所述本地分布式流平台,用于按照所述本地交易标题分类信息中的预设交易标题信息,对所述交易数据进行分类,得到不同类别的交易流数据
。4.
根据权利要求3所述的平台,其特征在于,所述第一
IDC
中包括:本地流消费者服务

本地区块创建者服务;所述本地流消费者服务,用于根据所述本地交易标题分类信息中的预设交易标题信息,从所述本地分布式流平台中获取多个目标交易流数据,以及将所述多个目标交易流数据发送至所述本地区块创建者服务;所述本地区块创建者服务,用于根据所述多个目标交易流数据,生成所述数据区块;所述本地区块创建者服务,用于将所述数据区块发送至所述节点区块任务队列
。5.
根据权利要求2至4中任意一项所述的平台,其特征在于,所述第二
IDC
中包括:节点区块消化器

节点区块链工作器

节点区块链;所述节点区块消化器,用于从所述节点区块任务队列中获取所述数据区块,对所述数据区块进行校验,以及将校验通过后的所述数据区块发送至所述节点区块链工作器;所述节点区块链工作器,用于根据所述数据区块以及所述数据区块需要加入的所述节点区块链中的所述目标区块链,生成签名信息;所述节点区块链工作器,用于将所述数据区块加入所述目标区块链,以及将所述签名信息发送至所述目标区块链的尾部
。6.
根据权利要求5所述的平台,其特征在于,所述第二
IDC
中包括:本地分布式数据库;所述节点区块链工作器,用于将所述数据区块对应的
GPU
数据,发送至所述本地分...

【专利技术属性】
技术研发人员:请求不公布姓名
申请(专利权)人:摩尔线程智能科技北京有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1