System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于云计算和区块链的数据处理方法、系统和介质技术方案_技高网

基于云计算和区块链的数据处理方法、系统和介质技术方案

技术编号:40321910 阅读:6 留言:0更新日期:2024-02-09 14:17
本申请实施例提供了基于云计算和区块链的数据处理方法、系统和介质。该方法包括:通过设备终端获取待上传数据信息,上传至预处理服务器并处理后获得缓冲分类数据,获取云端信息和用户存储要求并对应获得当前用户的意向云端,将缓冲分类数据上传至意向云端的缓冲存储区,通过预处理后获得有效缓冲分类数据,在缓冲存储区对有效缓冲数据进行分割后获得分割上传数据,同时获得意向云端各服务器的资源情况,结合分割上传数据的属性情况,按照预设关联方式建立映射链接,并根据映射链接进行存储分配,通过区块链技术对整个过程进行监控生成监控日志,并获得存储分配情况,最后将监控日志信息和存储分配情况信息进行自动备份。

【技术实现步骤摘要】

本申请涉及云计算和区块链领域,具体而言,涉及基于云计算和区块链的数据处理方法、系统和介质


技术介绍

1、随着科技的进步和信息技术的普及,不论是生活还是工作中都产生了大量的数据,因此数据处理需求呈指数级增长,而传统的数据处理方法在处理海量数据时面临存储空间不足、处理效率低下以及数据安全性不高等问题。云计算技术的兴起为数据处理提供了新的解决方案,然而,传统的云计算平台在数据存储和处理的可靠性、安全性和完整性方面仍存在一定的问题。而且用户在使用云计算和云存储时,对数据上传完整情况、资源使用预估方面存在一定不足,同时,区块链技术作为一种去中心化的分布式账本技术,能够准确记录和安全备份所监控信息,但云计算和区块链数据处理和存储方面没有很好的结合,作用没有很好的发挥。

2、针对上述问题,目前亟待有效的技术解决方案。


技术实现思路

1、本申请的目的在于提供基于云计算和区块链的数据处理方法、系统和介质,可以实现通过设备终端获取待上传数据信息,上传至预处理服务器并处理后获得缓冲分类数据,获取云端信息和用户存储要求并对应获得当前用户的意向云端,将缓冲分类数据上传至意向云端的缓冲存储区,通过预处理后获得有效缓冲分类数据,在缓冲存储区对有效缓冲数据进行分割后获得分割上传数据,同时获得意向云端各服务器的资源情况,结合所述分割上传数据的属性情况,按照预设关联方式建立映射链接,并根据映射链接进行存储分配,通过区块链技术对整个过程进行监控生成监控日志,并获得存储分配情况,最后将监控日志信息和存储分配情况信息进行自动备份。

2、本申请还提供了基于云计算和区块链的数据处理方法,包括以下步骤:

3、设备终端获取待上传数据信息,上传至预处理服务器后处理获得缓冲分类数据;

4、获取预设数量的云端信息和当前用户的存储要求信息,根据存储要求信息结合云端信息对应获得意向云端;

5、将所述缓冲分类数据上传至所述意向云端的缓冲存储区,通过预设的数据预处理模型对所述缓冲分类数据进行处理获得有效缓冲分类数据;

6、将所述有效缓冲分类数据通过预设分割标记模型处理后获得分割上传数据;

7、获取所述意向云端中各服务器的资源情况,结合所述分割上传数据的属性情况,进行相应的存储分配;

8、通过预设区块链技术对数据处理、存储过程进行监控,生成监控日志信息,并获得存储分配情况信息;

9、将所述监控日志信息和所述存储分配情况信息进行自动备份。

10、可选地,在本申请所述的基于云计算和区块链的数据处理方法中,所述设备终端获取待上传数据信息,上传至预处理服务器后处理获得缓冲分类数据,具体包括:

11、设备终端获取待上传数据信息,并上传至预处理服务器获得预处理数据;

12、将所述预处理数据输入预设格式分类模型中处理获得缓冲分类数据;

13、所述缓冲分类数据包括结构化数据、非结构数据和半结构数据。

14、可选地,在本申请所述的基于云计算和区块链的数据处理方法中,所述获取预设数量的云端信息和当前用户的存储要求信息,根据存储要求信息结合云端信息对应获得意向云端,具体包括:

15、获取预设数量的云端信息,包括稳定性数据、传输速度以及价格数据;

16、获取当前用户的存储要求信息,包括稳定性要求、速度要求以及预算要求;

17、分别将所述云端信息与所述存储要求信息输入云端匹配指数公式,计算获得云端匹配指数;

18、预设数量的所述云端匹配指数构成云端匹配指数集;

19、选取所述云端匹配指数集中最小的云端匹配指数,其对应云端为意向云端;

20、所述云端匹配指数公式为:

21、

22、其中,pp为云端匹配指数,wx为稳定性要求,sd为速度要求,ys为预算要求,wd为稳定性数据,cs为传输速度,jg为价格数据,θ、ψ为预设特征系数。

23、可选地,在本申请所述的基于云计算和区块链的数据处理方法中,所述将所述缓冲分类数据上传至所述意向云端的缓冲存储区,通过预设的数据预处理模型对所述缓冲分类数据进行处理获得有效缓冲分类数据,具体包括:

24、将所述缓冲分类数据上传至所述意向云端的缓冲存储区,并输入预设的数据预处理模型处理获得有效缓冲分类数据;

25、所述数据预处理模型的处理过程,包括去除重复值、处理缺失值以及处理异常值;

26、将所述有效缓冲分类数据存储至缓冲待分割区。

27、可选地,在本申请所述的基于云计算和区块链的数据处理方法中,所述将所述有效缓冲分类数据通过预设分割标记模型处理后获得分割上传数据,具体包括:

28、获取所述有效缓冲分类数据的上传要求信息,包括分割要求和存储数据质量要求;

29、将所述有效缓冲分类数据输入预设分割标记模型;

30、所述预设分割标记模型将所述有效缓冲分类数据按照所述分割要求分割为预设数量的分割数据;

31、将所述分割数据进行编码并调整为要求的存储数据质量,获得分割上传数据;

32、所述编码包括预设分割数量、所述分割数据的序号、分割操作的流水码以及分割数据的格式分类信息;

33、所述格式分类信息包括分割结构化数据、分割非结构数据和分割半结构数据。

34、可选地,在本申请所述的基于云计算和区块链的数据处理方法中,所述获取所述意向云端中各服务器的资源情况,结合所述格式分类,进行相应的存储分配,具体包括:

35、获取所述意向云端中各服务器的资源利用情况,包括存储总容量、已用容量以及可用容量;

36、获取所述分割上传数据的存储空间大小需求信息,提取存储空间大小需求数据并进行正序排序;

37、将所述资源利用情况输入优先分配指数公式计算获得服务器的优先分配指数并进行倒序排序;

38、将所述存储空间大小需求数据的排序与所述优先分配指数的排序按照预设关联方式建立映射链接,并将所述分割上传数据存储至对应服务器;

39、所述优先分配指数公式为:

40、

41、其中,yx为优先分配指数,ky为可用容量,zr为存储总容量,dx为存储空间大小需求数据,β为预设特征系数。

42、可选地,在本申请所述的基于云计算和区块链的数据处理方法中,所述通过预设区块链技术对数据处理、存储过程进行监控,生成监控日志信息,并获得存储分配情况信息,具体包括:

43、通过预设区块链技术对数据处理、存储过程进行监控,并生成监控日志信息;

44、所述监控日志信息包括数据处理日志数据、存储位置数据、分割上传数据的完整度数据;

45、根据所述完整度数据获得存储分配情况,包括完整存储和非完整存储。

46、第二方面,本申请提供了基于云计算和区块链的数据处理系统,该系统包括:存储器及处理器,所述存储本文档来自技高网...

【技术保护点】

1.基于云计算和区块链的数据处理方法,其特征在于,包括:

2.根据权利要求1所述的基于云计算和区块链的数据处理方法,其特征在于,所述设备终端获取待上传数据信息,上传至预处理服务器后处理获得缓冲分类数据,具体包括:

3.根据权利要求2所述的基于云计算和区块链的数据处理方法,其特征在于,所述获取预设数量的云端信息和当前用户的存储要求信息,根据存储要求信息结合云端信息对应获得意向云端,具体包括:

4.根据权利要求3所述的基于云计算和区块链的数据处理方法,其特征在于,所述将所述缓冲分类数据上传至所述意向云端的缓冲存储区,通过预设的数据预处理模型对所述缓冲分类数据进行处理获得有效缓冲分类数据,具体包括:

5.根据权利要求4所述的基于云计算和区块链的数据处理方法,其特征在于,所述将所述有效缓冲分类数据通过预设分割标记模型处理后获得分割上传数据,具体包括:

6.根据权利要求5所述的基于云计算和区块链的数据处理方法,其特征在于,所述获取所述意向云端中各服务器的资源情况,结合所述格式分类,进行相应的存储分配,具体包括:

7.根据权利要求1所述的基于云计算和区块链的数据处理方法,其特征在于,所述通过预设区块链技术对数据处理、存储过程进行监控,生成监控日志信息,并获得存储分配情况信息,具体包括:

8.基于云计算和区块链的数据处理系统,其特征在于,包括存储器和处理器,所述存储器中包括基于云计算和区块链的数据处理方法程序,所述基于云计算和区块链的数据处理方法程序被所述处理器执行时实现如下步骤:

9.根据权利要求8所述的基于云计算和区块链的数据处理系统,其特征在于,所述设备终端获取待上传数据信息,上传至预处理服务器后处理获得缓冲分类数据,具体包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中包括一种基于云计算和区块链的数据处理方法程序,所述一种基于云计算和区块链的数据处理方法程序被处理器执行时,实现如权利要求1至7中任一项所述的一种基于云计算和区块链的数据处理方法的步骤。

...

【技术特征摘要】

1.基于云计算和区块链的数据处理方法,其特征在于,包括:

2.根据权利要求1所述的基于云计算和区块链的数据处理方法,其特征在于,所述设备终端获取待上传数据信息,上传至预处理服务器后处理获得缓冲分类数据,具体包括:

3.根据权利要求2所述的基于云计算和区块链的数据处理方法,其特征在于,所述获取预设数量的云端信息和当前用户的存储要求信息,根据存储要求信息结合云端信息对应获得意向云端,具体包括:

4.根据权利要求3所述的基于云计算和区块链的数据处理方法,其特征在于,所述将所述缓冲分类数据上传至所述意向云端的缓冲存储区,通过预设的数据预处理模型对所述缓冲分类数据进行处理获得有效缓冲分类数据,具体包括:

5.根据权利要求4所述的基于云计算和区块链的数据处理方法,其特征在于,所述将所述有效缓冲分类数据通过预设分割标记模型处理后获得分割上传数据,具体包括:

6.根据权利要求5所述的基于云计算和区块链的数据处理方法,其特征在于,所述获取所述意向云...

【专利技术属性】
技术研发人员:席利宝霍星宇
申请(专利权)人:北京宝联之星科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1