基于多次验证的数据处理方法、装置及存储介质制造方法及图纸

本发明专利技术公开了一种基于多次验证的数据处理方法、装置及存储介质，所述方法包括：获取数据读取指令，根据所述读取指令从第一目标节点中读取第一副本信息，所述第一副本信息包括第一副本数据与所述第一副本数据对应的第一校验和；从所述第一副本信息中提取所述第一副本数据，并根据所述第一副本数据生成第二校验和；在所述第一校验和与所述第二校验和不满足第一预设条件时，从第二目标节点中读取第二副本信息；将所述第二副本信息与所述第一副本信息进行比较，根据比较结果，调整所述第一副本信息。本发明专利技术通过对多个副本进行多次校验，可以有效的检测和避免校验和误判，提高使用校验和检测数据错误的精度，减少对系统的负面影响。

【技术实现步骤摘要】
基于多次验证的数据处理方法、装置及存储介质
本专利技术涉及数据处理
，尤其涉及一种基于多次验证的数据处理方法、装置及存储介质。
技术介绍
保持数据完整性是现代存储系统最重要的职责，因此有各种各样的技术被开发和应用来改进数据完整性保护。其中最常用，最受欢迎的就是校验和方法。传统的针对存储系统的校验和方法一般分类两类，一类是端到端校验，另一类是磁盘校验和。而一般使用校验和对数据进行保护的时候，一旦数据出现非正常更改，那么在读取的时候重新计算的校验并就不等于存储时计算的校验和。但是校验和本身也会出现错误，而且在写入过程中因为校验和和数据的写入不同步，并发输入/输出(Input/Output，IO)下其他访问请求在读取时会出现用旧校验来验证新数据和用新校验来验证旧数据的误判场景。
技术实现思路
本专利技术的主要目的在于提出一种基于多次验证的数据处理方法、装置及存储介质，旨在解决现有技术中无法减少数据在校验过程中出现误判的技术问题。为实现上述目的，本专利技术提供一种基于多次验证的数据处理方法，所述方法包括以下步骤：获取数据读取指令，根据所述读取指令从第一目标节点中读取第一副本信息，所述第一副本信息包括第一副本数据与所述第一副本数据对应的第一校验和；从所述第一副本信息中提取所述第一副本数据，并根据所述第一副本数据生成第二校验和；在所述第一校验和与所述第二校验和不满足第一预设条件时，从第二目标节点中读取第二副本信息；将所述第二副本信息与所述第一副本信息进行比较，根据比较结果，调整所述第一副本信息。优选地，所述获取数据读取指令，根据所述读取指令从第一目标节点中读取第一副本信息之前，所述方法包括：获取待校验数据，将所述待校验数据写入若干第一预设节点，生成与所述若干第一预设节点一一对应的若干副本信息，所述若干第一预设节点包括所述第一目标节点。优选地，所述根据所述读取指令从第一目标节点中读取第一副本信息，具体包括：获取所述若干第一预设节点的各节点信息，提取所述各节点信息中的时延参数，将所述时延参数与时延阈值进行比较；获取小于所述时延阈值的时延参数对应的第一节点，将所述第一节点作为第一目标节点。优选地，将所述第一节点作为第一目标节点之后，所述方法包括：将所述若干第一预设节点中去除所述第一目标节点，获取去除后的若干第二预设节点；相应地，所述从第二目标节点中读取第二副本信息，具体包括：获取所述若干第二预设节点中的各节点信息，提取所述各节点信息中的时延参数，将所述时延参数与时延阈值进行比较；获取小于所述时延阈值的时延参数对应的第二节点，将所述第二节点作为第二目标节点。优选地，在所述第一校验和与所述第二校验和不满足第一预设条件时，从第二目标节点中读取第二副本信息，具体包括：在所述第一校验和与所述第二校验和不满足第一预设条件时，获取当前系统负载参数，在所述当前负载参数满足第二预设条件时，从所述第二目标节点中读取所述第二副本信息。优选地，在所述当前负载参数满足第二预设条件时，从第二目标节点中读取第二副本信息，具体包括：在所述当前负载参数满足高负载阈值时，从第二目标节点中读取第二副本信息；相应地，所述将所述第二副本信息与所述第一副本信息进行比较，根据比较结果，调整所述第一副本信息，具体包括：获取所述第二副本信息中的第三校验和，将所述第三校验和与第二校验和进行比较；在所述第三校验和与所述第二校验和相等时，根据所述第三校验和调整所述第一校验和。优选地，在所述当前负载参数满足第二预设条件时，从第二目标节点中读取第二副本信息，具体包括：在所述当前负载参数满足中负载阈值时，从第二目标节点中读取第二副本信息；相应地，所述将所述第二副本信息与所述第一副本信息进行比较，根据比较结果，调整所述第一副本信息，具体包括：获取所述第二副本信息中的第二副本数据，将所述第二副本数据与第一副本数据进行比较；在所述第二副本数据与第一副本数据相等时，根据所述第二副本数据调整所述第一副本数据。优选地，在所述当前负载参数满足第二预设条件时，从第二目标节点中读取第二副本信息，具体包括：在所述当前负载参数满足低负载阈值时，从第二目标节点中读取第二副本信息；相应地，所述将所述第二副本信息与所述第一副本信息进行比较，根据比较结果，调整所述第一副本信息，具体包括：获取所述第二副本信息中的第二副本数据与第三校验和，将所述第二副本数据与所述第一副本数据以及所述第三校验和与所述第二校验和同时进行比较；在所述第二副本数据与所述第一副本数据以及所述第三校验和与所述第二校验和同时相等时，根据所述第二副本数据调整所述第一副本数据，根据所述第三校验和调整所述第一校验和。此外，为实现上述目的，本专利技术还提出一种基于多次验证的数据处理装置，所述基于多次验证的数据处理装置包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于多次验证的数据处理程序，所述基于多次验证的数据处理程序配置为实现如上文所述的基于多次验证的数据处理方法的步骤。此外，为实现上述目的，本专利技术还提出一种存储介质，所述存储介质上存储有基于多次验证的数据处理程序，所述基于多次验证的数据处理程序被处理器执行时实现如上文所述的基于多次验证的数据处理方法的步骤。本专利技术提出的基于多次验证的数据处理方法通过对多个副本进行多次校验，可以有效的检测和避免校验和误判，提高使用校验和检测数据错误的精度，减少对系统的负面影响。附图说明图1是本专利技术实施例方案涉及的硬件运行环境的存储设备结构示意图；图2为本专利技术基于多次验证的数据处理方法第一实施例的流程示意图；图3为本专利技术数据的写入流程示意图；图4为本专利技术基于多次验证的数据处理方法第二实施例的流程示意图；图5为本专利技术基于多次验证的数据处理方法第三实施例的流程示意图；图6为本专利技术基于多次验证的数据处理方法第四实施例的流程示意图；图7为本专利技术基于多次验证的数据处理方法第五实施例的流程示意图；图8为本专利技术系统在负载情况下的数据处理流程示意图；图9为本专利技术基于多次验证的数据处理方法第六实施例的流程示意图；图10为本专利技术系统在中负载情况下的数据处理流程示意图；图11为本专利技术基于多次验证的数据处理方法第七实施例的流程示意图。本专利技术目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。具体实施方式应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。参照图1，图1为本专利技术实施例方案涉及的硬件运行环境的存储设备结构示意图。如图1所示，该存储设备可以包括：处理器1001，例如CPU，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatilememory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。本领域技术人员可以理解，图1中示出的存储设备结构并不构成对存储设备的限定，可以包括比图示更多或更少的本文档来自技高网...

【技术保护点】
一种基于多次验证的数据处理方法，其特征在于，所述方法包括以下步骤：获取数据读取指令，根据所述读取指令从第一目标节点中读取第一副本信息，所述第一副本信息包括第一副本数据与所述第一副本数据对应的第一校验和；从所述第一副本信息中提取所述第一副本数据，并根据所述第一副本数据生成第二校验和；在所述第一校验和与所述第二校验和不满足第一预设条件时，从第二目标节点中读取第二副本信息；将所述第二副本信息与所述第一副本信息进行比较，根据比较结果，调整所述第一副本信息。

【技术特征摘要】
1.一种基于多次验证的数据处理方法，其特征在于，所述方法包括以下步骤：获取数据读取指令，根据所述读取指令从第一目标节点中读取第一副本信息，所述第一副本信息包括第一副本数据与所述第一副本数据对应的第一校验和；从所述第一副本信息中提取所述第一副本数据，并根据所述第一副本数据生成第二校验和；在所述第一校验和与所述第二校验和不满足第一预设条件时，从第二目标节点中读取第二副本信息；将所述第二副本信息与所述第一副本信息进行比较，根据比较结果，调整所述第一副本信息。2.如权利要求1所述的基于多次验证的数据处理方法，其特征在于，所述获取数据读取指令，根据所述读取指令从第一目标节点中读取第一副本信息之前，所述方法包括：获取待校验数据，将所述待校验数据写入若干第一预设节点，生成与所述若干第一预设节点一一对应的若干副本信息，所述若干第一预设节点包括所述第一目标节点。3.如权利要求2所述的基于多次验证的数据处理方法，其特征在于，所述根据所述读取指令从第一目标节点中读取第一副本信息，具体包括：获取所述若干第一预设节点的各节点信息，提取所述各节点信息中的时延参数，将所述时延参数与时延阈值进行比较；获取小于所述时延阈值的时延参数对应的第一节点，将所述第一节点作为第一目标节点。4.如权利要求3所述的基于多次验证的数据处理方法，其特征在于，将所述第一节点作为第一目标节点之后，所述方法包括：将所述若干第一预设节点中去除所述第一目标节点，获取去除后的若干第二预设节点；相应地，所述从第二目标节点中读取第二副本信息，具体包括：获取所述若干第二预设节点中的各节点信息，提取所述各节点信息中的时延参数，将所述时延参数与时延阈值进行比较；获取小于所述时延阈值的时延参数对应的第二节点，将所述第二节点作为第二目标节点。5.如权利要求1至4中任一项所述的基于多次验证的数据处理方法，其特征在于，在所述第一校验和与所述第二校验和不满足第一预设条件时，从第二目标节点中读取第二副本信息，具体包括：在所述第一校验和与所述第二校验和不满足第一预设条件时，获取当前系统负载参数，在所述当前负载参数满足第二预设条件时，从所述第二目标节点中读取所述第二副本信息。6.如权利要求5所述的基于多次验证的数据处理方法，其特征在于，在所述当前负载参数满足第二预设条件时，从第二...

【专利技术属性】
技术研发人员：李庆，赵辉宇，吴大立，李诗逸，
申请(专利权)人：深信服科技股份有限公司，
类型：发明
国别省市：广东,44