System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种数据处理方法、装置及电子设备制造方法及图纸_技高网

一种数据处理方法、装置及电子设备制造方法及图纸

技术编号:41264175 阅读:4 留言:0更新日期:2024-05-11 09:21
本申请涉及一种数据处理方法、装置及电子设备,涉及数据处理技术领域,用于提高数据传输的可靠性。该数据处理方法应用于数据存储装置,数据存储装置包括第一控制器和第二控制器,第一控制器与第二控制器分别设置有N个网卡控制器,一个网卡控制器用于连接一条通信链路,N为大于或等于2的整数,其中:第一控制器接收业务系统发送的业务数据集合;第一控制器从N个网卡控制器中确定出正常运行的目标网卡控制器,并根据目标网卡控制器,从业务数据集合中确定出待发送的第一业务数据子集合;第一控制器通过目标网卡控制器所连接的目标通信链路向第二控制器发送第一业务数据子集合,以使第二控制器对第一业务数据子集合进行处理。

【技术实现步骤摘要】

本申请涉及数据处理,尤其涉及一种数据处理方法、装置及电子设备


技术介绍

1、数据处理在现代设备中具有重要作用,尤其是在一些业务场景下,例如图像采集,各种各样的业务服务均需要大量的数据支撑。而针对业务采集或产生的数据,需要及时进行处理并存储,以便于后续调用。

2、目前,为了提高数据处理效率,避免由于控制器异常导致数据处理中断的情况出现,提供了一种双控双活存储设备。该双控双活存储设备包括两个控制器,当一个控制器出现异常时,另一个控制器仍能继续进行数据处理。在两个控制器均正常运行的情况下,即可协作完成数据处理。但在这种情况下,若两个控制器之间的通信交互出现异常,则无法继续协作完成数据处理,甚至于无法正常完成两个控制器之间的业务接管。因此,如何确保两个控制器之间的数据传输的可靠性成为目前亟须解决的问题。


技术实现思路

1、本申请提供一种数据处理方法、装置及电子设备,用于提高数据传输的可靠性。

2、第一方面,本申请实施例提供一种数据处理方法,应用于数据存储装置,所述数据存储装置包括第一控制器和第二控制器,所述第一控制器与所述第二控制器分别设置有n个网卡控制器,一个网卡控制器用于连接一条通信链路,n为大于或等于2的整数,其中:所述第一控制器接收业务系统发送的业务数据集合;所述第一控制器从所述n个网卡控制器中确定出正常运行的目标网卡控制器,并根据所述目标网卡控制器,从所述业务数据集合中确定出待发送的第一业务数据子集合;所述第一控制器通过所述目标网卡控制器所连接的目标通信链路向所述第二控制器发送所述第一业务数据子集合,以使所述第二控制器对所述第一业务数据子集合进行处理。

3、在本申请实施例中,数据存储装置的第一控制器和第二控制器中分别设置n个网卡控制器,第一控制器与第二控制器中连接同一通信链路的网卡控制器可称为一对网卡控制器,每一对网卡控制器形成一个独立网络。在第一控制器向第二控制器发送第一业务数据子集合时,可通过全部或部分n对独立网络发送。进而即使在一对网络出现异常的情况下,其他正常运行的网络仍可继续发送第一业务数据子集合,不会出现由于第一控制器与第二控制器之间仅由一条通信链路传输业务数据,当该条通信链路出现异常时,导致第一控制器与第二控制器之间无法进行数据传输的问题,即提高了数据传输的可靠性。

4、在一种可能的实施方式中,所述第一控制器通过所述目标网卡控制器所连接的目标通信链路向所述第二控制器发送所述第一业务数据子集合,包括:所述第一控制器基于所述n个网卡控制器所连接的通信链路与负载能力的对应关系,确定每个目标通信链路的负载能力;所述第一控制器基于所述每个目标通信链路的负载能力以及所述第一业务数据子集合,为所述每个目标通信链路分配与所述每个目标通信链路的负载能力匹配的业务数据量;所述第一控制器通过所述每个目标通信链路向所述第二控制器发送与所述每个目标通信链路匹配的业务数据量。

5、在该实施方式中,在向第二控制器发送第一业务数据子集合时,可基于每个目标通信链路的负载能力,分配待发送的业务数据量,从而可避免由于负载不均衡,导致一些目标通信链路负载过大导致发送堵塞或一些通信链路得不到充分利用的情况出现。

6、在一种可能的实施方式中,根据所述目标网卡控制器,从所述业务数据集合中确定出待发送的第一业务数据子集合,包括:所述第一控制器确定所述目标网卡控制器对应的目标通信链路的数量;所述第一控制器基于所述目标通信链路的数量,确定向所述第二控制器发送的第一数据量;所述第一控制器根据所述第一数据量,从所述业务数据集合中确定出所述第一业务数据子集合。

7、在该实施方式中,根据目标网卡控制器对应的目标通信链路的数量,确定向第二控制器发送的业务数据量,可有效避免由于第一业务数据子集合包括的业务数据量过大,导致目标通信链路堵塞,或者由于第一业务数据子集合包括的业务数据量过小,导致目标通信链路无法得到充分利用的情况出现。

8、在一种可能的实施方式中,基于所述目标通信链路的数量,确定向所述第二控制器发送的第一数据量,包括:若所述目标通信链路的数量超过第一阈值,则所述第一控制器将预设数据量确定为所述第一数据量;若所述目标通信链路的数量未超过第一阈值,则所述第一控制器根据所述目标通信链路的数量对所述预设数据量进行调整,将调整后的预设数据量确定为所述第一数据量,所述预设数据量大于所述调整后的预设数据量。

9、在该实施方式中,在目标网卡控制器的数量较少时,由于目标网卡控制器对应的目标通信链路的可负载总和减小,因此,为了避免目标通信链路的负载过大,降低传输效率,可减少向第二控制器发送的业务数据量,从而减小目标通信链路发送堵塞的风险,提高数据传输的可靠性。

10、在一种可能的实施方式中,所述第一控制器通过所述目标网卡控制器所连接的目标通信链路向所述第二控制器发送所述第一业务数据子集合,包括:当所述目标网卡控制器包括业务类型的网卡控制器时,则所述第一控制器利用预设的加密模块,对所述第一业务数据子集合进行加密,所述业务类型的网卡控制器用于传输业务数据;通过所述目标通信链路向所述第二控制器发送加密后的第一业务数据子集合。

11、在该实施方式中,在目标网卡控制器中包括业务类型的网卡控制器时,则通过预设的加密模块对传输的第一业务数据子集合进行加密后,再发送给第二控制器,从而提高业务数据传输的安全性。

12、第二方面,本申请实施例提供一种数据处理装置,包括:应用于数据存储装置,所述数据存储装置包括数据处理装置和第二控制器,所述数据处理装置与所述第二控制器分别设置有n个网卡控制器,一个网卡控制器用于连接一条通信链路,n为大于或等于2的整数;所述数据处理装置,包括:收发模块,用于接收业务系统发送的业务数据集合;确定模块,用于从所述n个网卡控制器中确定出正常运行的目标网卡控制器,并根据所述目标网卡控制器,从所述业务数据集合中确定出待发送的第一业务数据子集合;所述收发模块,还用于通过所述目标网卡控制器所连接的目标通信链路向所述第二控制器发送所述第一业务数据子集合,以使所述第二控制器对所述第一业务数据子集合进行处理。

13、在一种可能的实施方式中,所述收发模块,具体用于:基于所述n个网卡控制器所连接的通信链路与负载能力的对应关系,确定每个目标通信链路的负载能力;基于所述每个目标通信链路的负载能力以及所述第一业务数据子集合,为所述每个目标通信链路分配与所述每个目标通信链路的负载能力匹配的业务数据量;通过所述每个目标通信链路向所述第二控制器发送与所述每个目标通信链路匹配的业务数据量。

14、在一种可能的实施方式中,所述确定模块,具体用于:确定所述目标网卡控制器对应的目标通信链路的数量;基于所述目标通信链路的数量,确定向所述第二控制器发送的第一数据量;根据所述第一数据量,从所述业务数据集合中确定出所述第一业务数据子集合。

15、在一种可能的实施方式中,所述确定模块,具体用于:若所述目标通信链路的数量超过第一阈值本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,应用于数据存储装置,所述数据存储装置包括第一控制器和第二控制器,所述第一控制器与所述第二控制器分别设置有N个网卡控制器,一个网卡控制器用于连接一条通信链路,N为大于或等于2的整数,其中:

2.根据权利要求1所述的方法,其特征在于,所述第一控制器通过所述目标网卡控制器所连接的目标通信链路向所述第二控制器发送所述第一业务数据子集合,包括:

3.根据权利要求1所述的方法,其特征在于,根据所述目标网卡控制器,从所述业务数据集合中确定出待发送的第一业务数据子集合,包括:

4.根据权利要求3所述的方法,其特征在于,基于所述目标通信链路的数量,确定向所述第二控制器发送的第一数据量,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述第一控制器通过所述目标网卡控制器所连接的目标通信链路向所述第二控制器发送所述第一业务数据子集合,包括:

6.一种数据处理装置,其特征在于,应用于数据存储装置,所述数据存储装置包括数据处理装置和第二控制器,所述数据处理装置与所述第二控制器分别设置有N个网卡控制器,一个网卡控制器用于连接一条通信链路,N为大于或等于2的整数;所述数据处理装置,包括:

7.根据权利要求6所述的装置,其特征在于,所述收发模块,具体用于:

8.根据权利要求6或7所述的装置,其特征在于,所述收发模块,具体用于:

9.一种电子设备,其特征在于,包括:

10.一种计算机可读存储介质,其特征在于,所述计算机存储介质存储有计算机指令,当所述计算机指令在计算机上运行时,使得计算机执行如权利要求1-5任一项所述的方法。

...

【技术特征摘要】

1.一种数据处理方法,其特征在于,应用于数据存储装置,所述数据存储装置包括第一控制器和第二控制器,所述第一控制器与所述第二控制器分别设置有n个网卡控制器,一个网卡控制器用于连接一条通信链路,n为大于或等于2的整数,其中:

2.根据权利要求1所述的方法,其特征在于,所述第一控制器通过所述目标网卡控制器所连接的目标通信链路向所述第二控制器发送所述第一业务数据子集合,包括:

3.根据权利要求1所述的方法,其特征在于,根据所述目标网卡控制器,从所述业务数据集合中确定出待发送的第一业务数据子集合,包括:

4.根据权利要求3所述的方法,其特征在于,基于所述目标通信链路的数量,确定向所述第二控制器发送的第一数据量,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述第一控制器通过...

【专利技术属性】
技术研发人员:冯国宝朱盛波蔡剑峰
申请(专利权)人:浙江大华技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1