System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于DPU的数据传输速率的控制方法、装置及数据处理器制造方法及图纸_技高网

基于DPU的数据传输速率的控制方法、装置及数据处理器制造方法及图纸

技术编号:41306394 阅读:3 留言:0更新日期:2024-05-13 14:51
本公开涉及基于DPU的数据传输速率的控制方法、装置及数据处理器,包括:接收存储集群基于初始数据读取请求反馈的数据流量,初始数据读取请求是处理器在第一时刻按照初始发送速率发送至存储集群的;检测数据流量对应可靠性指标数据;分析可靠性指标数据,得到初始发送速率对应的目标调节策略;基于目标调节策略对初始发送速率进行调节得到目标发送速率,以使处理器在第二时刻按照目标发送速率向存储集群发送数据读取请求,第二时刻为第一时刻的下一时刻。本公开实现了根据可靠性指标数据动态调整处理器发送数据读取请求的速率,能够避免出现网络拥塞的情况。另外,还能够间接的控制存储集群输出数据流量的速率,保障存储集群的存储性能。

【技术实现步骤摘要】

本公开涉及通信,具体涉及一种基于dpu的数据传输速率的控制方法、装置及数据处理器。


技术介绍

1、块存储在云计算发展中扮演中非常重要的角色。随着业务的演进,数据处理器(data processing unit,缩写dpu)作为硬件虚拟化的底座,显得尤为重要;dpu对存储性能的诉求非常多;但是存储流量具有突发性,导致在dpu的端节点上有很明显的丢包,性能很不稳定。

2、目前通常的做法是存储集群采用tcp流控的方案来避免出现拥塞丢包的情况,由于tcp的拥塞控制算法是针对存储集群输出的数据流量进行拥塞控制,例如:在存储集群出现丢包的情况下,通过tcp流控方法仅仅能够降低存储集群输出数据流量的速率,无法缓解存储集群的压力,导致存储集群的性能达不到预期。


技术实现思路

1、有鉴于此,本公开实施例提供了一种基于dpu的数据传输速率的控制方法、装置及数据处理器,以解决通过tcp流控方法仅仅能够降低存储集群输出数据流量的速率,无法缓解存储集群的压力,导致存储集群的性能达不到预期的问题。

2、第一方面,本公开实施例提供了一种基于dpu的数据传输速率的控制方法,所述方法包括:

3、检测dpu接收到的数据流量,其中,所述dpu用于在第一时刻按照初始发送速率向存储集群发送初始数据读取请求,所述数据流量是所述存储集群在接收到初始数据读取请求后向所述dpu反馈的;

4、检测所述数据流量对应可靠性指标数据;

5、分析所述可靠性指标数据,得到所述初始发送速率对应的目标调节策略;

6、基于所述目标调节策略对所述初始发送速率进行调节得到目标发送速率,以使所述dpu在第二时刻按照所述目标发送速率向所述存储集群发送数据读取请求,其中,所述第二时刻为所述第一时刻的下一时刻。

7、第二方面,本公开实施例提供了一种基于dpu的数据传输速率的控制装置,所述装置包括:

8、接收模块,用于检测dpu接收到的数据流量,其中,所述dpu用于在第一时刻按照初始发送速率向存储集群发送初始数据读取请求,所述数据流量是所述存储集群在接收到初始数据读取请求后向所述dpu反馈的;

9、检测模块,用于检测所述数据流量对应可靠性指标数据;

10、分析模块,用于分析所述可靠性指标数据,得到所述初始发送速率对应的目标调节策略;

11、调节模块,用于基于所述目标调节策略对所述初始发送速率进行调节得到目标发送速率,以使所述dpu在第二时刻按照所述目标发送速率向所述存储集群发送数据读取请求,其中,所述第二时刻为所述第一时刻的下一时刻。

12、第三方面,本公开实施例提供了一种数据处理器,所述数据处理器包括:片上系统以及现场可编程门阵列,其中,所述片上系统与所述现场可编程门阵列之间通过总线连接,所述现场可编程门阵列包括:速率适配器以及调节器;

13、所述片上系统,用于生成数据读取请求,并将所述数据读取请求通过所述总线传递至所述现场可编程门阵列中的速率适配器;

14、所述速率适配器,用于在第一时刻按照初始发送速率向存储集群发送所述数据读取请求;

15、所述调节器,用于接收存储集群基于初始数据读取请求反馈的数据流量;检测所述数据流量对应可靠性指标数据;分析所述可靠性指标数据,得到所述初始发送速率对应的目标调节策略;基于所述目标调节策略对所述初始发送速率进行调节得到目标发送速率,以使所述数据处理器在第二时刻按照所述目标发送速率向所述存储集群发送数据读取请求,其中,所述第二时刻为所述第一时刻的下一时刻。

16、第四方面,本公开实施例提供了一种电子设备,包括:存储器和处理器,存储器和处理器之间互相通信连接,存储器中存储有计算机指令,处理器通过执行计算机指令,从而执行上述第一方面或其对应的任一实施方式的方法。

17、第五方面,本公开实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机指令,计算机指令用于使计算机执行上述第一方面或其对应的任一实施方式的方法。

18、本公开实施例提供的方法通过检测存储集群基于数据读取请求所反馈数据流量的可靠性指标数据,并根据可靠性指标数据确定调节策略,最终按照调节策略调节下一时刻向存储集群发送数据读取请求的速率,以此实现了根据可靠性指标数据动态调整处理器发送数据读取请求的速率,能够有效避免出现网络拥塞的情况。另外,还能够间接的控制存储集群输出数据流量的速率,进一步保障了存储集群的存储性能。

本文档来自技高网...

【技术保护点】

1.一种基于DPU的数据传输速率的控制方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述可靠性指标数据包括单位时间内的丢包率;

3.根据权利要求2所述的方法,其特征在于,所述基于所述目标调节策略对所述初始发送速率进行调节得到目标发送速率,包括:

4.根据权利要求2所述的方法,其特征在于,所述基于所述目标调节策略对所述初始发送速率进行调节得到目标发送速率,包括:

5.根据权利要求3所述的方法,其特征在于,所述获取第一调节因子,包括:

6.根据权利要求4所述的方法,其特征在于,所述获取第二调节因子,包括:

7.一种基于DPU的数据传输速率的控制装置,其特征在于,所述装置包括:

8.一种数据处理器,其特征在于,所述数据处理器包括:片上系统以及现场可编程门阵列,其中,所述片上系统与所述现场可编程门阵列之间通过总线连接,所述现场可编程门阵列包括:速率适配器以及调节器;

9.一种电子设备,其特征在于,包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机指令,所述计算机指令用于使计算机执行权利要求1至6中任一项所述的方法。

...

【技术特征摘要】

1.一种基于dpu的数据传输速率的控制方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述可靠性指标数据包括单位时间内的丢包率;

3.根据权利要求2所述的方法,其特征在于,所述基于所述目标调节策略对所述初始发送速率进行调节得到目标发送速率,包括:

4.根据权利要求2所述的方法,其特征在于,所述基于所述目标调节策略对所述初始发送速率进行调节得到目标发送速率,包括:

5.根据权利要求3所述的方法,其特征在于,所述获取第一调节因子,包括:

6.根据权利要求4所述...

【专利技术属性】
技术研发人员:薄守静蒋佳立刘韬彭茜茜王瑶宝王彬王剑
申请(专利权)人:北京火山引擎科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1