一种基于云存储系统实现文件传输协议动态选择的方法技术方案

本发明专利技术公开了一种基于云存储系统实现文件传输协议动态选择的方法，包括步骤：1)获取基础数据，为在云存储系统历史文件传输中对使用TCP协议传输和QUIC协议传输时的耗时统计和网络情况统计，统计数据包括文件大小、网络RTT、网络带宽、网络丢包率、网络抖动和文件传输耗时；2)利用基础数据，建立多元线性回归模型，并计算得到回归方程；3)利用回归方程预测使用QUIC协议文件传输耗时和使用TCP协议文件传输耗时；4)将使用TCP协议和使用QUIC协议传输耗时预测返回给客户端；5)根据耗时预测选择耗时最短的传输协议。本发明专利技术在云存储系统进行文件传输时，动态预测使用不同协议的文件传输耗时，为用户选择最优的文件传输协议提供参考。

【技术实现步骤摘要】
一种基于云存储系统实现文件传输协议动态选择的方法
本专利技术涉及云存储和文件传输的
，尤其是指一种基于云存储系统实现文件传输协议动态选择的方法。
技术介绍
近年来，随着网络传输质量的变化，网络丢包率，网络RTT，网络带宽，网络抖动的相较于TCP设计时均发生了很大的变化。当前基于TCP协议的文件传输，在弱网络环境下出现的歧义重传、队头阻塞、AckDelay、高握手延迟等问题严重影响了弱网络环境下文件传输的质量与速度。基于QUIC协议的文件传输能够解决TCP协议在弱网络环境下出现的歧义重传、队头阻塞，高握手延迟等问题，在弱网络环境下加速文件的传输。鉴于QUIC协议和TCP协议是面向不同的网络环境进行设计的网络传输协议，经过验证，没有任何一种网络协议能够在所有的网络环境下均保证最优的文件传输性能，故可以根据实际网络情况和文件大小预测使用TCP协议和使用QUIC协议的文件传输耗时，选取耗时最短的传输协议进行文件传输。当前，国内外的云存储产品均使用TCP协议进行文件传输，但是当TCP协议在弱网络环境下，其传输性能不能令人满意。QUIC协议在弱网络环境下在进行文件传输表现优于TCP协议，最直观的体现是在相同的高丢包率环境下传输相同大小的文件，使用QUIC协议耗时较短。为了应对复杂多变的网络环境，以及在各种网络环境下为用户提供优质的文件传输服务，应该在不同的网络环境和文件大小下选择不同的文件传输协议进行文件传输。
技术实现思路
本专利技术的目的在于克服现有技术的缺点与不足，提出了一种基于云存储系统实现文件传输协议动态选择的方法，突破传统云存储系统使用单一网络传输协议进行文件传输的问题，通过多元线性回归模型预测使用不同网络传输协议进行文件传输的耗时，动态选择网络传输协议，为用户在文件传输时提供协议选择的建议。为实现上述目的，本专利技术所提供的技术方案为：一种基于云存储系统实现文件传输协议动态选择的方法，包括以下步骤：1)获取基础数据，为在云存储系统历史文件传输中对使用TCP协议传输和QUIC协议传输时的耗时统计和网络情况统计，统计数据包括文件大小、网络RTT、网络带宽、网络丢包率、网络抖动和文件传输耗时；2)利用基础数据，建立多元线性回归模型，并计算得到回归方程；3)利用回归方程预测使用QUIC协议文件传输耗时和使用TCP协议文件传输耗时；4)将使用TCP协议和使用QUIC协议传输耗时预测返回给客户端；5)根据耗时预测选择耗时最短的传输协议。所述步骤2)包括以下步骤：2.1)根据基础数据，建立多元线性回归模型如下：t(x)＝θ0+θ1x1+θ2x2+θ3x3+θ4x4+θ5x5+ε式中，t(x)表示时间因变量，即不同文件大小和不同网络参数下的传输时间耗时；θ0,θ1,θ2,θ3,θ4,θ5为不同文件大小和不同网络参数x1,x2,x3,x4,x5所对应的回归系数；ε表示误差项的随机变量；2.2)按照最小二乘法，使用基础数据分别计算使用TCP协议进行文件传输和使用QUIC协议进行文件传输耗时的回归方程系数，即确定回归参数：Y＝Xβ+ε式中，表示基础数据中测量的传输时间；表示基础数据中影响文件传输耗时的因素，有文件大小、网络RTT、网络带宽、网络丢包率和网络抖动；表示待计算的回归系数；表示误差项随机变量的矩阵；yn表示当影响文件传输耗时的因素的值为xn1，xn2，…,xn5时，使用TCP协议或QUIC协议进行文件传输的耗时；β0,β1,β2,β3,β4,β5分别表示待计算的常数回归系数、文件大小回归系数、网络RTT回归系数、网络带宽回归系数、网络丢包率回归系数和网络抖动回归系数；εn表示第n组训练值的误差项随机变量；根据矩阵方程计算得到使用TCP协议进行文件传输耗时的多元回归线性方程：t(TCP)＝b0+b1x1+b2x2+b3x3+b4x4+b5x5其中，t(tcp)表示使用TCP协议进行文件传输时的因变量；b0,b1,b2,b3,b4,b5为使用TCP协议进行文件传输的基础数据计算得到的回归系数；使用QUIC协议进行文件传输耗时的多元回归线性方程：t(QUIC)＝q0+q1x1+q2x2+q3x3+q4x4+q5x5其中，t(quic)表示使用QUIC协议进行文件传输时的因变量；q0,q1,q2,q3,q4,q5为使用QUIC协议进行文件传输的基础数据计算得到的回归系数。在步骤3)中，对于不同的文件大小，不同的网络环境分别计算使用TCP协议进行文件传输和使用QUIC协议进行文件传输的预测耗时，具体如下：结合当前文件大小、网络RTT、网络带宽、网络丢包率和网络抖动，使用多元线性回归方程t(TCP)、t(QUIC)分别计算预测耗时：t(TCP)＝b0+b1filelength+b2netrtt+b3netloss+b4netshake+b5netbandwidtht(QUIC)＝q0+q1filelength+q2netrtt+q3netloss+q4netshake+q5netbandwidth其中，filelength表示文件大小，netrtt表示网络RTT，netloss表示网络丢包率，netshake表示网络抖动，netbandwidth表示网络带宽；b0,b1,b2,b3,b4,b5表示使用TCP协议传输文件耗时预测回归模型的回归系数；q0,q1,q2,q3,q4,q5表示使用QUIC协议传输文件耗时预测回归模型的回归系数。在步骤4)中，采用可视化的方法将使用TCP协议和使用QUIC协议进行文件传输的耗时预测显示在用户的可视化界面，使客户端能够获得使用TCP协议和QUIC协议进行文件传输的耗时预测值。在步骤5)中，客户端根据得到的对使用TCP协议进行文件传输和使用QUIC协议进行文件传输的耗时预测，选择合适的传输协议进行文件传输；客户端在选择合适的传输协议进行文件传输后，将文件传输数据，包括文件大小、网络RTT、网络带宽、网络丢包率、网络抖动以及传输实际耗时反馈给服务端，服务端通过实际数据修正多线性回归模型的参数，以提高预测准确度。本专利技术与现有技术相比，具有如下优点与有益效果：1、本专利技术打破了当前文件传输中，协议单一的情况，使用QUIC协议和TCP协议进行文件传输。2、本专利技术首次实现了根据网络情况和文件大小实时预测使用QUIC协议和TCP协议进行文件传输的耗时情况。3、本专利技术为用户进行文件传输提供协议选择，并给予耗时提示，使用户根据网络情况和文件大小选择合适的文件传输协议进行文件传输。4、本专利技术方法在云存储系统中具有广泛的使用空间，操作简单，数据便于采集，在加快文件传输方面有很好的前景。附图说明图1为本专利技术方法逻辑流程示意图。具体实施方式下面结合实施例及附图对本专利技术作进一步详细的描述，但本专利技术的实施方式不限于此。如图1所示，本实施例所提供的本文档来自技高网...

【技术保护点】
1.一种基于云存储系统实现文件传输协议动态选择的方法，其特征在于，包括以下步骤：/n1)获取基础数据，为在云存储系统历史文件传输中对使用TCP协议传输和QUIC协议传输时的耗时统计和网络情况统计，统计数据包括文件大小、网络RTT、网络带宽、网络丢包率、网络抖动和文件传输耗时；/n2)利用基础数据，建立多元线性回归模型，并计算得到回归方程；/n3)利用回归方程预测使用QUIC协议文件传输耗时和使用TCP协议文件传输耗时；/n4)将使用TCP协议和使用QUIC协议传输耗时预测返回给客户端；/n5)根据耗时预测选择耗时最短的传输协议。/n

【技术特征摘要】
1.一种基于云存储系统实现文件传输协议动态选择的方法，其特征在于，包括以下步骤：
1)获取基础数据，为在云存储系统历史文件传输中对使用TCP协议传输和QUIC协议传输时的耗时统计和网络情况统计，统计数据包括文件大小、网络RTT、网络带宽、网络丢包率、网络抖动和文件传输耗时；
2)利用基础数据，建立多元线性回归模型，并计算得到回归方程；
3)利用回归方程预测使用QUIC协议文件传输耗时和使用TCP协议文件传输耗时；
4)将使用TCP协议和使用QUIC协议传输耗时预测返回给客户端；
5)根据耗时预测选择耗时最短的传输协议。


2.根据权利要求1所述的一种基于云存储系统实现文件传输协议动态选择的方法，其特征在于，所述步骤2)包括以下步骤：
2.1)根据基础数据，建立多元线性回归模型如下：
t(x)＝θ0+θ1x1+θ2x2+θ3x3+θ4x4+θ5x5+ε
式中，t(x)表示时间因变量，即不同文件大小和不同网络参数下的传输时间耗时；θ0,θ1,θ2,θ3,θ4,θ5为不同文件大小和不同网络参数x1,x2,x3,x4,x5所对应的回归系数；ε表示误差项的随机变量；
2.2)按照最小二乘法，使用基础数据分别计算使用TCP协议进行文件传输和使用QUIC协议进行文件传输耗时的回归方程系数，即确定回归参数：
Y＝Xβ+ε
式中，表示基础数据中测量的传输时间；表示基础数据中影响文件传输耗时的因素，有文件大小、网络RTT、网络带宽、网络丢包率和网络抖动；表示待计算的回归系数；表示误差项随机变量的矩阵；yn表示当影响文件传输耗时的因素的值为xn1，xn2，…,xn5时，使用TCP协议或QUIC协议进行文件传输的耗时；β0,β1,β2,β3,β4,β5分别表示待计算的常数回归系数、文件大小回归系数、网络RTT回归系数、网络带宽回归系数、网络丢包率回归系数和网络抖动回归系数；εn表示第n组训练值的误差项随机变量；
根据矩阵方程计算得到使用TCP协议进行文件传输耗时的多元回归线性方程：
t(TCP)＝b0+b1x1+b2x2+b3x3+b4x4+b5x5
其中，t(tcp)表示使用TCP协议进行文件传输时的因变量；b0,b1,b2,b3,b4,b5为使用TCP协议进行文件传输的基础数据计算得到的回归系数；
使用QUIC协...

【专利技术属性】
技术研发人员：张凌，蔡承平，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：广东;44