一种数据传输方法、数据传输系统、设备及存储介质技术方案

本申请提出一种数据传输方法、数据传输系统、设备及存储介质，该方法包括：查询历史传输记录，获取历史传输参数；根据历史传输参数，确定当前传输参数；根据当前传输参数，对待传输数据进行初始分片后传输；判断当前传输状态是否正常；若正常，则按照第一预设规则调整当前传输参数，根据调整后的当前传输参数，对剩余的待传输数据进行二次分片后传输。根据历史传输参数确定当前传输参数，再根据当前传输参数对待传输数据进行分片后传输；能够避免固化分片方式造成的过多的分片传输请求尝试，从而减少时间损耗；通过判断当前传输状态动态调整当前传输参数，能够最大限度利用网络带宽，减少传输时间，提升传输效率，提高带宽利用率，减少传输延迟。

【技术实现步骤摘要】
一种数据传输方法、数据传输系统、设备及存储介质
本申请属于数据处理域，具体涉及一种数据传输方法、数据传输系统、设备及存储介质。
技术介绍
随着大数据时代和5G通信时代的到来，生产和生活中各领域产生的数据量呈指数级别增长。在大容量存储设备和技术的持续支持下，承载这些数据的文件容量也与日俱增，大容量数据文件传输逐渐成为各领域的刚需。在一些特定领域和特殊场景下，仍然不得不通过网络传输大容量数据文件。网络数据传输正是信息
中极其重要的组成部分，然而目前的大数据处理技术大多偏向于移动计算而非数据传输，对于无法避免的大容量数据传输而言，尚未有高可用的稳定传输策略。大容量数据传输在高速稳定的网络场景下，例如同局域网或者同一个数据中心进行大容量数据传输时，传输速度和稳定性尚可，此种场景除耗时较长之外，发生传输失败等严重问题的可能性较小。然而，在一些传输带宽比较窄或者带宽不稳定的场景下，例如跨局域网或不同数据中心进行大容量数据传输，若不采用特别处理的技术方案和传输策略，大概率会因为传输中断或者耗费时间太长超时而导致最终无法完成传输。针对这种本文档来自技高网...

【技术保护点】
1.一种数据传输方法，其特征在于，包括：/n查询历史传输记录，获取历史传输参数；/n根据所述历史传输参数，确定当前传输参数；/n根据所述当前传输参数，对待传输数据进行初始分片后传输；/n判断当前传输状态是否正常；/n若正常，则按照第一预设规则调整当前传输参数，根据调整后的当前传输参数，对剩余的所述待传输数据进行二次分片后传输。/n

【技术特征摘要】
1.一种数据传输方法，其特征在于，包括：
查询历史传输记录，获取历史传输参数；
根据所述历史传输参数，确定当前传输参数；
根据所述当前传输参数，对待传输数据进行初始分片后传输；
判断当前传输状态是否正常；
若正常，则按照第一预设规则调整当前传输参数，根据调整后的当前传输参数，对剩余的所述待传输数据进行二次分片后传输。


2.根据权利要求1所述的数据传输方法，其特征在于，所述根据所述历史传输参数，确定当前传输参数，包括：
从所述历史传输参数中，获取一组或多组历史参数向量，
根据获取的所述一组或多组历史参数向量，使用加权平均平滑公式，计算当前传输参数。


3.根据权利要求2所述的数据传输方法，其特征在于，所述历史参数向量和当前传输参数均包括：分片大小、传输线程数、响应时间和/或重试次数。


4.根据权利要求1所述的数据传输方法，其特征在于，所述判断当前传输状态是否正常，包括：
判断待传输数据的分片数据在传输过程中，是否出现超时的异常情况。


5.根据权利要求1所述的数据传输方法，其特征在于，所述若正常，则按照第一预设规则调整当前传输参数，根据调整后的当前传输参数，对剩余的所述待传输数据进行二次分片后传输，包括：
按照第一预设规则增加当前传输参数中的分片大小和传输线程数；
以增加的分片大小和传输线程数为当前传输参数，对剩余的所述传输数据...

【专利技术属性】
技术研发人员：徐伟，徐一鸣，蒋慧军，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：广东;44