System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种提升多对象高性能传输可靠性的方法技术_技高网

一种提升多对象高性能传输可靠性的方法技术

技术编号:40975678 阅读:4 留言:0更新日期:2024-04-18 21:23
本发明专利技术公开一种提升多对象高性能传输可靠性的方法,涉及发明专利技术web前端开发技术领域。该提升多对象高性能传输可靠性的方法与传统的文件对象传输方案不同的是,本方法解决了上传速度慢,无法并发传输和操作对象,以及对错误场景无法监控和处理并自动恢复问题,实现了高性能多对象并发传输的解决方案,通过结合应用开发工具和服务端开发平台,设计实现传输文件流的调度和监控,实现更加丰富和原生的功能模块,通过使用应用开发工具和服务端开发平台访问和调用本地操作系统提供的接口和文件流读写,在网络中断能够关闭应用时保存记录用户传输进度,在下次进入应用时提供自动重试续传的功能,提供更稳定的传输体验。

【技术实现步骤摘要】

本专利技术涉及专利技术web前端开发,具体为一种提升多对象高性能传输可靠性的方法


技术介绍

1、伴随着互联网技术的发展和网络传输速度质的飞跃,同时基于浏览器不断提升性能的前提下,云计算、大数据新一代信息技术飞速发展,用户对于文件传输云端的快捷稳定有了更大的需求,因此在后端存储性能提升的同时,如何提升网页端和客户端对于文件处理和传输的稳定性、高性能是需要攻破的技术难关;

2、在一般的前端上传控件中,无法对传输列表进行全局监控和操作,对于多文件对象的传输通常存在着传输速度慢,传输过程不稳定,过于依赖网络环境,无法自动监控错误和重试问题。对于云空间网盘的网页端和客户端来说,需要更全面、稳定、快速的技术方案实现,为了解决上述技术难点,本专利实现了一种提升多对象高性能传输可靠性的方法。


技术实现思路

1、(一)解决的技术问题

2、针对现有技术的不足,本专利技术公开了一种提升多对象高性能传输可靠性的方法,以解决上述
技术介绍
中提出的问题。

3、(二)技术方案

4、为实现以上目的,本专利技术通过以下技术方案予以实现:一种提升多对象高性能传输可靠性的方法,包括以下步骤:

5、步骤一,任务数据接收,“数据接收”是与“数据发送”相对应的功能,它接收的是通过“数据发送”功能产生出的数据文件,以用来更新和合并现有数据库中的数据,使得发送方和接收方的数据保持数据同步;

6、步骤二,传输任务数据预处理,数据预处理是指对数据进行数据挖掘之前,先对原始数据进行必要的清洗、集成、转换、离散和规约一系列的处理工作,以达到挖掘算法进行知识获取研究所要求的最低规范和标准;

7、步骤三,数据存储,数据以某种格式记录在计算机内部和外部存储介质上,数据存储要命名,这种命名要反映信息特征的组成含义,数据流反映了系统中流动的数据,表现出动态数据的特征,数据存储反映系统中静止的数据,表现出静态数据的特征;

8、步骤四,数据收集,数据收集它通过模拟用户操作,自动化地获取所需数据,并将数据存储在指定的数据库中。

9、优选的,所述步骤一属于全局任务接收分配模块,该模块负责实时监听系统各个模块发出的上传能够下载传输任务消息,该模块采用观察者的设计模式,在全局组件中注册订阅全局事件总线。

10、优选的,所述使用发布者身份进行全局通知触发,能够提高传输的并发性能,所述本方法支持同时对多个任务进行并发传输和状态监听,在获取到传输对象文件流时,创建树形结构存储文件的原始流对象和传输信息,设定自定义并发传输数量。

11、优选的,所述根据设定自定义并发传输数量,根据传输文件的大小、修改时间和历史传输记录进行任务分配,通过拖车司机,拖离事件监听网页的拖拽事件,通过获取上传文件信息,始终为空的情况时,根据目标对象属性是文件夹能够文件做出差异化处理。

12、优选的,所述步骤二中属于传输任务预处理模块,传输任务预处理的意义在于通过判断是否在服务端存在历史传输记录缓存,存在则直接返回存储桶的文件地址,进行秒传,极大地提高速度和用户体验,同时也节约了网络带宽。

13、优选的,所述无历史传输记录,则使用new sparkmd5.获取文件二进制数据和新的文件阅读器计算文件md5作为唯一标识符进行传输。

14、优选的,所述步骤三属于存储模块,存储模块使用vuex和indexeddb方法,全局状态管理模块对传输列表的状态进行同步更新和记录,首先根据当前登录账号使用者辩证码和仓库钥匙动态创建前端数据库,之后定义数据库的版本和表结构,与状态仓库的传输列表同步绑定,在创建传输任务时,将文件本地静态路径存入数据库,刷新网页能够关闭浏览器重新打开。

15、优选的,所述在用户刷新网页能够关闭浏览器重新打开之后,根据读取和解析数据库中的传输进度和本地文件路径数据,通过应用开发工具调用读写文件,监听网络输入输出的文件系统模块对文件进行读写,随后双向同步在vuex中进行页面渲染,通过双向同步在vuex中进行页面渲染能够直接存入文件流导致的浏览器的内存,通过双向同步在vuex中进行页面渲染能够实时缓存文件流信息的功能。

16、优选的,所述步骤四属于异常监听和日志收集模块,在传输过程中,通过上传分片etag请求报错信息,监测本地源文件是否在传输过程中被修改,若被修改则需要提示,中断上传流程,保障对象传输的唯一性和正确性,开发客户端应用通过日志管理模块进行配置。

17、优选的,所述开发客户端应用需要对系统的异常和错误日志进行收集和上报,本地日志使用日志管理库进行监听收集,日志管理库使用方式为通过日志总结模块安装,日志管理模块进行配置,输出本地日志文件,主进程和渲染进程输出日志使用日志管理库提供的信息与错误以及警告方法。

18、本专利技术公开了一种提升多对象高性能传输可靠性的方法,其具备的有益效果如下:

19、1、该提升多对象高性能传输可靠性的方法,与传统的文件对象传输方案不同的是,本方法解决了上传速度慢,无法并发传输和操作对象,以及对错误场景无法监控和处理并自动恢复问题,实现了高性能多对象并发传输的解决方案。

20、2、该提升多对象高性能传输可靠性的方法,原网页受限于浏览器web技术限制,无法访问和调用本地操作系统提供的接口和文件流读写,通过结合应用开发工具和服务端开发平台,设计实现传输文件流的调度和监控,实现更加丰富和原生的功能模块。

21、3、该提升多对象高性能传输可靠性的方法,解决了上传速度慢,无法并发传输和操作对象,以及对错误场景无法监控和处理并自动恢复问题,通过使用应用开发工具和服务端开发平台访问和调用本地操作系统提供的接口和文件流读写,在网络中断能够关闭应用时保存记录用户传输进度,在下次进入应用时提供自动重试续传的功能,提供更稳定的传输体验。

22、4、该提升多对象高性能传输可靠性的方法,多对象传输的并发传输方法和任务分配机制,秒传和文件裁切传输方法及设计方案,基于vuex结合indexeddb的本地持久化传输对象缓存方案以及错误监听和上报的流程方法及设计方案,通过前端数据库缓存传输对象本地文件路径,在重新开启任务时通过读取文件绝对路径,获取文件流并计算从中断位置进行切片续传的设计方案。

本文档来自技高网...

【技术保护点】

1.一种提升多对象高性能传输可靠性的方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种提升多对象高性能传输可靠性的方法,其特征在于:所述步骤一属于全局任务接收分配模块,该模块负责实时监听系统各个模块发出的上传能够下载传输任务消息,该模块采用观察者的设计模式,在全局组件中注册订阅全局事件总线。

3.根据权利要求2所述的一种提升多对象高性能传输可靠性的方法,其特征在于:使用发布者身份进行全局通知触发,能够提高传输的并发性能,本方法支持同时对多个任务进行并发传输和状态监听,在获取到传输对象文件流时,创建树形结构存储文件的原始流对象和传输信息,设定自定义并发传输数量。

4.根据权利要求3所述的一种提升多对象高性能传输可靠性的方法,其特征在于:根据设定自定义并发传输数量,根据传输文件的大小、修改时间和历史传输记录进行任务分配,通过拖车司机,拖离事件监听网页的拖拽事件,通过获取上传文件信息,始终为空的情况时,根据目标对象属性是文件夹能够文件做出差异化处理。

5.根据权利要求1所述的一种提升多对象高性能传输可靠性的方法,其特征在于:所述步骤二属于传输任务预处理模块,传输任务预处理通过判断是否在服务端存在历史传输记录缓存,存在则直接返回存储桶的文件地址,进行秒传。

6.根据权利要求5所述的一种提升多对象高性能传输可靠性的方法,其特征在于:无历史传输记录,则使用new SparkMD5.获取文件二进制数据和新的文件阅读器计算文件MD5作为唯一标识符进行传输。

7.根据权利要求1所述的一种提升多对象高性能传输可靠性的方法,其特征在于:所述步骤三中的数据存储过程属于存储模块,存储模块使用vuex和indexedDB方法,全局状态管理模块对传输列表的状态进行同步更新和记录,首先根据当前登录账号使用者辩证码和仓库钥匙动态创建前端数据库,之后定义数据库的版本和表结构,与状态仓库的传输列表同步绑定,在创建传输任务时,将文件本地静态路径存入数据库,刷新网页能够关闭浏览器重新打开。

8.根据权利要求7所述的一种提升多对象高性能传输可靠性的方法,其特征在于:浏览器重新打开之后,根据读取和解析数据库中的传输进度和本地文件路径数据,通过应用开发工具调用读写文件,监听网络输入输出的文件系统模块对文件进行读写,随后双向同步在vuex中进行页面渲染,通过双向同步在vuex中进行页面渲染能够直接存入文件流导致的浏览器的内存,通过双向同步在vuex中进行页面渲染能够实时缓存文件流信息的功能。

9.根据权利要求1所述的一种提升多对象高性能传输可靠性的方法,其特征在于:所述步骤四属于异常监听和日志收集模块,在传输过程中,通过上传分片Etag请求报错信息,监测本地源文件是否在传输过程中被修改,若被修改则提示,中断上传流程,保障对象传输的唯一性和正确性,开发客户端应用通过日志管理模块进行配置。

10.根据权利要求9所述的一种提升多对象高性能传输可靠性的方法,其特征在于:开发客户端应用需要对系统的异常和错误日志进行收集和上报,本地日志使用日志管理库进行监听收集,日志管理库使用方式为通过日志总结模块安装,日志管理模块进行配置,输出本地日志文件,主进程和渲染进程输出日志使用日志管理库提供的信息与错误以及警告方法。

...

【技术特征摘要】

1.一种提升多对象高性能传输可靠性的方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种提升多对象高性能传输可靠性的方法,其特征在于:所述步骤一属于全局任务接收分配模块,该模块负责实时监听系统各个模块发出的上传能够下载传输任务消息,该模块采用观察者的设计模式,在全局组件中注册订阅全局事件总线。

3.根据权利要求2所述的一种提升多对象高性能传输可靠性的方法,其特征在于:使用发布者身份进行全局通知触发,能够提高传输的并发性能,本方法支持同时对多个任务进行并发传输和状态监听,在获取到传输对象文件流时,创建树形结构存储文件的原始流对象和传输信息,设定自定义并发传输数量。

4.根据权利要求3所述的一种提升多对象高性能传输可靠性的方法,其特征在于:根据设定自定义并发传输数量,根据传输文件的大小、修改时间和历史传输记录进行任务分配,通过拖车司机,拖离事件监听网页的拖拽事件,通过获取上传文件信息,始终为空的情况时,根据目标对象属性是文件夹能够文件做出差异化处理。

5.根据权利要求1所述的一种提升多对象高性能传输可靠性的方法,其特征在于:所述步骤二属于传输任务预处理模块,传输任务预处理通过判断是否在服务端存在历史传输记录缓存,存在则直接返回存储桶的文件地址,进行秒传。

6.根据权利要求5所述的一种提升多对象高性能传输可靠性的方法,其特征在于:无历史传输记录,则使用new sparkmd5.获取文件二进制数据和新的文件阅读器计算文件md5作为唯一标识符进行传输。

7.根据权利要求1所述的一种提升多对象高性能传输可靠性的方法,其...

【专利技术属性】
技术研发人员:陈俊滔徐忠勇黄甲吴景城杨煜
申请(专利权)人:天翼云科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1