文件回源方法和装置制造方法及图纸

技术编号:13569323 阅读:41 留言:0更新日期:2016-08-21 11:18
本发明专利技术公开了一种文件回源方法,该方法包括:边缘服务器接收终端设备发送的多个下载请求,并将多个下载请求合并为一个逻辑请求发送至源服务器;源服务器对接收的逻辑请求进行拆分,生成多个物理连接;针对每个物理连接开启相对应的线程执行下载操作;将下载后的文件数据通过边缘服务器发送至终端设备。上述文件回源方法将对所要访问下载的文件的多个请求转化为一个逻辑请求到源,可以有效减少了回源连接操作,降低了宽带的占用率。本公开还公开了一种文件回源系统。

【技术实现步骤摘要】

本公开涉及数据传输
,特别是涉及一种文件回源方法和装置
技术介绍
当前,现有技术对文件回源主要采用两种方案:一种方案是基于传统RTMP(Real Time Messaging Protocol,实时消息传输协议)的流媒体传输协议,一种是基于HLS(HTTP Live Streaming,Apple的动态码率自适应技术)的文件传输方案。其中,一方面,基于传统RTMP的流媒体传输方案,优点是服务器端在回源的时候可以支持回源合并功能,缺点是流媒体协议并不支持直播回看功能,在功能上没有基于HLS的网络传输协议强大,另一方面RTMP协议在客户端方面支持没有HTTP协议广泛,RTMP需要定制开发客户端;另一方面,HLS协议的基于文件传输方案,优点是将流媒体文件转化成大量小文件,无论客户端还是服务器端都有成熟的解决方案,缺点是由于文件的传输,各个请求之间时独立传输,当大量文件同时访问同一个文件时,如果服务器上没有存储文件,则同时回源请求文件,一方面多个请求都回源获取同一份数据,浪费了宽带,如果源的宽带有限,则多个请求回源,降低了源的处理能力,使得回源请求返回的数据更慢,从而缓存能力下降,后续的请求继续回源,这个正反馈过程会导致雪崩效应的出现。
技术实现思路
基于此,有必要提供一种提高宽带利用率的文件回源方法和系统。一种文件回源方法,该方法包括:边缘服务器接收终端设备发送的多个下载请求,并将所述多个下载请求合并为一个逻辑请求发送至源服务器;所述源服务器对接收的所述逻辑请求进行拆分,生成多个物理连接;针对每个所述物理连接开启相对应的线程执行下载操作;将下载后的文件数据通过所述边缘服务器发送至所述终端设备。在其中一个实施例中,其中,所述边缘服务器接收终端设备发送的多个下载请求之后包括:判断文件是否存在本地磁盘上;若所述文件存在所述本地磁盘,则从所述本地磁盘进行所述文件数据的发送操作;若所述文件不在所述本地磁盘,则继续判断所述文件是否为首次访问。在其中一个实施例中,其中,所述判断所述文件是否为首次访问之后包括:若所述文件不为首次访问,则等待所述文件数据并进行发送操作;若所述文件为首次访问,则对所述文件进行拆分操作。在其中一个实施例中,其中,所述源服务器对接收的所述逻辑请求进行拆分,生成多个物理连接之后包括:对每个所述物理连接建立相对应的数据结构,其中,所述数据结构包括以下至少一种位置信息:所要下载文件的开始位置、结束位置以及当前获取到的数据位置。在其中一个实施例中,其中,各个所述下载请求中均包含有所请求下载的数据所属的目标文件的文件标识和所请求的数据区间,所述下载请求所请求下载的数据均来自同一个目标文件。一种文件回源系统,包括:终端设备、边缘服务器和源服务器;所述边缘服务器,用于接收所述终端设备发送的多个下载请求,并将所述多个下载请求合并为一个逻辑请求发送至所述源服务器;所述源服务器,用于对接收的所述逻辑请求进行拆分,生成多个物理连接,并针对每个所述物理连接开启相对应的线程执行下载操作;所述终端设备,用于接收通过所述边缘服务器传输的下载后的文件数据。在其中一个实施例中,其中,所述边缘服务器还用于判断文件是否存在本地磁盘上;若所述文件存在所述本地磁盘,则从所述本地磁盘进行所述文件数据的发送操作;若所述文件不在所述本地磁盘,则继续判断所述文件是否为首次访问。在其中一个实施例中,其中,所述边缘服务器还用于判断若所述文件不为首次访问,则等待所述文件数据并进行发送操作;若所述文件为首次访问,则对所述文件进行拆分操作。在其中一个实施例中,其中,所述源服务器还用于对每个所述物理连接建立相对应的数据结构,其中,所述数据结构包括以下至少一种位置信息:所要下载文件的开始位置、结束位置以及当前获取到的数据位置。在其中一个实施例中,其中,各个所述下载请求中均包含有所请求下载的数据所属的目标文件的文件标识和所请求的数据区间,所述下载请求所请求下载的数据均来自同一个目标文件。上述文件回源方法和系统,通过边缘服务器接收终端设备发送的多个下载请求,并将多个下载请求合并为一个逻辑请求发送至源服务器;源服务器对接收的逻辑请求进行拆分,生成多个物理连接;针对每个物理连接开启相对应的线程执行下载操作;上述文件回源方法将对所要访问下载的文件的多个请求转化为一个逻辑请求到源,可以有效减少了回源连接操作,降低了宽带的占用率。附图说明图1是一个实施例中文件回源方法的流程示意图;图2是另一个实施例中文件回源方法的流程示意图;图3是一个实施例中文件回源系统的结构示意图。具体实施方式为使本公开的目的、技术方案和优点更加清楚明了,下面结合具体实施方式并参照附图,对本公开进一步详细说明。应该理解,这些描述只是示例性的,而并非要限制本公开的范围。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。参见图1,一个实施例中,提供了一种文件回源方法,该方法包括以下步骤:步骤102,边缘服务器接收终端设备发送的多个下载请求。本实施例中,各个下载请求中均包含有所请求下载的数据所属的目标文件的文件标识和所请求的数据区间,下载请求所请求下载的数据均来自同一个目标文件。步骤104,源服务器对接收的逻辑请求进行拆分,生成多个物理连接。本实施例中,对每个物理连接建立相对应的数据结构,其中,数据结构包括以下至少一种位置信息:所要下载文件的开始位置、结束位置以及当前获取到的数据位置。步骤106,针对每个物理连接开启相对应的线程执行下载操作。本实施例中,每个启动的线程循环下载文件数据并维护上述预先建立的数据结构,同时维护线程状态信息以及针对每个物理连接的连接状态信息。步骤108,将下载后的文件数据通过边缘服务器发送至终端设备。本实施例中,每个线程将下载得到的文件数据发送给各个等待的物理连接,各个等待的连接则可以将文件数据发送给各个终端设备。上述文件回源方法,通过边缘服务器接收终端设备发送的多个下载请求,并将多个下载请求合并为一个逻辑请求发送至源服务器;源服务器对接收的逻辑请求进行拆分,生成多个物理连接;针对每个物理连接开启相对应的线程执行下载操作;上述文件回源方法将对所要访问下载的文件的多个请求转化为一个逻辑请求到源,可以有效减少了回源连接操作,降低了宽带的占用率。在一个实施例中,边缘服务器接收终端设备发送的多个下载请求之后包
括:判断文件是否存在本地磁盘上;若文件存在本地磁盘,则从本地磁盘进行文件数据的发送操作;若文件不在本地磁盘,则继续判断文件是否为首次访问。在一个实施例中,判断文件是否为首次访问之后包括:若文件不为首次访问,则等待文件数据并进行发送操作;若文件为首次访问,则对文件进行拆分操作。如图2所示,在一个实施例中,提供了一种文件回源方法,该方法包括以下步骤:步骤202,边缘服务器接收终端设备发送的与文件相关联的多个下载请求,判断文件是否存在本地磁盘上。本实施例中,各个下载请求中均包含有所请求下载的数据所属的目标文件的文件标识和所请求的数据区间,下载请求所请求下载的数据均来自同一个目标文件。具体的,边缘服务器接收终端设备发送的多个下载请求之后包括:判断文件是否存在本地磁盘上;若文件存在本地磁盘,则从本地磁盘进行文件数据的发送操作;若文件不本文档来自技高网
...

【技术保护点】
一种文件回源方法,该方法包括:边缘服务器接收终端设备发送的多个下载请求,并将所述多个下载请求合并为一个逻辑请求发送至源服务器;所述源服务器对接收的所述逻辑请求进行拆分,生成多个物理连接;针对每个所述物理连接开启相对应的线程执行下载操作;将下载后的文件数据通过所述边缘服务器发送至所述终端设备。

【技术特征摘要】
1.一种文件回源方法,该方法包括:边缘服务器接收终端设备发送的多个下载请求,并将所述多个下载请求合并为一个逻辑请求发送至源服务器;所述源服务器对接收的所述逻辑请求进行拆分,生成多个物理连接;针对每个所述物理连接开启相对应的线程执行下载操作;将下载后的文件数据通过所述边缘服务器发送至所述终端设备。2.根据权利要求1所述的方法,其中,所述边缘服务器接收终端设备发送的多个下载请求之后包括:判断文件是否存在本地磁盘上;若所述文件存在所述本地磁盘,则从所述本地磁盘进行所述文件数据的发送操作;若所述文件不在所述本地磁盘,则继续判断所述文件是否为首次访问。3.根据权利要求2所述的方法,其中,所述判断所述文件是否为首次访问之后包括:若所述文件不为首次访问,则等待所述文件数据并进行发送操作;若所述文件为首次访问,则对所述文件进行拆分操作。4.根据权利要求1所述的方法,其中,所述源服务器对接收的所述逻辑请求进行拆分,生成多个物理连接之后包括:对每个所述物理连接建立相对应的数据结构,其中,所述数据结构包括以下至少一种位置信息:所要下载文件的开始位置、结束位置以及当前获取到的数据位置。5.根据权利要求1所述的方法,其中,各个所述下载请求中均包含有所请求下载的数据所属的目标文件的文件标识和所请求的数据区间,所述下载请求所请求下载的数据均...

【专利技术属性】
技术研发人员:李洪福
申请(专利权)人:乐视控股北京有限公司乐视云计算有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1