数据资源获取的方法、装置和系统制造方法及图纸

本发明专利技术公开了一种数据资源获取的方法、装置和系统。其中，该方法包括：获取终端节点发送的数据请求，其中，数据请求，用于请求数据资源的资源标识和节点列表；根据数据请求中的请求参数，生成数据资源的资源标识；根据资源标识进行检索，得到数据资源的资源信息；将资源信息返回至终端节点。本发明专利技术解决了现有技术中在资源更新的过程中容易因为资源数据更新的不同步，容易产生脏数据的技术问题。

Methods, devices and systems of data resource acquisition

【技术实现步骤摘要】
数据资源获取的方法、装置和系统
本专利技术涉及互联网技术应用领域，具体而言，涉及一种数据资源获取的方法、装置和系统。
技术介绍
在基于对等计算机网络(peertopeer，简称P2P)技术的内容分发网络中，经常会涉及到资源刷新的问题，比如PC端游戏升级包的更新，Android端应用市场的安装包apk的分发，视频点播中的视频重转码。刷新前后，由于资源变了，但是URL没有变，所以必须把旧的资源从系统中剔除掉，把新的资源推下，在这个过程中必须保证不能有脏数据。基于P2P技术的内容分发和传统的CDN，最大的区别就是，P2P的节点是很分散，同时又是高动态的，节点随时有可能上线，或下线，很难统一管理起来，即，由于三级P2P节点多为移动用户侧(手机)，因此难以被统一地管理(刷新)。因此，如何快速高效的解决资源刷新的问题，是P2P技术商业化过程中，面临的一个巨大的挑战。目前，常见的资源刷新方案，都是需要用户干预的，整个方案涉及到管控系统，调度系统，节点系统等几部分。主要过程如下：1.用户在管控系统的界面中，输入需要刷新的URL，和新的资源。2.管控系统将用户输入的信息，推送到服务器(调度系统)中。3.服务器(调度系统)，更新URL对应资源的资源信息，包括当前刷新的时间点。4.上传节点，发布资源到调度系统上，调度系统根据资源下载的时间和刷新的时间做比较，如果是刷新前下载的资源，则回复节点需要删除该资源。5.下载节点，向调度系统请求资源信息时，可以获取到对应资源的更新时间。6.下载节点，向上传节点请求数据的时候，上传节点会判断资源的更新时间和本地的下载时间是否符合要求，如果是在更新之前下的资源，会拒绝服务。以此，来避免刷新前后的资源互传，导致脏数据。针对上述现有技术中在资源更新的过程中容易因为资源数据更新的不同步，容易产生脏数据的问题，目前尚未提出有效的解决方案。
技术实现思路
本专利技术实施例提供了一种数据资源获取的方法、装置和系统，以至少解决现有技术中在资源更新的过程中容易因为资源数据更新的不同步，容易产生脏数据的技术问题。根据本专利技术实施例的一个方面，提供了一种数据资源获取的方法，包括：资源服务器获取终端节点发送的数据请求，其中，数据请求，用于请求数据资源的资源标识和节点列表；资源服务器根据数据请求中的请求参数，生成数据资源的资源标识；资源服务器根据资源标识进行检索，得到数据资源的资源信息；资源服务器将资源信息返回至终端节点。可选的，资源服务器根据数据请求中的请求参数，生成数据资源的资源标识包括：在数据请求中的请求参数包括域名信息、统一资源定位符、资源大小、第一特征值和客户端标识的情况下，资源服务器根据域名信息获取解析规则，并依据解析规则对统一资源定位符进行解析，获取特征信息；资源服务器根据特征信息、资源大小和第一特征值生成字符串；资源服务器对字符串进行特征运算，得到第二特征值；资源服务器依据第二特征值和客户端标识生成资源标识。可选的，资源服务器根据数据请求中的请求参数，生成数据资源的资源标识包括：在数据请求中的请求参数包括域名信息、统一资源定位符和客户端标识的情况下，资源服务器根据域名信息获取解析规则，并依据解析规则对统一资源定位符进行解析，获取特征信息；资源服务器根据特征信息生成字符串；资源服务器对字符串进行特征运算，得到特征值；资源服务器依据特征值和客户端标识生成资源标识。进一步地，可选的，资源服务器根据域名信息获取解析规则包括：资源服务器根据域名信息在规则库中进行检索；在检索到解析规则的情况下，资源服务器依据解析规则对统一资源定位符进行解析；在未检索到解析规则的情况下，资源服务器向终端节点返回响应消息，其中，响应消息包括：数据资源禁止以P2P模式获取。可选的，资源服务器根据资源标识进行检索，得到数据资源的资源信息包括：资源服务器根据资源标识在资源库中进行检索，得到资源信息；其中，资源信息还包括：数据资源的特征值和资源标识。可选的，资源服务器将资源信息返回至终端节点包括：资源服务器将资源信息返回至终端节点，以使得终端节点通过P2P下载方式根据资源信息完成数据资源下载。可选的，在资源服务器将资源信息返回至终端节点之后，该方法还包括：在终端节点根据资源信息完成数据资源下载的情况下，资源服务器接收终端节点发送的资源发布请求；资源服务器解析资源发布请求，得到资源信息，其中，资源信息包括：资源标识，资源大小，数据资源的特征值，分块校验信息，终端节点信息；资源服务器根据资源标识查询节点列表，并依据查询结果向终端节点返回响应消息。进一步地，可选的，依据查询结果向终端节点返回响应消息包括：若在节点列表中未查询到资源标识，则资源服务器将资源信息添加至节点列表，并向终端节点反馈响应消息，其中，响应消息，用于指示数据资源发布成功；若在节点列表中查询到资源标识，则资源服务器将节点列表中数据资源的特征值与资源信息中的数据资源的特征值进行比较，并依据比较结果向终端节点反馈响应消息。可选的，依据比较结果向终端节点反馈响应消息包括：若节点列表中数据资源的特征值与资源信息中的数据资源的特征值相同，则资源服务器将资源信息中的节点信息添加至节点列表中，并向终端节点反馈响应消息，其中，响应消息，用于指示数据资源发布成功；若节点列表中数据资源的特征值与资源信息中的数据资源的特征值不同，则资源服务器向终端节点反馈响应消息，其中，响应消息，用于指示数据资源发布失败。根据本专利技术实施例的另一方面，还提供了一种数据资源获取的方法，包括：终端节点向资源服务器发送数据请求，其中，数据请求，用于请求数据资源的资源标识和节点列表；终端节点接收资源服务器依据数据请求返回的资源信息；终端节点依据资源信息生成数据下载任务，并执行下载。可选的，在终端节点向资源服务器发送数据请求之前，该方法还包括：终端节点接收播发器发送的数据资源请求；在数据资源请求包括统一资源定位符和数据范围的情况下，终端节点依据统一资源定位符获取域名信息；终端节点依据域名信息获得内容分发网络服务器的网络地址，并依据网络地址向内容分发网络服务器发送数据资源请求；终端节点接收内容分发网络服务器返回的响应信息，并依据响应信息得到数据资源的资源大小和数据资源的头数据和尾数据。进一步地，可选的，终端节点向资源服务器发送数据请求包括：终端节点依据头数据和尾数据进行计算，得到第一特征值；终端节点将第一特征值、域名信息、统一资源定位符和资源大小进行封装，生成数据请求；终端节点向资源服务器发送数据请求。可选的，终端节点依据资源信息生成数据下载任务，并执行下载包括：终端节点根据播发器发送的数据资源请求中的数据资源的数据范围和已接收的数据进行计算，得到待下载的数据区间；终端节点拆分数据区间，拆分后的每个数据区间分别对应一个下载任务；终端节点从资源信息中的节点列表中获取目标终端节点；终端节点依据目标终端节点的节点信息和下载任务生成会话信息，并将会话信息存储于会话列表中；终端节点向目标终端节点发送本文档来自技高网...

【技术保护点】
1.一种数据资源获取的方法，包括：/n资源服务器获取终端节点发送的数据请求，其中，所述数据请求，用于请求数据资源的资源标识和节点列表；/n所述资源服务器根据所述数据请求中的请求参数，生成所述数据资源的资源标识；/n所述资源服务器根据所述资源标识进行检索，得到所述数据资源的资源信息；/n所述资源服务器将所述资源信息返回至所述终端节点。/n

【技术特征摘要】
1.一种数据资源获取的方法，包括：
资源服务器获取终端节点发送的数据请求，其中，所述数据请求，用于请求数据资源的资源标识和节点列表；
所述资源服务器根据所述数据请求中的请求参数，生成所述数据资源的资源标识；
所述资源服务器根据所述资源标识进行检索，得到所述数据资源的资源信息；
所述资源服务器将所述资源信息返回至所述终端节点。


2.根据权利要求1所述的数据资源获取的方法，所述资源服务器根据所述数据请求中的请求参数，生成所述数据资源的资源标识包括：
在所述数据请求中的请求参数包括域名信息、统一资源定位符、资源大小、第一特征值和客户端标识的情况下，所述资源服务器根据所述域名信息获取解析规则，并依据所述解析规则对所述统一资源定位符进行解析，获取特征信息；
所述资源服务器根据所述特征信息、所述资源大小和所述第一特征值生成字符串；
所述资源服务器对所述字符串进行特征运算，得到第二特征值；
所述资源服务器依据所述第二特征值和所述客户端标识生成所述资源标识。


3.根据权利要求1所述的数据资源获取的方法，所述资源服务器根据所述数据请求中的请求参数，生成所述数据资源的资源标识包括：
在所述数据请求中的请求参数包括域名信息、统一资源定位符和客户端标识的情况下，所述资源服务器根据所述域名信息获取解析规则，并依据所述解析规则对所述统一资源定位符进行解析，获取特征信息；
所述资源服务器根据所述特征信息生成字符串；
所述资源服务器对所述字符串进行特征运算，得到特征值；
所述资源服务器依据所述特征值和所述客户端标识生成所述资源标识。


4.根据权利要求2或3所述的数据资源获取的方法，所述资源服务器根据所述域名信息获取解析规则包括：
所述资源服务器根据所述域名信息在规则库中进行检索；
在检索到所述解析规则的情况下，所述资源服务器依据所述解析规则对所述统一资源定位符进行解析；
在未检索到所述解析规则的情况下，所述资源服务器向所述终端节点返回响应消息，其中，所述响应消息包括：所述数据资源禁止以P2P模式获取。


5.根据权利要求4所述的数据资源获取的方法，所述资源服务器根据所述资源标识进行检索，得到所述数据资源的资源信息包括：
所述资源服务器根据所述资源标识在资源库中进行检索，得到所述资源信息；其中，所述资源信息还包括：所述数据资源的特征值和所述资源标识。


6.根据权利要求1所述的数据资源获取的方法，所述资源服务器将所述资源信息返回至所述终端节点包括：所述资源服务器将所述资源信息返回至所述终端节点，以使得所述终端节点通过P2P下载方式根据所述资源信息完成数据资源下载。


7.根据权利要求1或6所述的数据资源获取的方法，在所述资源服务器将所述资源信息返回至所述终端节点之后，所述方法还包括：
在所述终端节点根据所述资源信息完成数据资源下载的情况下，所述资源服务器接收所述终端节点发送的资源发布请求；
所述资源服务器解析所述资源发布请求，得到资源信息，其中，所述资源信息包括：资源标识，资源大小，数据资源的特征值，分块校验信息，所述终端节点信息；
所述资源服务器根据所述资源标识查询节点列表，并依据查询结果向所述终端节点返回响应消息。


8.根据权利要求7所述的数据资源获取的方法，所述依据查询结果向所述终端节点返回响应消息包括：
若在所述节点列表中未查询到所述资源标识，则所述资源服务器将所述资源信息添加至所述节点列表，并向所述终端节点反馈响应消息，其中，所述响应消息，用于指示数据资源发布成功；
若在所述节点列表中查询到所述资源标识，则所述资源服务器将所述节点列表中所述数据资源的特征值与所述资源信息中的数据资源的特征值进行比较，并依据比较结果向所述终端节点反馈响应消息。


9.根据权利要求8所述的数据资源获取的方法，所述依据比较结果向所述终端节点反馈响应消息包括：
若所述节点列表中所述数据资源的特征值与所述资源信息中的数据资源的特征值相同，则所述资源服务器将所述资源信息中的所述节点信息添加至所述节点列表中，并向所述终端节点反馈响应消息，其中，所述响应消息，用于指示所述数据资源发布成功；
若所述节点列表中所述数据资源的特征值与所述资源信息中的数据资源的特征值不同，则所述资源服务器向所述终端节点反馈响应消息，其中，所述响应消息，用于指示所述数据资源发布失败。


10.一种数据资源获取的方法，包括：
终端节点向资源服务器发送数据请求，其中，所述数据请求，用于请求数据资源的资源标识和节点列表；
所述终端节点接收所述资源服务...

【专利技术属性】
技术研发人员：石杰，
申请(专利权)人：阿里巴巴集团控股有限公司，
类型：发明
国别省市：开曼群岛;KY