数据处理方法、装置、电子设备和介质制造方法及图纸

本公开提供了一种数据处理方法、装置、电子设备和介质，涉及计算机技术领域，尤其涉及P2P网络传输技术领域。具体实现方案为：在获取的资源的种子数量小于等于数量阈值的情况下，针对资源的每个种子，根据资源的资源标识，确定与种子对应的索引信息；在资源的种子数量大于数量阈值的情况下，针对资源的每个种子，根据资源的资源标识和种子的位置标识，确定与种子对应的索引信息；以及根据与每个种子对应的索引信息，存储每个种子的种子数据；其中，资源的种子指示了点对点网络中任一节点存储的资源的副本。源的副本。源的副本。

【技术实现步骤摘要】
数据处理方法、装置、电子设备和介质


[0001]本公开涉及计算机
，尤其涉及P2P网络传输


技术介绍

[0002]P2P(Peer to Peer，点对点)网络，即对等计算机网络。P2P网络中的每个节点的地位都是对等的，每个节点既可以作为服务器，为其他节点提供服务，同时也可以作为客户端，接受其他节点提供的服务。

技术实现思路

[0003]本公开提供了一种数据处理方法、装置、设备以及存储介质。
[0004]根据本公开的一方面，提供了一种数据处理方法，包括：在获取的资源的种子数量小于等于数量阈值的情况下，针对所述资源的每个种子，根据所述资源的资源标识，确定与所述种子对应的索引信息；在所述资源的种子数量大于数量阈值的情况下，针对所述资源的每个种子，根据所述资源的资源标识和所述种子的位置标识，确定与所述种子对应的索引信息；以及根据与所述每个种子对应的索引信息，存储所述每个种子的种子数据；其中，资源的种子指示了点对点网络中任一节点存储的所述资源的副本。
[0005]根据本公开的另一方面，提供了一种数据处理装置，包括：第一确定模块，用于在获取的资源的种子数量小于等于数量阈值的情况下，针对所述资源的每个种子，根据所述资源的资源标识，确定与所述种子对应的索引信息，其中，资源的种子为点对点网络中任一节点存储的所述资源的副本；第二确定模块，用于在所述资源的种子数量大于数量阈值的情况下，针对所述资源的每个种子，根据所述资源的资源标识和所述种子的位置标识，确定与所述种子对应的索引信息；以及存储模块，用于根据与所述每个种子对应的索引信息，存储所述每个种子的种子数据。
[0006]本公开的另一个方面提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本公开实施例所示的方法。
[0007]根据本公开实施例的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行本公开实施例所示的方法。
[0008]根据本公开实施例的另一方面，提供了一种计算机程序产品，计算机程序，所述计算机程序在被处理器执行时实现本公开实施例所示的方法。
[0009]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0010]附图用于更好地理解本方案，不构成对本公开的限定。其中：
[0011]图1示意性示出了根据本公开实施例的可以应用数据处理方法的示例性应用场景；
[0012]图2示意性示出了根据本公开实施例的数据处理方法的流程图；
[0013]图3A示意性示出了根据本公开另一实施例的数据处理方法的流程图；
[0014]图3B示意性示出了根据本公开另一实施例的数据处理方法的流程图；
[0015]图4示意性示出了根据本公开另一实施例的数据处理方法的流程图；
[0016]图5示意性示出了根据本公开另一实施例的数据处理方法示意图；
[0017]图6示意性示出了根据本公开实施例的数据处理装置的示意性框图；以及
[0018]图7示出了可以用来实施本公开的实施例的示例电子设备的示意性框图。
具体实施方式
[0019]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0020]下面参考图1对本公开实施例的数据处理方法的应用场景进行详细说明。
[0021]图1示意性示出了根据本公开实施例的可以应用数据处理方法的示例性应用场景100。需要注意的是，图1所示仅为可以应用本公开实施例的应用场景的示例，以帮助本领域技术人员理解本公开的
技术实现思路
，但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
[0022]如图1所示，根据本公开实施例的应用场景100可以包括种子服务器10、数据库服务器20、节点31、32和33。
[0023]其中，节点31、32和33例如可以为P2P网络中的节点。节点31、32和33可以用于存储资源，每个节点中存储的资源可以相同也可以不同。示例性地，本实施例中，资源例如可以包括文本文件、多媒体文件、可执行文件、压缩文件等等各种类型的数据。
[0024]根据本公开的实施例，一个资源的副本可以分别存储在多个节点中，这些节点中存储的资源副本可以称为该资源的种子。在下载资源时，可以从存储有该资源的节点中选择任意一个或多个，从选择的节点中获取该资源。
[0025]种子服务器10用于管理节点31、32和33中各种种子的管理服务器。种子服务器10可以与节点31、32和33进行交互，以接收或发送数据等。数据库服务器20可以用于存储数据，数据库服务器20可以包括MySQL数据库、Redis数据库等。种子服务器10可以与数据库服务器20进行交互，以将数据写入数据库服务器20或者从数据库服务器20中读取数据等。
[0026]根据本公开的实施例，当节点31、32和33拥有种子时会将种子的种子数据上报给种子服务器10，种子服务器10可以将种子数据转存至数据库服务器20。后续节点31、32和33以预设时间周期向种子服务器10上报种子数据，以与种子服务器10同步种子数据。例如，预设时间周期可以是1小时。在这个过程中，若种子服务器10中的种子数据丢失，可以从数据库服务器20中获取该种子数据，以实现数据恢复。
[0027]根据本公开的另一些实施例，种子服务器10、数据库服务器20、节点31、32和33可以是物理服务器也可以是云服务器。其中云服务器又称为云计算服务器或云主机，是云计
算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务(
″
Virtual Private Server
″
，或简称
″
VPS
″
)中，存在的管理难度大，业务扩展性弱的缺陷。服务器也可以为分布式系统的服务器，或者是结合了区块链的服务器。
[0028]需要说明的是，本公开实施例所提供的数据处理方法一般可以由种子服务器10执行。相应地，本公开实施例所提供的数据处理装置一般可以设置于种子服务器10中。本公开实施例所提供的数据处理方法也可以由不同于种子服务器10且能够与数据库服务器20、节点31、32、33和/或种子服务器10通信的服务器或服务器集群执行。相应地，本公开实施例所提供的数据处理装置也可以设置于不同于种子服务器10且能够与数据库服务器20、节点31、32、33和/或种子服务器10通信的服本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，包括：在获取的资源的种子数量小于等于数量阈值的情况下，针对所述资源的每个种子，根据所述资源的资源标识，确定与所述种子对应的索引信息；在所述资源的种子数量大于数量阈值的情况下，针对所述资源的每个种子，根据所述资源的资源标识和所述种子的位置标识，确定与所述种子对应的索引信息；以及根据与所述每个种子对应的索引信息，存储所述每个种子的种子数据；其中，所述资源的种子指示了点对点网络中任一节点存储的所述资源的副本。2.根据权利要求1所述的方法，其中，所述根据所述索引信息，存储所述每个种子的种子数据，包括：根据所述索引信息和所述种子数据，生成键值数据，其中，所述键值数据包括键值和键名，所述键名是根据所述索引信息来确定的，所述键值是根据所述种子数据来确定的；以及将所述键值数据存储至目标位置。3.根据权利要求2所述的方法，其中，所述目标位置包括第一本地存储器；所述方法还包括：在所述第一本地存储器中的键值数据发生改变的情况下，将所述键值数据发生变化的部分存储至远程存储器。4.根据权利要求3所述的方法，还包括：在所述资源的访问频率小于预设频率阈值的情况下，将所述第一本地存储器中与所述资源对应的键值数据转存至远程存储器，并删除所述第一本地存储器中的所述键值数据。5.根据权利要求1
‑
4任意一项所述的方法，还包括：对于所述第一本地存储器中的键值数据，以预设时间周期将所述键值数据备份至第二本地存储器；以及响应于针对目标键值数据的数据恢复指令，将所述第二本地存储器中所述目标键值数据的备份数据写入所述第一本地存储器中。6.根据权利要求5所述的方法，其中，所述将所述键值数据备份至第二本地存储器包括：当所述第二本地存储器中没有存储所述键值数据的备份数据的情况下，创建所述键...

【专利技术属性】
技术研发人员：邵思瑶，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：