数据处理方法及装置制造方法及图纸

本申请提供数据处理方法及装置，其中所述数据处理方法包括：接收目标边缘节点的当前测量带宽值，并获取当前测量带宽值对应的当前参考滤波信息和当前参考校正信息；根据所述当前参考滤波信息和所述当前参考校正信息获取当前滤波信息和当前校正信息；根据当前测量带宽值和当前滤波信息计算当前真实带宽值；更新当前滤波信息和当前校正信息，将更新结果作为下一测量带宽值对应的参考滤波信息和参考校正信息。通过基于滤波信息对频繁变化的带宽值数据进行滤波，并结合校正信息使得滤波结果更加平滑，输出更为准确的真实带宽值，减小真实带宽值与实际带宽值之间的误差，降低真实带宽值的抖动性。的抖动性。的抖动性。

【技术实现步骤摘要】
数据处理方法及装置


[0001]本申请涉及网络通信
，特别涉及一种数据处理方法。本申请同时涉及一种数据处理装置，一种计算设备，以及一种计算机可读存储介质。

技术介绍

[0002]随着计算机网络的发展，越来越多的用户访问网站以获取资源，为了缓解网络拥塞、提高用户访问网站的响应速度，通过构建CDN(Content Delivery Network)内容分发网络，依靠部署在各地的边缘服务器，可以使用户就近获取所需内容，降低网络拥塞，提高用户访问响应速度和命中率。
[0003]目前，在CDN网络的调度系统给用户分配节点时，会根据节点的实时测量带宽值来调整调度次数的增减策略，但是实时测量的带宽值的测量会因为噪声和测量方式的影响，与实际带宽值存在一定误差，表现出很强的抖动性。因此，如何对实时测量带宽值进行平滑处理，减小实时测量带宽值和实际带宽值之间的误差是目前亟需解决的问题。

技术实现思路

[0004]有鉴于此，本申请实施例提供了一种数据处理方法。本申请同时涉及一种数据处理装置，一种计算设备，以及一种计算机可读存储介质，以解决现有技术中存在的测量的带宽值抖动性强的问题。
[0005]根据本申请实施例的第一方面，提供了一种数据处理方法，包括：
[0006]接收目标边缘节点的当前测量带宽值，并获取当前测量带宽值对应的当前参考滤波信息和当前参考校正信息；
[0007]根据所述当前参考滤波信息和所述当前参考校正信息获取当前滤波信息和当前校正信息；
[0008]根据所述当前测量带宽值和所述当前滤波信息计算当前真实带宽值；
[0009]更新所述当前滤波信息和所述当前校正信息，将更新结果作为下一测量带宽值对应的参考滤波信息和参考校正信息。
[0010]根据本申请实施例的第二方面，提供了一种数据处理装置，包括：
[0011]接收模块，被配置为接收目标边缘节点的当前测量带宽值，并获取当前测量带宽值对应的当前参考滤波信息和当前参考校正信息；
[0012]获取模块，被配置为根据所述当前参考滤波信息和所述当前参考校正信息获取当前滤波信息和当前校正信息；
[0013]计算模块，被配置为根据所述当前测量带宽值和所述当前滤波信息计算当前真实带宽值；
[0014]更新模块，被配置为更新所述当前滤波信息和所述当前校正信息，将更新结果作为下一测量带宽值对应的参考滤波信息和参考校正信息。
[0015]根据本申请实施例的第三方面，提供了一种计算设备，包括存储器、处理器及存储
在存储器上并可在处理器上运行的计算机指令，所述处理器执行所述计算机指令时实现所述数据处理方法的步骤。
[0016]根据本申请实施例的第四方面，提供了一种计算机可读存储介质，其存储有计算机指令，该计算机指令被处理器执行时实现所述数据处理方法的步骤。
[0017]本申请提供的数据处理方法，包括：接收目标边缘节点的当前测量带宽值，并获取当前测量带宽值对应的当前参考滤波信息和当前参考校正信息；根据所述当前参考滤波信息和所述当前参考校正信息获取当前滤波信息和当前校正信息；根据所述当前测量带宽值和所述当前滤波信息计算当前真实带宽值；更新所述当前滤波信息和所述当前校正信息，将更新结果作为下一测量带宽值对应的参考滤波信息和参考校正信息。
[0018]本申请一实施例实现了通过基于滤波信息对频繁变化的测量带宽值数据进行滤波，并结合校正信息使得滤波结果更加平滑，计算出更为准确的真实测量值，将真实测量值作为实时带宽值，减小实时带宽值与实际带宽值之间的误差，降低实时带宽值的抖动性，使得后续CDN调度系统在根据当前真实带宽值进行调度时，能够更加准确的做出调度决策。
附图说明
[0019]图1是本申请一实施例提供的一种数据处理方法的流程图；
[0020]图2是本申请一实施例提供的一种应用于带宽数据滤波的数据处理方法的处理流程图；
[0021]图3是本申请一实施例提供的一种数据处理装置的结构示意图；
[0022]图4是本申请一实施例提供的一种计算设备的结构框图。
具体实施方式
[0023]在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本申请内涵的情况下做类似推广，因此本申请不受下面公开的具体实施的限制。
[0024]在本申请一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请一个或多个实施例。在本申请一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本申请一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
[0025]应当理解，尽管在本申请一个或多个实施例中可能采用术语第一、第二等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请一个或多个实施例范围的情况下，第一也可以被称为第二，类似地，第二也可以被称为第一。取决于语境，如在此所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
[0026]首先，对本申请一个或多个实施例涉及的名词术语进行解释。
[0027]内容分发网络：CDN(Content Delivery Network)，CDN是构建在现有网络基础之上的智能虚拟网络，依靠部署在各地的边缘服务器，通过中心平台的负载均衡、内容分发、调度等功能模块，使用户就近获取所需内容，降低网络拥塞，提高用户访问响应速度和命中
率。
[0028]CDN调度：用来对CDN节点进行流量分配的服务，例如当有用户请求时，CDN调度系统执行CDN调度服务，分配一个合适的CDN边缘节点给用户用于访问。
[0029]带宽值：数据在传输过程中，每秒传输的数据流量大小；是各厂商计算流量费用的一种关键指标。
[0030]真实带宽值：边缘节点客观服务的带宽值；在本申请一实施例中真实带宽值由观测带宽值和预测算法综合计算出来的带宽值，最终的输出结果为真实带宽值，即在调度时使用的是真实带宽值，当前时刻的真实带宽值可以作为下一时刻的观测带宽值。
[0031]测量带宽值：采用各种测量方式获得的带宽值。
[0032]卡尔曼滤波：(Kalman filtering)是一种利用线性系统状态方程，通过系统输入输出观测数据，对系统状态进行最优估计的算法。由于观测数据中包括系统中的噪声和干扰的影响，所以最优估计也可看作是滤波过程。
[0033]数据滤波：数据滤波是去除噪声还原真实数据的一种数据处理技术。
[0034]在CDN调度系统需要进行节点调度、节点的带宽控制，即需要使带宽值处于合适的数值区间，若节点带宽值太低，会造成资源浪费；若节点带宽值太高，会造本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：接收目标边缘节点的当前测量带宽值，并获取当前测量带宽值对应的当前参考滤波信息和当前参考校正信息；根据所述当前参考滤波信息和所述当前参考校正信息获取当前滤波信息和当前校正信息；根据所述当前测量带宽值和所述当前滤波信息计算当前真实带宽值；更新所述当前滤波信息和所述当前校正信息，将更新结果作为下一测量带宽值对应的参考滤波信息和参考校正信息。2.如权利要求1所述的数据处理方法，其特征在于，所述参考滤波信息包括滤波误差信息、滤波观测信息、滤波预测信息、参考带宽值；所述参考校正信息包括连续异常点信息、拟合条件信息、历史误差队列信息。3.如权利要求2所述的数据处理方法，其特征在于，根据所述当前测量带宽值和所述当前滤波信息计算当前真实带宽值，包括：获取所述滤波误差信息、所述滤波预测信息和所述参考带宽值；根据所述滤波误差信息和所述滤波预测信息计算初始滤波误差信息；根据所述参考带宽值、所述滤波观测信息、所述滤波预测信息、所述初始滤波误差信息和所述当前测量带宽值计算当前真实带宽值。4.如权利要求2所述的数据处理方法，其特征在于，根据所述当前测量带宽值和所述当前滤波信息计算当前真实带宽值之后，还包括：更新所述当前真实带宽值为下一测量带宽值对应的参考带宽值。5.如权利要求3所述的数据处理方法，其特征在于，更新所述当前滤波信息，包括：根据所述初始滤波误差信息、所述滤波观测信息、所述滤波预测信息更新所述滤波误差信息。6.如权利要求2所述的数据处理方法，其特征在于，更新所述当前校正信息，包括：根据所述当前测量带宽值和所述当前真实带宽值计算当前误差带宽值；获取所述当前校正信息中的历史误差队列信息和拟合条件信息；根据所述历史误差队列信息和所述拟合条件信息和所述当前误差带宽值更新所述当前校正信息。7.如权利要求6所述的数据处理方法，其特征在于，根据所述历史误差队列信息和所述拟合条件信息和所述当前误差带宽值更新所述当前校正信息，包括：在所述历史误差队列信息不满足所述拟合条件信息的情况下，将所述当前误差带宽值加入至所述历史误差队列信息中；在所述历史误差队列信息满足所述拟合条件信息的情况下，根据所述历史误差队列信息和所述拟合条件信息获得误差分布信息，根据所述误差分布信息和所述当前误差带宽值更新所述当前校正信息。8.如权利要求7所述的数据处理方法，其特征在于，根据所述历史误差队列信息和所述拟合条件信息获得误差分布信息，包括：获取所述历史误差队列信息中的每个历史误差带宽值；拟合每个历史误差带宽值获得误差分布信息。
9.如权利要求7所述的数据处理方法，其特征在于，根据所述误差分布信息和所述当前误差带宽值更新所述当前校正信息，包括：根据所述误差分布信息确定误差范...

【专利技术属性】
技术研发人员：吕玉红，王盛，唐君行，陈娟，
申请(专利权)人：上海哔哩哔哩科技有限公司，
类型：发明
国别省市：