一种基于数据基类型的资源调配方法和服务器组成比例

技术编号:15437287 阅读:92 留言:0更新日期:2017-05-25 19:26
本发明专利技术涉及通信领域,具体涉及一种基于数据基类型的资源调配方法和服务器。该方法可包括:根据预测时间窗采集数据样本集,统计得到每个时间区段内每种数据类型的数据的样本值;根据目标数据类型的数据的至少两个样本值计算目标数据类型的数据的趋势基值,根据趋势基值从至少两种数据类型中确定数据基类型,计算数据基类型的数据在不同数据样本中的趋势基值的平均值,若平均值大于预设的趋势阈值,则确定依赖数据基类型的数据类型,申请用以处理数据基类型的数据的逻辑单元。本发明专利技术实施例能够解决现有技术中不能动态申请各个关联数据类型的关联规则逻辑单元的问题,并且由于一次性完成多个逻辑单元的申请,还能够提高逻辑单元的申请效率。

Resource allocation method and server based on data base type

The invention relates to the field of communication, in particular to a resource allocation method and a server based on a data base type. The method may include: according to the predicted time window acquisition data set, statistics of each data type of each time zone data samples; at least two samples according to the target data type value tendency based target data type calculation data value, according to the trend of base value to determine the data type from at least two data types, the average trend based data base type calculation data in different data values in a sample, if the average value is greater than the preset threshold value trend, is determined to rely on data base type data type, logic unit for processing a data base data type application. The embodiment of the invention can not solve the dynamic association rule application logic unit each related data types of the problem in the prior art, and the complete logical unit application, but also can improve the efficiency of the application logic unit.

【技术实现步骤摘要】
一种基于数据基类型的资源调配方法和服务器
本专利技术涉及通信领域,具体涉及一种基于数据基类型的资源调配方法和服务器。
技术介绍
在当前互联网高度发达的时代,各种分布式并行系统大多以集群的方式对外提供服务。集群的处理能力强且具有水平扩展的能力,从而可以应对海量数据处理请求。一个集群的规模一旦确定下来,对于这个集群的资源也就随之确定,如何更智能的调配集群的资源以便发挥集群的最大能力,避免在网络数据的压力下紧急调配逻辑单元而产生的系统卡顿或者丢包变成一件急需的工作。其中,逻辑单元是指分配用以对一个任务进行处理的资源时的资源分配单位,一个逻辑单元中包括预定大小的CPU,内存,磁盘资源等等,逻辑单元可以用来对数据进行特征提取、缓存、按特定规则分析,常用于大数据分析及挖掘领域。其中按特定规则分析包括数据关联分析,例如对数据进行关联时间或者报表的分析。目前一种常见的逻辑单元配置方式是根据数据的数据类型,预先设置用于处理每种数据类型的逻辑单元,以便于在处理不同的数据类型时,能够调用对应的逻辑单元进行处理。但是这种静态配置方式无法很好的应对多变的网络应用场景,因此出现了一种动态申请逻辑单元的方式,也就本文档来自技高网...
一种基于数据基类型的资源调配方法和服务器

【技术保护点】
一种基于数据类型的资源的调配方法,其特征在于,包括:根据预测时间窗采集数据样本集,所述预测时间窗包含至少两个互不重叠的子时间窗,每个所述子时间窗分别对应所述数据样本集中的一个数据样本,每个所述数据样本中的数据属于至少两种数据类型,所述数据样本集中的各数据样本均属于相同种类的数据类型,在每个所述数据样本中每种所述数据类型的数据包括至少两个样本值,所述子时间窗包括至少两个大小相同、有时间先后关系的时间区段,一个所述时间区段对应每种所述数据类型的数据的一个样本值:统计得到每个时间区段内每种所述数据类型的数据的样本值;针对所述数据样本集中的目标数据样本中的目标数据类型的数据,根据所述目标数据类型的数据...

【技术特征摘要】
1.一种基于数据类型的资源的调配方法,其特征在于,包括:根据预测时间窗采集数据样本集,所述预测时间窗包含至少两个互不重叠的子时间窗,每个所述子时间窗分别对应所述数据样本集中的一个数据样本,每个所述数据样本中的数据属于至少两种数据类型,所述数据样本集中的各数据样本均属于相同种类的数据类型,在每个所述数据样本中每种所述数据类型的数据包括至少两个样本值,所述子时间窗包括至少两个大小相同、有时间先后关系的时间区段,一个所述时间区段对应每种所述数据类型的数据的一个样本值:统计得到每个时间区段内每种所述数据类型的数据的样本值;针对所述数据样本集中的目标数据样本中的目标数据类型的数据,根据所述目标数据类型的数据的至少两个样本值计算所述目标数据类型的数据的趋势基值,所述趋势基值反映所述目标数据类型的数据的样本值在所述目标数据样本对应的子时间窗中的变化趋势,所述目标数据样本为所述数据样本集中的任一数据样本,所述目标数据类型为所述目标数据样本中的任一数据类型;根据所述趋势基值从所述至少两种数据类型中确定数据基类型,所述至少两种数据类型中除所述数据基类型之外的数据类型中至少一种数据类型依赖所述数据基类型,依赖所述数据基类型的数据类型的样本值随所述数据基类型的样本值的变化而变化;计算所述数据基类型的数据在所述数据样本集中不同数据样本中的趋势基值的平均值;若所述数据基类型的数据的趋势基值的平均值大于预设的趋势阈值,则确定依赖所述数据基类型的数据类型;申请用以处理所述数据基类型的数据的逻辑单元,以及申请用以处理依赖所述数据基类型的数据类型的数据的关联规则逻辑单元。2.根据权利要求1所述的基于数据类型的资源调配方法,其特征在于,所述根据所述趋势基值从所述数据样本集中的数据样本的至少两种数据类型中确定数据基类型包括:针对所述数据样本集中的一个数据样本,执行:对于所述数据类型中的选定数据类型,计算所述选定数据类型与各对比数据类型的趋势基值之间的第一差值,所述选定数据类型为所述至少两种数据类型中的任一数据类型,所述对比数据类型为所述至少两种数据类型中除所述选定数据类型之外的数据类型中的一种;将具有小于预设的偏差阈值的第一差值的对比数据类型确定为依赖所述选定数据类型;确定所述对比数据类型中依赖所述选定数据类型的对比数据类型的数量;计算在所述数据样本集中不同的数据样本中,依赖所述选定数据类型的对比数据类型的数量的平均值;将计算出的平均值确定为所述选定数据类型的依赖密度值;将具有最大依赖密度值的数据类型确定为数据基类型。3.根据权利要求2所述的数据类型的资源调配方法,其特征在于,所述确定依赖所述数据基类型的数据类型包括:分别确定所述数据样本集中的每个数据样本中依赖所述数据基类型的数据类型集合,从而形成至少两个数据类型的集合;对所述至少两个数据类型集合取交集;确定取交集后得到的数据类型集合中的数据类型为依赖所述数据基类型的数据类型。4.根据权利要求2或3所述的基于数据类型的资源调配方法,其特征在于,所述方法还包括:针对每个所述数据类型均对应预设一个偏差阈值;当所述数据基类型变更时,根据变更后的数据基类型将所述偏差阈值变更为与变更后的数据基类型对应的偏差阈值。5.根据权利要求1所述的基于数据类型的资源调配方法,其特征在于,所述根据所述趋势基值从样本的数据类型中确定数据基类型具体为:根据预先设置的所述趋势基值和预设的数据类型的依赖关系,从所述数据样本集中的数据样本的至少两种数据类型中确定数据基类型。6.根据权利要求1或2或3或5所述的基于数据类型的资源调配方法,其特征在于,所述数据样本包括连续性生成的数据样本或周期性生...

【专利技术属性】
技术研发人员:才宇东
申请(专利权)人:华为数字技术苏州有限公司
类型:发明
国别省市:江苏,32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1