基于SDN的公路大数据云平台的资源优化方法及系统技术方案

技术编号:22025007 阅读:33 留言:0更新日期:2019-09-04 02:06
本发明专利技术公开了一种基于SDN的公路大数据平台的资源优化方法及系统,涉及网络资源分配技术领域,所述方法包括步骤:根据Reduce任务的大小和执行节点的计算资源剩余量,计算Reduce任务占用的计算资源使用代价,此处的执行节点为执行该Reduce任务的节点;根据其他节点到该执行节点的所有链路的可用宽带的平均值和预设的带宽资源使用单价,计算Reduce任务的网络资源使用代价;根据所述Reduce任务占用的计算资源使用代价和网络资源使用代价之和得到资源使用总代价,找出使所述资源使用总代价最小的链路路径;SDN架构中的控制器根据找出的最小链路路径来对公路大数据进行资源分配和下发。

Resource optimization method and system of SDN-based highway big data cloud platform

【技术实现步骤摘要】
基于SDN的公路大数据云平台的资源优化方法及系统
本专利技术涉及网络资源分配
,具体涉及一种基于SDN的公路大数据云平台的资源优化方法及系统。
技术介绍
软件定义网络(SoftwareDefinedNetwork,SDN)是由美国斯坦福大学CLeanState课题研究组提出的一种新型网络创新架构,是网络虚拟化的一种实现方式,通过将网络设备的控制面与数据面分离开来,从而实现了网络流量的灵活控制,使网络作为管道变得更加智能,为核心网络及应用的创新提供了良好的平台。当前高速公路基础设施管理方面,由于基础设施种类繁多,管理起来不方便,当前还是采用传统的分类管理方式,即采用多个管理系统,分别对不同的基础设施进行管理,如此一来,当需要将所有的基础设施数据进行整合时,难度较大。因此,亟需开发一种较为灵活的综合管理平台,来对高速公路基础设施进行综合管理,包括基本信息管理、智能诊断、养护运营决策和环境智能监测等功能,从而对高速公路资产进行更加系统、科学、有效的管理。
技术实现思路
针对现有技术中存在的缺陷,本专利技术的目的在于提供一种基于SDN的公路大数据平台的资源优化方法,可以实现对公路大数据的高本文档来自技高网...

【技术保护点】
1.一种基于SDN的公路大数据平台的资源优化方法,其特征在于,包括步骤:根据Reduce任务的大小和执行节点的计算资源剩余量,计算Reduce任务占用的计算资源使用代价,此处的执行节点为执行该Reduce任务的节点;根据其他节点到该执行节点的所有链路的可用宽带的平均值和预设的带宽资源使用单价,计算Reduce任务的网络资源使用代价;根据所述Reduce任务占用的计算资源使用代价和网络资源使用代价之和得到资源使用总代价,找出使所述资源使用总代价最小的链路路径;SDN架构中的控制器根据找出的最小链路路径来对公路大数据进行资源分配和下发。

【技术特征摘要】
1.一种基于SDN的公路大数据平台的资源优化方法,其特征在于,包括步骤:根据Reduce任务的大小和执行节点的计算资源剩余量,计算Reduce任务占用的计算资源使用代价,此处的执行节点为执行该Reduce任务的节点;根据其他节点到该执行节点的所有链路的可用宽带的平均值和预设的带宽资源使用单价,计算Reduce任务的网络资源使用代价;根据所述Reduce任务占用的计算资源使用代价和网络资源使用代价之和得到资源使用总代价,找出使所述资源使用总代价最小的链路路径;SDN架构中的控制器根据找出的最小链路路径来对公路大数据进行资源分配和下发。2.如权利要求1所述的基于SDN的公路大数据平台的资源优化方法,其特征在于,所述计算Reduce任务占用的计算资源使用代价的计算公式为:式中,sk为第Reduce任务占用的计算资源使用代价,dk为第k个Reduce任务大小,a为执行节点的计算资源剩余量。3.如权利要求1所述的基于SDN的公路大数据平台的资源优化方法,其特征在于,所述计算Reduce任务的网络资源使用代价的计算公式为:式中,为该最短路径Path={l1,l2,···,ln}中所有链路的可用带宽的平均值,为链路li的可用带宽,n为链路的总数量,b为预设的带宽资源使用单价。4.如权利要求1所述的基于SDN的公路大数据平台的资源优化方法,其特征在于,得到资源使用总代价的计算公式为:式中,α为计算资源使用代价的系数,表征计算资源使用代价所占的比重,β为带宽资源使用代价的系数,表征带宽资源使用代价所占的比重,M为MAP任务的个数,表示位于节点u的第i个Map任务产生的中间结果数据量,qk为根据划分函数推测得到的Map节点上第k个key值对应的中间数据量占产生的中间数据总量的比例,为已知的将节点u的第i个Map任务产生的中间结果数据量传输到执行第k个Reduce任务的节点v的传输带宽,为将节点u的第i个Map任务产生的中间结果数据量传输到执行第k个Reduce任务的节点v的网络资源在单位时间的使用代价,sk为第k个Reduce任务占用的计算资源使用代价。5.如权利要求4所述的基于SDN的公路大数据平台的资源优化方法,其特征在于,还包括步骤:对资源使用总代价的计算公式进行归一化处理。6.一种基于SDN的公路大数据平台的资源优化系统,...

【专利技术属性】
技术研发人员:邹云华林杰沈伟成琛万里姜阿娟
申请(专利权)人:湖北交投智能检测股份有限公司
类型:发明
国别省市:湖北,42

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1