The invention relates to a data scheduling method for computing data center cloud acceleration query, data stored in the data center near the data can greatly reduce the bandwidth consumption, reduce the delay of data transmission caused by the query response, do not need to set up a great amount of storage, data center requirements of high performance computing; no matter what the data center is the bottleneck of network bandwidth is very small, you can ensure that the response time of the query is smaller; according to the cost of storage data center, can take into account the query response time data storage cost is low.
【技术实现步骤摘要】
一种加速云计算数据中心查询的数据调度方法
本专利技术涉及一种加速云计算数据中心查询的数据调度方法,属于分布式计算和云计算
技术介绍
21世纪初,互联网发展迅速,计算机技术在各个行业广泛使用。随着互联网的迅猛发展,信息量也快速增加,网站等业务系统所需要处理的业务量快速增长。为了快速处理大幅增加的信息量,使信息得到及时的反馈,并使用信息为自身服务,云计算应运而生。云计算是由分布式计算、并行处理、网格计算发展来的,是一种新兴的计算模型。云计算的计算能力强大,应用范围广泛,它不仅提供传统意义的IT资源和应用服务,而且将支持包括IT、通信、电视、移动和物联网等一切互联网技术融合后的资源使用和业务应用。云计算发展的关键技术主要有统一交换构架、统一虚拟化和统一计算系统。云计算模式具有许多优点:超大规模,虚拟化,通用型,廉价等。但是云计算也存在一些不足,现有的网络带宽、存储数据的可靠性和安全性,是目前限制云计算技术进一步发展的关键因素。随着云计算的发展,数据中心建立在各个位置,在云计算数据中心进行数据分析变成了一个重要工作。分析内容包括查询用户日志来选择广告投放策略,查 ...
【技术保护点】
一种加速云计算数据中心查询的数据调度方法,用于针对瓶颈网点上的放置数据进行调度,其中,获取云计算数据中心Dk<O或Uk<O的各个网点,作为瓶颈网点,k∈{1,…,K},K表示云计算数据中心中网点的数量,Dk表示第k个网点的下载速度,Uk表示第k个网点的上传速度,O表示预设云计算数据中心传输数据最小带宽值;其特征在于,针对各个瓶颈网点,分别执行如下调度方法:步骤A.获取云计算数据中心Dk>O'且Uk>O'的各个网点,作为各个待选网点,然后进入步骤B,其中,O'表示预设云计算数据中心待接收数据网点的最小带宽值;步骤B.分别获得各个待选网点的数据存储成本,并进一步获得低于预设网点 ...
【技术特征摘要】
1.一种加速云计算数据中心查询的数据调度方法,用于针对瓶颈网点上的放置数据进行调度,其中,获取云计算数据中心Dk<O或Uk<O的各个网点,作为瓶颈网点,k∈{1,…,K},K表示云计算数据中心中网点的数量,Dk表示第k个网点的下载速度,Uk表示第k个网点的上传速度,O表示预设云计算数据中心传输数据最小带宽值;其特征在于,针对各个瓶颈网点,分别执行如下调度方法:步骤A.获取云计算数据中心Dk>O'且Uk>O'的各个网点,作为各个待选网点,然后进入步骤B,其中,O'表示预设云计算数据中心待接收数据网点的最小带宽值;步骤B.分别获得各个待选网点的数据存储成本,并进一步获得低于预设网点数据存储成本阈值的各个数据存储成本,针对该各个数据存储成本分别所对应的待选网点,构建待传输网点集合S,然后进入步骤C;步骤C.从待传输网点集合S中随机取出一个网点,作为待传输网点,并从待传输网点集合S中删除该待传输网点,并获取该待传输网点的放置数据的大小,以及初始化m为预设移动数据量大小,然后进入步骤D;步骤D.若m≤该待传输网点的放置数据的大小,则获取或更新假设由瓶颈网点中最高优先级数据集中移出m大小的数据至该待传输网点后所对应的查询时间t1,然后进入步骤E;若m>该待传输网点的放置数据的大小,则进入步骤F;步骤E.待经过预设t0时长,获得或更新基于步骤D中假设数据移动后所对应的查询时间t2,判断t2是否小于t1,是则采用(m+预设移动数据增量)针对m进行更新,并返回步骤D;否则将t1作为瓶颈网点向该待传输网点移动数据后所对应的最小查询时间,并记录最小查询时间所对应的移动数据大小,然后进入步骤F;步骤F.判断待传输网点集合S中是否存在网点,是则返回步骤C;否则进...
【专利技术属性】
技术研发人员:付雄,宋达,邓松,王俊昌,王秀翠,
申请(专利权)人:南京邮电大学,
类型:发明
国别省市:江苏,32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。