超融合系统、基于超融合系统的数据处理方法技术方案

技术编号:16152663 阅读:43 留言:0更新日期:2017-09-06 18:11
本发明专利技术公开了一种超融合系统、基于超融合系统的数据处理方法。所述超融合系统包括第一设备和至少一个第二设备;所述第一设备中包括指令接收装置、数据处理装置以及虚拟资源;每个所述第二设备中包括数据处理装置以及虚拟资源;所述第一设备中的数据处理装置,用于在所述指令接收装置接收到所述数据处理指令之后,与每个所述第二设备进行通信,获得目标设备;所述目标设备为所述超融合系统中的虚拟资源的状态为空闲的设备;所述目标设备中的数据处理装置,还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,并将生成的数据处理结果返回至所述第一设备。采用本发明专利技术,能够提高超融合系统的数据处理性能和资源利用率。

【技术实现步骤摘要】
超融合系统、基于超融合系统的数据处理方法
本专利技术涉及计算机
,尤其涉及一种超融合系统、基于超融合系统的数据处理方法。
技术介绍
目前许多基于超融合技术的系统架构存在着80%的性能问题,物理硬件资源的利用率得不到很好的提升,磁盘的IO瓶颈得不到解决,以及数据的可靠、冗余等机制的缺失,阻碍系统整体性能、可靠性,最终导致系统变慢,物理硬件的最大性能没有发挥出来。在目前业界构建的超融合体系结构的案例中,极少有完整地提供了对于集成hypervisor层面采用即将成为云虚拟化标准的OpenStack(一种旨在为公共及私有云的建设与管理提供软件的开源项目,目标是提供实施简单、可大规模扩展、丰富、标准统一的云计算管理平台)平台,分布式存储采用Ceph(一种为优秀的性能、可靠性和可扩展性而设计的统一的分布式文件系统),同时提供完整HA方案来保证数据以及集群的可靠,以及提供Monitor(监控)机制。
技术实现思路
本专利技术实施例提出一种超融合系统、基于超融合系统的数据处理方法,能够提高超融合系统的数据处理性能和资源利用率。本专利技术实施例提供的一种超融合系统,具体包括第一设备和至少一个第二设备:所述第一设备中包括指令接收装置、数据处理装置以及虚拟资源;每个所述第二设备中包括数据处理装置以及虚拟资源;所述第一设备中的指令接收装置,用于接收数据处理指令;所述第一设备中的数据处理装置,用于在所述指令接收装置接收到所述数据处理指令之后,查询所述第一设备中的虚拟资源的状态,同时通过与各个所述第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态,将所述第一设备和所有所述第二设备中的一个设备设置为目标设备;其中,所述目标设备中的虚拟资源的状态为空闲;所述目标设备中的数据处理装置,还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备。进一步地,所述第一设备中还包括指令处理装置;所述指令处理装置,用于采用多线程技术对所述数据处理指令进行解耦处理;则所述目标设备中的数据处理装置,还用于根据经过解耦的所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备。进一步地,所述第一设备中还包括数据存储装置;所述数据存储装置,用于存储所述数据处理结果。进一步地,所述数据存储装置为MariaDB。进一步地,所述第二设备的个数为至少两个。相应地,本专利技术实施例还提供了一种基于超融合系统的数据处理方法,具体包括:超融合系统中的第一设备中的指令接收装置接收数据处理指令;在所述指令接收装置接收到所述数据处理指令之后,所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态,同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态,将所述第一设备和所有所述第二设备中的一个设备设置为目标设备;其中,所述目标设备中的虚拟资源的状态为空闲;所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中;所述目标设备中的数据处理装置在接收到所述数据处理指令之后,根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备。进一步地,在所述超融合系统中的第一设备中的指令接收装置接收数据处理指令之后,所述在所述指令接收装置接收到所述数据处理指令之后,所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态,同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态,将所述第一设备和所有所述第二设备中的一个设备设置为目标设备之前,还包括:所述第一设备中的指令处理装置采用多线程技术对所述数据处理指令进行解耦处理;则所述所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中,具体包括:所述第一设备中的数据处理装置将经过解耦的所述数据处理指令发送至所述目标设备中的数据处理装置中;所述所述目标设备中的数据处理装置在接收到所述数据处理指令之后,根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备,具体包括:所述目标设备中的数据处理装置在接收到经过解耦的所述数据处理指令之后,根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备。进一步地,在所述所述目标设备中的数据处理装置在接收到所述数据处理指令之后,根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备之后,还包括:所述第一设备在接收到所述数据处理结果之后,将所述数据处理结果存储至所述第一设备中的数据存储装置中。进一步地,所述数据存储装置为MariaDB。进一步地,所述超融合系统中的第二设备的个数为至少两个。实施本专利技术实施例,具有如下有益效果:本专利技术实施例提供的超融合系统、基于超融合系统的数据处理方法,通过数据处理装置之间的通信,使得系统中的设备能够在系统中选择较为空闲的设备对接收到的数据处理指令进行处理,因此能够充分利用系统中的资源,提高系统的资源利用率。另外,通过在各个设备中配置虚拟资源进行数据处理,使得数据处理不受设备硬件的限制,因此能够提高系统的数据处理性能。附图说明图1是本专利技术提供的超融合系统的一个优选的实施例的结构示意图;图2是本专利技术提供的超融合系统的一个优选的实施例中的一个数据处理装置的的内部部分结构示意图;图3是本专利技术提供的基于超融合系统的数据处理方法的一个优选的实施例的流程示意图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。本专利技术通过为超融合系统中的每个设备配置数据处理装置,使得接收到数据处理指令的设备可以通过数据处理装置与系统中的其他设备进行通信,查询获得其中较为空闲的设备作为数据处理的目标设备,从而利用该目标设备中的虚拟资源并根据前述数据处理指令进行数据处理。由于本专利技术能够通过数据处理装置之间的通信,使得系统中的设备能够在系统中选择较为空闲的设备对接收到的数据处理指令进行处理,因此能够充分利用系统中的资源,提高系统的资源利用率。另外,本专利技术通过在各个设备中配置虚拟资源进行数据处理,使得数据处理不受设备硬件的限制,因此能够提高系统的数据处理性能。如图1所示,为本专利技术提供的超融合系统的一个优选的实施例的结构示意图,包括第一设备11和至少一个第二设备12;所述第一设备11中包括数据处理装置111、虚拟资源装置112以及指令接收装置113;每个所述第二设备12中包括数据处理装置121以及虚拟资源装置122;其中,所述虚拟资源装置112和所述虚拟资源装置122中均包含若干虚拟资源;所本文档来自技高网...
超融合系统、基于超融合系统的数据处理方法

【技术保护点】
一种超融合系统,其特征在于,包括第一设备和至少一个第二设备;所述第一设备中包括指令接收装置、数据处理装置以及虚拟资源;每个所述第二设备中包括数据处理装置以及虚拟资源;所述第一设备中的指令接收装置,用于接收数据处理指令;所述第一设备中的数据处理装置,用于在所述指令接收装置接收到所述数据处理指令之后,查询所述第一设备中的虚拟资源的状态,同时通过与各个所述第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态,将所述第一设备和所有所述第二设备中的一个设备设置为目标设备;其中,所述目标设备中的虚拟资源的状态为空闲;所述目标设备中的数据处理装置,还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备。

【技术特征摘要】
1.一种超融合系统,其特征在于,包括第一设备和至少一个第二设备;所述第一设备中包括指令接收装置、数据处理装置以及虚拟资源;每个所述第二设备中包括数据处理装置以及虚拟资源;所述第一设备中的指令接收装置,用于接收数据处理指令;所述第一设备中的数据处理装置,用于在所述指令接收装置接收到所述数据处理指令之后,查询所述第一设备中的虚拟资源的状态,同时通过与各个所述第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态,将所述第一设备和所有所述第二设备中的一个设备设置为目标设备;其中,所述目标设备中的虚拟资源的状态为空闲;所述目标设备中的数据处理装置,还用于根据所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备。2.如权利要求1所述的超融合系统,其特征在于,所述第一设备中还包括指令处理装置;所述指令处理装置,用于采用多线程技术对所述数据处理指令进行解耦处理;则所述目标设备中的数据处理装置,还用于根据经过解耦的所述数据处理指令调用所述目标设备中的虚拟资源进行相应的数据处理,生成相应的数据处理结果,并将所述数据处理结果返回至所述第一设备。3.如权利要求1所述的超融合系统,其特征在于,所述第一设备中还包括数据存储装置;所述数据存储装置,用于存储所述数据处理结果。4.如权利要求3所述的超融合系统,其特征在于,所述数据存储装置为MariaDB。5.如权利要求1至4中任一项所述的超融合系统,其特征在于,所述第二设备的个数为至少两个。6.一种基于超融合系统的数据处理方法,其特征在于,包括:超融合系统中的第一设备中的指令接收装置接收数据处理指令;在所述指令接收装置接收到所述数据处理指令之后,所述第一设备中的数据处理装置查询所述第一设备中的虚拟资源的状态,同时通过与所述超融合系统中的至少一个第二设备中的数据处理装置通信查询各个所述第二设备中的虚拟资源的状态,将所述第一设备和所有所述第二设备中的一个设备设置为目标设备;其中,所述目标设备中的虚拟资源的状态为空闲;所述第一设备中的数据处理装置将所述数据处理指令发送至所述目标设备中的数据处理装置中;所述目标设备中的数据...

【专利技术属性】
技术研发人员:高英陈志凌黄永燊艾如鹏
申请(专利权)人:华南理工大学
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1