一种简单的大数据分布式调用计算方法技术

技术编号:17200848 阅读:62 留言:0更新日期:2018-02-04 02:04
本发明专利技术涉及一种简单的大数据分布式调用计算方法,其特征在于,服务器端可以被各个智能终端随时访问,智能终端在进行设备状态报告时,检测并获取计算任务,且在执行后向服务器端返回计算结果。本发明专利技术的一种简单的大数据分布式调用计算方法,采用主从中心结构,各个终端设备需要定期向服务器报告终端设备的状态,同时获取相应的计算任务、计算数据,并返回计算的结果,采用分布式的计算方式,充分利用智能终端侧的计算能力,减轻服务器计算负担。

【技术实现步骤摘要】
一种简单的大数据分布式调用计算方法
本专利技术涉及一种简单的大数据分布式调用计算方法,用于实现主从式的大数据分布式调用和计算。
技术介绍
在网络通信如此发达的今日,任何一种互联网应用,不带后台服务器支持都是难以想象的。后台服务器既实现具体的业务,同时也负责管控着连接到其上的各种智能终端设备,实现着对各个终端设备的管理,统计和监控。由于不是每个终端设备都具备独立的IP地址,具备相应的服务能力,因此,大多数情况下,都是采用终端设备定期向后台服务器进行远程过程调用报告的实现机制。这样的话,后台服务器就可以掌握每一个终端设备的生存状态。通过智能终端设备向后台服务器进行远程过程调用,就可以获取服务器要发送给智能终端设备的任何信息。这些信息可以按照自定义的方式进行解析。如果自定义的信息包括了要调用的智能终端侧计算方法所需要的足够信息,智能终端就可以执行计算并回馈计算结果,于是就相当于服务器对终端执行了一次远程过程调用,整个系统就执行了分布式计算工作。
技术实现思路
本专利技术的目的在于提供一种简单的大数据分布式调用计算方法,采用分布式的计算方式,服务器将部分计算任务分发给各个连接的终端,待各个终端计算完毕后,再报告结果给服务器,由服务器进行汇总,得出最终的计算结果。为了实现上述目的,本专利技术提供了以下技术方案:本专利技术提供一种简单的大数据分布式调用计算方法,服务器端可以被各个智能终端随时访问,其调用计算方法包括以下内容:智能终端复位完成后,向服务器端发起设备注册及设备能力报告请求,进行注册认证及计算余量报告;智能终端成功注册后,定期向服务器端发起设备状态报告请求,报告设备的状态;智能终端在进行设备状态报告时,检测并获取设备管理命令,且在执行后向服务器端报告执行结果;服务器端在接到智能终端的设备能力报告后,分析及判断智能终端的计算能力;若智能终端具备计算能力,则根据智能终端的能力状况分配合适的计算任务;若智能终端不具备计算能力,则不分配计算任务;智能终端在进行设备状态报告时,检测并获取计算任务,且在执行后向服务器端返回计算结果。与现有技术相比,本专利技术具有以下优点:本专利技术的一种简单的大数据分布式调用计算方法,采用主从中心结构,各个终端设备需要定期向服务器报告终端设备的状态,同时获取相应的计算任务、计算数据,并返回计算的结果,采用分布式的计算方式,充分利用智能终端侧的计算能力,减轻服务器计算负担。下面通过附图和实施例,对本专利技术的技术方案做进一步的详细描述。附图说明图1为本专利技术的实施例的智能终端和服务器之间交互方式框图;图2为本专利技术的实施例的分布式任务的邮箱机制示意图;图3为本专利技术的实施例的服务器分工结构示意图。具体实施方式以下结合附图对本专利技术的实施例进行说明,应当理解,此处所描述的实施例仅用于说明和解释本专利技术,并不用于限定本专利技术。本专利技术在现有的终端状态报告机制的基础上,升级成一种简单的大数据分布式调用计算方法,采用主从中心结构,各个终端设备需要定期向服务器报告终端设备的状态,同时获取相应的计算任务,计算数据,并返回计算的结果。采用JSON作为智能终端与服务器组件间交互信息的数据交换格式,便于支持不同编程语言,不同类型的终端。本专利技术以下将说明这种类型的智能多媒体终端与服务器端的连接方式,需要满足的条件,操作方式以及远程分布式调用的实现方法。1、连接方式智能多媒体终端与服务器端的连接方式采取有线,无线的方式来完成,连接方式可以是任意的有线或者无线方式,但是需要保证足够的上行,下行带宽。连接的时候,可以互联网连接,也可以在局域网内进行连接。但是需要保证智能终端可以可靠的连接到服务器上。如果是互联网部署的情况下,服务器端就需要具备独立的,可以被各个智能多媒体终端随时访问到的IP地址。具体实现时,可以自行架设服务器,或者使用公共的云服务器。2、数据交换格式智能多媒体终端与服务器端之间,采用JSON(JavaScriptObjectNotation)作为终端与服务器侧组件间交互信息的数据交换格式,其是以JavaScript为基础的数据表示语言。既方便于人的读写习惯,又有利于计算机的解析和生成。这种数据交换格式,是独立于具体的操作系统和编程语言的,因此便于支持不同编程语言,不同类型的终端。这样的话,就不会对智能终端的操作系统类型,编程语言类别做出限制。3、终端和服务器端的交互方式智能终端和服务器端采用RPC(RemoteProcedureCall),即远程调用的方式来进行交互。也就是客户端通过某种协议向服务器发起请求并获得结果的交互方式。由于服务器端有独立的,可以被各个智能多媒体终端随时访问到的IP地址。因此,智能终端通过RPC(RemoteProcedureCall),即远程调用的方式来调用服务器是非常简单和直接的。但是各个智能多媒体终端,在现有的网络条件下,可能不具备可以随时访问的独立IP地址,而且各个终端之间差异比较大,计算能力也可能差异比较大,不太可能安排统一的服务支持。因此,设计采用有计算能力的终端去服务器端获取任务,执行计算,并返回结果是比较合理的做法。为此,将智能多媒体终端,分为两大类,一类是不具备计算余量的终端,这里简称为A类终端,另一类是具备计算余量的终端,在这里简称为B类终端。不具备计算余量的A类终端,只需要支持基本的调用服务器RPC的能力即可,其执行RPC,只是用来报告设备能力,设备特性,报告设备状态,支持一些基本的设备管理功能。而具备计算余量的B类终端,除了这些A类终端所具备的功能外,还可以通过RPC执行任务获取,分布式计算,报告计算结果等功能。图1给出了各个智能终端和服务器之间的交互方式,图1中箭头描述为单向的,只是代表交互过程由单方发起,指向箭头所在的另一方,不表示两者之间没有双向数据流。实际上交互过程是由智能终端发起,由服务器端根据交互的内容回应数据。其具体内容如下:1)智能终端设备复位完成后,均会执行设备注册,设备能力报告流程。必须是通过注册认证的设备,方可进行进一步的处理流程。设备能力报告将报告设备是否支持计算任务计算,以及支持的任务计算功能的集合,服务器在得知这些信息后,便于根据各个终端的实际能力情况,分配合适的计算任务。2)成功注册的设备会按要求定期报告“心跳”包,报告自身的状态/设备事件,检测是否有新的设备管理任务或者计算任务到达,如果有的话,就负责取出相应的管理任务或者计算任务,进行执行并返回结果。整个过程都是智能终端设备发起的,是智能终端设备请求,而非服务器端进行推送。3)为了保证相互的兼容性,设计采用的是“邮箱”机制,这些信息都是由终端设备来从邮箱中取出,而不是从服务器中推送出来的。图2给出了“邮箱”机制的实现原理。在服务器端的分布式任务分配逻辑,会根据需要为各个智能终端设备分配分布式计算任务,但是先将其存入缓存中,缓存的引入主要用于提高访问速度。缓存机制会在合适的时候,存入数据库做持久化操作。当然缓存的大小可以控制,如果缓存不够大,部分数据只有存放在数据库中。当智能设备请求分布式计算任务时,服务器侧会先检测缓存,必要时在数据库中寻找,然后回送给智能终端设备。看起来,对于一个智能终端设备来讲,分布式任务是从服务器端侧属于自己的邮箱中取出来的一样。因此,这样的机制叫做“邮箱”机制。4)为保证本文档来自技高网...
一种简单的大数据分布式调用计算方法

【技术保护点】
一种简单的大数据分布式调用计算方法,其特征在于,服务器端可以被各个智能终端随时访问,其调用计算方法包括以下内容:智能终端复位完成后,向服务器端发起设备注册及设备能力报告请求,进行注册认证及计算余量报告;智能终端成功注册后,定期向服务器端发起设备状态报告请求,报告设备的状态;智能终端在进行设备状态报告时,检测并获取设备管理命令,且在执行后向服务器端报告执行结果;服务器端在接到智能终端的设备能力报告后,分析及判断智能终端的计算能力;若智能终端具备计算能力,则根据智能终端的能力状况分配合适的计算任务;若智能终端不具备计算能力,则不分配计算任务;智能终端在进行设备状态报告时,检测并获取计算任务,且在执行后向服务器端返回计算结果。

【技术特征摘要】
1.一种简单的大数据分布式调用计算方法,其特征在于,服务器端可以被各个智能终端随时访问,其调用计算方法包括以下内容:智能终端复位完成后,向服务器端发起设备注册及设备能力报告请求,进行注册认证及计算余量报告;智能终端成功注册后,定期向服务器端发起设备状态报告请求,报告设备的状态;智能终端在进行设备状态报告时,检测并获取设备管理命令,且在执行后向服务器端报告执行结果;服务器端在接到智能终端的设备能力报告后,分析及判断智能终端的计算能力;若智能终端具备计算能力,则根据智能终端的能力状况分配合适的计算任务;若智能终端不具备计算能力,则不分配计算任务;智能终端在进行设备状态报告时,检测并获取计算任务,且在执行后向服务器端返回计算结果。2.根据权利要求1所述一种简单的大数据分布式调用计算方法,其特征在于,所述智能终端通过RPC与服务器端进行交互。3.根据权利要求1所述一种简单的大...

【专利技术属性】
技术研发人员:彭晓曦
申请(专利权)人:成都优芯微电子技术有限公司
类型:发明
国别省市:四川,51

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1