基于云平台大数据的大数据处理方法及装置制造方法及图纸

本发明专利技术公开了一种基于云平台大数据的大数据处理方法，包括以下步骤：采集图像数据，所述图像数据至少包括原始图像和图像相关信息，原始图像是由图像传感器采集的原始图像；对所述采集的原始图像按照预定的策略分别分配到服务器以及客户端进行处理；预定的策略由协同单元控制，预定的策略是：服务器生成第一数据表用于存储原始图像，生成第二数据表用于存储图像相关信息；协同单元建立第三数据表用于存储原始图像，建立第四数据表用于存储图像相关信息；本发明专利技术通过合理策略将图像数据分配到云平台的服务器以及连接服务器的若干个客户端进行处理，最大化图像数据处理资源的利用，结合双路径的图像边界处理方法，能够提高图像处理速度。理速度。理速度。

【技术实现步骤摘要】
基于云平台大数据的大数据处理方法及装置


[0001]本专利技术涉及大数据
，更具体地说，它涉及基于云平台大数据的大数据处理方法。

技术介绍

[0002]云计算平台也称为云平台，是指基于硬件资源和软件资源的服务，提供计算、网络和存储能力。云计算平台可以划分为3类：以数据存储为主的存储型云平台，以数据处理为主的计算型云平台以及计算和数据存储处理兼顾的综合云计算平台。
[0003]随着云时代的来临，大数据(Big data)也吸引了越来越多的关注。分析师团队认为，大数据(Big data)通常用来形容一个公司创造的大量非结构化数据和半结构化数据，这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。
[0004]大数据需要特殊的技术，以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术，包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。
[0005]大数据离不开云处理，云处理为大数据提供了弹性可拓展的基础设备，是产生大数据的平台之一。大数据技术已开始和云计算技术紧密结合，预计未来两者关系将更为密切。除此之外，物联网、移动互联网等新兴计算形态，也将一齐助力大数据革命，让大数据营销发挥出更大的影响力。
[0006]图像处理(image processing)，用计算机对图像进行分析，以达到所需结果的技术。又称影像处理。图像处理一般指数字图像处理。数字图像是指用工业相机、摄像机、扫描仪等设备经过拍摄得到的一个大的二维数组，该数组的元素称为像素，其值称为灰度值。图像处理技术一般包括图像压缩，增强和复原，匹配、描述和识别3个部分。
[0007]从图像中抽取某些有用的度量、数据或信息。目的是得到某种数值结果，而不是产生另一个图像。图像分析的内容和模式识别、人工智能的研究领域有交叉，但图像分析与典型的模式识别有所区别。图像分析不限于把图像中的特定区域按固定数目的类别加以分类，它主要是提供关于被分析图像的一种描述。为此，既要利用模式识别技术，又要利用关于图像内容的知识库，即人工智能中关于知识表达方面的内容。图像分析需要用图像分割方法抽取出图像的特征，然后对图像进行符号化的描述。这种描述不仅能对图像中是否存在某一特定对象作出回答，还能对图像内容作出详细描述。
[0008]数字图像处理，分析与机器视觉是认知科学与计算机科学中的一个令人兴奋和活跃的分支，在人的感知，识别和理解中，形状是一个非常重要的参数，而链编码就是以此概念延伸的一种形状描述方法；
[0009]链码(又称为freeman码)是用曲线起始点的坐标和边界点方向代码来描述曲线或边界的方法，常被用来在图像处理、计算机图形学、模式识别等领域中表示曲线和区域边
界；
[0010]对于利用Freeman链码的方式描述图像的曲线或边界需要刻画曲线边界以及转码的过程，所需处理的数据量较大，因而导致耗时较长，尤其是刻画曲线边界的过程占据大部分耗时；
[0011]图像数据一直占据大数据平台的数据库的主要部分，如何优化对于图像数据的处理是需要解决的问题。

技术实现思路

[0012]本专利技术提供一种优化对于图像数据的处理的基于云平台大数据的大数据处理方法，解决相关技术中的技术问题。
[0013]根据本专利技术的一个方面，提供了一种基于云平台大数据的大数据处理方法，包括以下步骤：
[0014]采集图像数据，所述图像数据至少包括原始图像和图像相关信息，原始图像是由图像传感器采集的原始图像；
[0015]对所述采集的原始图像按照预定的策略分别分配到服务器以及客户端进行处理；
[0016]预定的策略由协同单元控制，预定的策略是：
[0017]服务器生成第一数据表用于存储原始图像，生成第二数据表用于存储图像相关信息；
[0018]协同单元建立第三数据表用于存储原始图像，建立第四数据表用于存储图像相关信息；
[0019]客户端建立第五数据表于存储原始图像，建立第六数据表用于存储图像相关信息；
[0020]其中第五数据表、第六数据表的物理空间大小是固定的；
[0021]第一预定条件是：第三数据表的数据量大于第五数据表的物理空间；
[0022]第二预定条件是：第四数据表的数据量大于第六数据表的物理空间；
[0023]第三预定条件是：第三数据表的数据量大于第五数据表的物理空间的60％且小于第五数据表的物理空间的100％；
[0024]第四预定条件是：第四数据表的数据量大于第六数据表的物理空间的60％且小于第五数据表的物理空间的100％；
[0025]第五预定条件是：第三数据表的数据量大于第五数据表的物理空间的30％且小于第五数据表的物理空间的60％；
[0026]第六预定条件是：第四数据表的数据量大于第六数据表的物理空间的30％且小于第五数据表的物理空间的60％；
[0027]第七预定条件是：第三数据表的数据量小于第五数据表的物理空间的30％；
[0028]第八预定条件是：第四数据表的数据量小于第六数据表的物理空间的30％。
[0029]同时满足第一预定条件和第二预定条件时，原始图像和图像相关信息均分配到服务器进行处理；
[0030]同时满足第一预定条件和第四预定条件时，原始图像分配到服务器进行处理，图像相关信息部分分配到服务器进行处理，部分分配到客户端进行处理；
[0031]同时满足第一预定条件和第六预定条件时，原始图像分配到服务器进行处理，图像相关信息分配到客户端进行处理；
[0032]同时满足第一预定条件和第八预定条件时，原始图像部分分配到服务器进行处理，部分分配到客户端进行处理，图像相关信息分配到客户端进行处理；
[0033]同时满足第二预定条件和第三预定条件时，图像相关信息分配到服务器进行处理，原始图像部分分配到服务器进行处理，部分分配到客户端进行处理；
[0034]同时满足第二预定条件和第五预定条件时，图像相关信息分配到服务器进行处理，原始图像分配到客户端进行处理；
[0035]同时满足第二预定条件和第七预定条件时，图像相关信息部分分配到服务器进行处理，部分分配到客户端进行处理，原始图像分配到客户端进行处理。
[0036]进一步地，所述第一数据表、第二数据表、第三数据表、第四数据表是一个以上的数据表的集合，客户端的第五数据表映射一个第三数据表，第六数据表映射一个第四数据表。
[0037]进一步地，服务器以及客户端对采集的原始图像进行处理的方法，包括：
[0038]将采集的原始图像置于二维的识别区域内；
[0039]图像的边缘的像素点连接构成闭合边界，相邻的两个像素点的中心连线作为定长线段，以闭合边界的一个像素点作为原点，以原点为起始点在本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于云平台大数据的大数据处理方法，其特征在于，包括以下步骤：采集图像数据，所述图像数据至少包括原始图像和图像相关信息，原始图像是由图像传感器采集的原始图像；对所述采集的原始图像按照预定的策略分别分配到服务器以及客户端进行处理；预定的策略由协同单元控制，预定的策略是：服务器生成第一数据表用于存储原始图像，生成第二数据表用于存储图像相关信息；协同单元建立第三数据表用于存储原始图像，建立第四数据表用于存储图像相关信息；客户端建立第五数据表于存储原始图像，建立第六数据表用于存储图像相关信息；其中第五数据表、第六数据表的物理空间大小是固定的；第一预定条件是：第三数据表的数据量大于第五数据表的物理空间；第二预定条件是：第四数据表的数据量大于第六数据表的物理空间；第三预定条件是：第三数据表的数据量大于第五数据表的物理空间的60％且小于第五数据表的物理空间的100％；第四预定条件是：第四数据表的数据量大于第六数据表的物理空间的60％且小于第五数据表的物理空间的100％；第五预定条件是：第三数据表的数据量大于第五数据表的物理空间的30％且小于第五数据表的物理空间的60％；第六预定条件是：第四数据表的数据量大于第六数据表的物理空间的30％且小于第五数据表的物理空间的60％；第七预定条件是：第三数据表的数据量小于第五数据表的物理空间的30％；第八预定条件是：第四数据表的数据量小于第六数据表的物理空间的30％；同时满足第一预定条件和第二预定条件时，原始图像和图像相关信息均分配到服务器进行处理；同时满足第一预定条件和第四预定条件时，原始图像分配到服务器进行处理，图像相关信息部分分配到服务器进行处理，部分分配到客户端进行处理；同时满足第一预定条件和第六预定条件时，原始图像分配到服务器进行处理，图像相关信息分配到客户端进行处理；同时满足第一预定条件和第八预定条件时，原始图像部分分配到服务器进行处理，部分分配到客户端进行处理，图像相关信息分配到客户端进行处理；同时满足第二预定条件和第三预定条件时，图像相关信息分配到服务器进行处理，原始图像部分分配到服务器进行处理，部分分配到客户端进行处理；同时满足第二预定条件和第五预定条件时，图像相关信息分配到服务器进行处理，原始图像分配到客户端进行处理；同时满足第二预定条件和第七预定条件时，图像相关信息部分分配到服务器进行处理，部分分配到客户端进行处理，原始图像分配到客户端进行处理。2.根据权利要求1所述的基于云平台大数据的大数据处理方法，其特征在于，所述第一数据表、第二数据表、第三数据表、第四数据表是一个以上的数据表的集合，客户端的第五数据表映射一个第三数据表，第六数据表映射一个第四数据表。<...

【专利技术属性】
技术研发人员：洪智，
申请(专利权)人：江苏达科信息科技有限公司，
类型：发明
国别省市：