本发明专利技术公开了一种智能终端及其3D成像方法、3D成像系统,智能终端的3D成像方法包括:智能终端获取目标物的原始图像;智能终端提取原始图像中的特征信息,并将原始图像及特征信息传输给计算单元;计算单元根据原始图像及特征信息进行特征匹配及计算;智能终端根据特征匹配及计算结果形成目标物的3D图像。本发明专利技术使智能终端只需要运行简单的计算任务,而将复杂的计算任务交由独立的计算单元进行处理,从而优化了智能终端的性能,并为其扩展了更多的应用能力,使其能胜任处理复杂、高精度的3D成像任务,提高了用户体验度。
【技术实现步骤摘要】
【国外来华专利技术】智能终端及其3D成像方法、3D成像系统
本专利技术涉及3D立体视觉
,特别是涉及一种智能终端及其3D成像方法、3D成像系统。
技术介绍
智能相机是一种高度集成化的微小型机器视觉系统,它一般由图像采集单元、图像处理单元、图像处理软件、网络通信装置等构成,其将图像的采集、处理与通信功能集成于单一相机内,从而提供了具有多功能、模块化、高可靠性、易于实现的机器视觉解决方案。其中,图像采集单元将光学图像转换为模拟/数字图像,并输出至图像处理单元;图像处理单元对图像采集单元的图像数据进行实时存储,并在图像处理软件的支持下进行图像处理;图像处理软件在图像处理单元硬件的支持下,完成图像处理功能;网络通信装置完成控制信息、图像数据的通信任务。目前而言,智能相机的3D基本视觉原理是先利用图像传感器对目标对象进行拍照,取得物体的图像信息,然后对图像信息进行计算处理得到目标物的3D图像。但智能相机的计算量有限,一般只能处理简单的图像任务,且图像传感器和通讯模块无法扩展升级,从而限制了其应用程度,使得智能相机无法胜任复杂、高精度的3D成像。
技术实现思路
本专利技术主要解决的技术问题是提供一种智能终端及其3D成像方法、3D成像系统,解决智能终端无法胜任复杂、高精度的3D成像的问题。为解决上述技术问题,本专利技术采用的第一个技术方案是:一种智能终端的3D成像方法,该智能终端的3D成像方法包括:智能终端获取目标物的原始图像;智能终端提取原始图像中的特征信息,并将原始图像及特征信息传输给计算单元;计算单元根据原始图像及特征信息进行特征匹配及计算;智能终端根据特征匹配及计算结果形成目标物的3D图像。为解决上述技术问题,本专利技术采用的第二个技术方案是:一种智能终端,该智能终端包括:通信电路、存储器及处理器;通信电路用于获取及传输指令;存储器用于处理器执行的程序以及在执行程序时所产生的中间数据;处理器执行智能终端程序时,实现上述智能终端的3D成像方法中的任一步骤。为解决上述技术问题,本专利技术采用的第三个技术方案是:一种3D成像系统,该3D成像系统包括:智能终端和计算单元,计算单元与智能终端信号连接,该3D成像系统能够实现上述智能终端的3D成像方法中的任一步骤。本专利技术的有益效果是:区别于现有技术的情况,本专利技术通过给智能终端外连一个计算单元,让智能终端对目标物进行自动追踪和提取特征信息,让计算单元接收智能终端输出的特征信息和原始图像,并进行特征匹配计算,再将匹配计算结果反馈给智能终端,智能终端根据反馈信息进行成像或者做进一步地特征提取。这样使智能终端只需要运行简单的计算任务,而将复杂的计算任务交由独立的计算单元进行处理,从而优化了智能终端的性能,并为其扩展了更多的应用能力,使其能胜任处理复杂、高精度的3D成像任务,提高了用户体验度。附图说明图1是本专利技术提供的一种智能终端的3D成像方法的流程示意图;图2是本专利技术提供的一种智能终端的3D成像系统的结构示意图;图3是本专利技术提供的一种智能终端的3D成像系统中智能终端的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,均属于本专利技术保护的范围。本专利技术为了让智能终端能胜任处理复杂、高精度的3D成像任务,给智能终端外接一个计算单元,该计算单元与智能终端信号连接。智能终端主要用于对目标物进行追踪、提取目标物图像中的特征信息及进行简单的运算任务。具体地,以智能终端是智能相机为一具体实施方式对本专利技术中智能终端的3D成像方法进行说明。以下,结合附图进行详细说明。请参阅图1,图1是本专利技术提供的一种智能终端的3D成像方法的流程示意图。该智能终端的3D成像方法主要包括四个步骤。步骤101:智能终端获取目标物的原始图像。该智能终端包括智能相机、智能手机、平板电脑等智能设备,以智能终端是智能相机为具体实施方式对本专利技术进行说明。先标定,让智能相机获取标定的参数信息,然后对目标物进行追踪,并获取目标物的原始图像。其中,智能相机为单目相机、双目相机或多目相机。需要说明的是,在获取目标物图像信息的过程中,为确定目标物表面某点的三维几何位置与其在图像中对应点之间的相互关系,必须建立相机成像的几何模型,这些几何模型参数就是相机的参数,获取这些参数的过程称之为相机的标定。在一具体实施方式中,智能相机的标定包括智能相机内部参数和外部参数的标定,通过标定获取主点坐标、焦距、径向畸变系数、横向畸变系数等内部参数以及旋转矩阵、平移矩阵等外部参数。标定完后,对目标物进行追踪,即对目标物进行对焦,连续获取目标物的原始图像。步骤102:智能终端提取原始图像中的特征信息,并将原始图像及特征信息传输给计算单元。智能相机获取目标物的原始图像后,对目标物图像做特征检测和前后帧的特征预估,提取原始图像中的特征信息,其中,特征信息包括特征点和特征线。智能相机再将提取出来的特征信息及原始图像传输给计算单元,其中,计算单元包括云端服务器和具有逻辑门电路的运算器,在此不作具体限定。在一具体实施方式中,智能终端的3D成像系统包括两个智能相机和一个计算单元,目标物是一个三角形状的物体,两个智能相机分别获取该三角形状物体的原始图像后,对该物体图像做特征检测和前后帧的特征预估,提取该物体图像中比较明显的三个特征点,比如提取三角形状物的三个顶点,两个智能相机分别将提取出的三个顶点以及拍摄的原始图像信息传输给计算单元。在其他实施方式中,智能相机也可以提取目标物中的特征线,比如提取三角形状物的三条边线,两个智能相机分别将提取出的三条边线以及拍摄的原始图像信息传输给计算单元。在其他情形中,智能相机也可以既提取特征点又提取特征线,比如提取三角形状物的一条边线和两个顶点,两个智能相机分别将提取出的一条边线和两个顶点以及拍摄的原始图像信息传输给计算单元。步骤103:计算单元根据原始图像及特征信息进行特征匹配及计算。计算单元根据获取的原始图像及特征信息,先对全图进行特征匹配,再对子区域进行特征匹配,若匹配成功,则根据匹配结果进行分布式运算;若匹配不成功,则计算单元将匹配失败的特征信息反馈给智能相机,智能相机重新获取目标物的原始图像,提取图像中的特征信息,并将特征信息传输给计算单元重新进行匹配计算。在一具体实施例中,目标物为具有三角形状的物体,计算单元根据从两个智能相机分别获取的三个顶点以及拍摄的原始图像信息进行特征匹配,匹配成功后进行分布式运算;若分别提取的三个顶点中有一个匹配失败,则计算单元将这个匹配失败顶点的信息反馈给智能相机,智能相机重新提取特征点,比如提取三角形状物一条边的中点为特征点,两个智能相机分别将提取的中点及图像信息传输给计算单元,计算单元重新进行匹配计算。在其他实施例中,当提取的特征点匹配失败时,也可以重新提取特征线进行匹配。比如,分别提取三角形状物的三个顶点中有一个匹配失败时,计算单元将这个匹配失败顶点的信息反馈给智能相机,智能相机重新提取特征线,比如提取三角形状物的一条边线,两个智能相机分别将提取的边线及图像信息传输给计算单元,计算单元重新进行匹配计算。智能相机在提取本文档来自技高网...
【技术保护点】
1.一种智能终端的3D成像方法,其特征在于,所述方法包括如下步骤:所述智能终端获取目标物的原始图像;所述智能终端提取所述原始图像中的特征信息,并将所述原始图像及特征信息传输给计算单元;所述计算单元根据所述原始图像及特征信息进行特征匹配及计算;所述智能终端根据特征匹配及计算结果形成目标物的3D图像。
【技术特征摘要】
【国外来华专利技术】1.一种智能终端的3D成像方法,其特征在于,所述方法包括如下步骤:所述智能终端获取目标物的原始图像;所述智能终端提取所述原始图像中的特征信息,并将所述原始图像及特征信息传输给计算单元;所述计算单元根据所述原始图像及特征信息进行特征匹配及计算;所述智能终端根据特征匹配及计算结果形成目标物的3D图像。2.根据权利要求1所述的一种智能终端的3D成像方法,其特征在于,所述智能终端获取目标物的原始图像具体包括:所述智能终端对目标物进行追踪,获取目标物的原始图像。3.根据权利要求1所述的一种智能终端的3D成像方法,其特征在于,所述智能终端获取目标物的原始图像之前还包括:所述智能终端获取标定参数信息。4.根据权利要求1所述的一种智能终端的3D成像方法,其特征在于,所述智能终端提取所述原始图像中的特征信息的步骤具体包括:所述智能终端对目标物图像做特征检测和前后帧的特征预估,并提取所述原始图像中的特征信息。5.根据权利要求1所述的一种智能终端的3D成像方法,其特征在于,所述智能终端提取所述原始图像中的特征信息的步骤具体包括:所述智能终端提取所述原始图像中的特征点或特征线。6.根据权利要求1所述的一种智能终端的3D成像方法,其特征在于,所述计算单元根据所述原始图像及特征信息进行特征匹配的步骤具体包括:所述计算单元根据所述原始图像及特征信息,先对全图进行特征匹配,再对子区域进行特征匹配。7.根据权利要求1所述的一种智能终端的3D成像方法,其特征在于,所述所述计算单元根据所述原始图像及特征信息进行特征匹配及计算的步骤具体包括:所述计算单元根据所述原始图像及特征信息进行特征匹配及计算,若特征信息匹配失败,则所述计算单元将匹配失败的特征信息反馈给所述智能终端,所述智能终端重新获取目标物的原始图像,提取所述图像中的特征信息,并将所述特征信息传输给计算单元。8.根据权利要求1所述的一种智能终端的3D成像方法,其特征在于,所述所述计算单元根据所...
【专利技术属性】
技术研发人员:阳光,
申请(专利权)人:深圳配天智能技术研究院有限公司,
类型:发明
国别省市:广东,44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。