【技术实现步骤摘要】
用于组合图像的方法和系统
本专利技术大体上涉及图像处理,且具体来说但非排他地,涉及组合图像。
技术介绍
归因于相机系统的价格降低以及处理能力和数据存储的相对可用性,相机系统的使用正在增加。相机和相机系统中的图像传感器用于多种应用中,包含汽车、医疗、移动设备以及安全和监视。这些应用常常需要一个以上相机且组合来自所述相机的图像,其可呈现给用户。在一些情况下,需要产生全景图像或甚至360度图像。可通过合并许多相机且组合来自所述许多相机的图像而获得全景图像或360度图像。然而,每一相机增加了相机系统的成本,且组合来自许多相机的许多图像增加了用以产生全景图像或360度图像的处理时间。当所要的处理是实时的时,对许多图像的延后处理可特别成问题。用于减少产生全景图像或360度图像所需的相机的数目的一种解决方案是使用广角相机。然而,来自广角镜头的图像失真使匹配并混合图像复杂化,尤其是以实时的方式。因此,需要一种用于组合具有镜头失真的图像的有效方法。
技术实现思路
在一个实施例中,本申请案提供一种用于组合图像的方法,所述方法包括:从第一相机俘获包含主体的第一图像;从第二相机俘获包含所述主 ...
【技术保护点】
一种用于组合图像的方法,所述方法包括:从第一相机俘获包含主体的第一图像;从第二相机俘获包含所述主体的第二图像;将第一预处理功能应用于所述第一图像上以产生第一经处理图像,所述第一预处理功能包含将旋转矩阵的失真分量应用于所述第一图像,其中所述旋转矩阵界定所述第一图像与所述第二图像之间的经校正关系;将第二预处理功能应用于所述第二图像上以产生第二经处理图像,所述第二预处理功能包含将所述旋转矩阵应用于所述第二图像;以及在处理单元中混合所述第一经处理图像和所述第二经处理图像以形成不同于由所述第一和第二相机俘获的所述第一和第二图像的复合图像。
【技术特征摘要】
2012.02.13 US 13/371,7371.一种用于组合图像的方法,所述方法包括:从第一相机俘获包含主体的第一图像;从第二相机俘获包含所述主体的第二图像;将第一预处理功能应用于所述第一图像上以产生第一经处理图像,所述第一预处理功能包含将旋转矩阵的失真分量应用于所述第一图像,其中所述旋转矩阵界定所述第一图像与所述第二图像之间的经校正关系;将第二预处理功能应用于所述第二图像上以产生第二经处理图像,所述第二预处理功能包含将所述旋转矩阵应用于所述第二图像;以及在处理单元中混合所述第一经处理图像和所述第二经处理图像以形成不同于由所述第一和第二相机俘获的所述第一和第二图像的复合图像,其中在俘获所述第一图像和所述第二图像之前通过以下操作来预先确定所述失真分量和所述旋转矩阵:在俘获所述第一图像和所述第二图像之前从所述第一相机俘获包含校准主体的第一校准图像;在俘获所述第一图像和所述第二图像之前从所述第二相机俘获包含所述校准主体的第二校准图像;识别对应像素集合,每一对应像素集合包含所述第一校准图像中的与所述第二校准图像中的第二像素相对应的第一像素,其中所述第一像素和所述第二像素标记所述校准主体上的同一点;以及通过使所述对应像素集合中的每一者中的所述第一校准图像中的所述第一像素与所述第二校准图像中的所述第二像素之间的距离最小化,来确定所述旋转矩阵的所述失真分量和旋转分量,其中在迭代循环中确定所述失真分量和所述旋转分量,直到所述距离收敛为止,以及其中所述旋转矩阵是所述失真分量和所述旋转分量的乘积。2.根据权利要求1所述的方法,其中所述第一预处理功能包含将所述第一图像转换到圆柱坐标系统,且其中所述第二预处理功能包含将所述第二图像转换到所述圆柱坐标系统。3.根据权利要求1所述的方法,其中将代表所述旋转矩阵的所述失真分量的失真值和代表所述旋转矩阵的旋转矩阵值存储于通信地耦合到安置于所述处理单元中的处理器的存储器中。4.根据权利要求1所述的方法,其中所述第一相机和所述第二相机具有等同的图像传感器和光学器件,且以已知旋转角度定位。5.根据权利要求4所述的方法,其中所述第一相机和所述第二相机的所述光学器件包含广角镜头,且其中所述失真分量校正所述广角镜头。6.根据权利要求1所述的方法,其中混合所述第一经处理图像和所述第二经处理图像以形成所述复合图像包含将所述经处理第二图像中的所有所述像素移位经界定的距离,从而致使所述第二经处理图像中的所述像素的一部分与所述第一经处理图像重叠。7.根据权利要求1所述的方法,其中将所述旋转矩阵应用于所述第二图像包含将所述旋转矩阵与所述第二图像中的每一像素相乘以实现对所述复合图像的实时处理。8.根据权利要求1所述的方法,其进一步包括将所述复合图像存储到通信地耦合到安置于所述处理单元中的处理器的存储器,且向显示装置再现所述复合图像。9.一种用于组合图像的设备,所述设备包括:用于从第一相机俘获包含主体的第一图像的装置;用于从第二相机俘获包含所述主体的第二图像的装置;用于将第一预处理功能应用于所述第一图像上以产生第一经处理图像的装置,所述第一预处理功能包含将旋转矩阵的失真分量应用于所述第一图像,其中所述旋转矩阵界定所述第一图像与所述第二图像之间的经校正关系;用于将第二预处理功能应用于所述第二图像上以产生第二经处理图像的装置,所述第二预处理功能包含将所述旋转矩阵应用于所述第二图像;以及用于在处理单元中混合所述第一经处理图像和所述第二经处理图像以形成不同于由所述第一和第二相机俘获的所述第一和第二图像的复合图像的装置,其中在俘获所述第一图像和所述第二图像之前通过以下操作来预先确定所述失真分量和所述旋转矩阵:在俘获所述第一图像和所述第二图像之前从所述第一相机俘获包含校准主体的第一校准图像;在俘获所述第一图像和所述第二图像之前从所述第二相机俘获包含所述校准主体的第二校准图像;识别对应像素集合,每一对应像素集合包含所述第一校准图像中的与所述第二校准图像中的第二像素相对应的第一像素,其中所述第一像素和所述第二像素标记所述校准主体上的同一点;以及通过使所述对应像素集合中的每一者中的所述第一校准图像中的所述第一像素与所述第二校准图像中的所述第二像素之间的距离最小化,来确定所述旋转矩阵的所述失真分量和旋转分量,其中在迭代循环中确定所述失真分量和所述旋转分量,直到所述距离收敛为止,以及其中所述旋转矩阵是所述失真分量和所述旋转分量的乘积。10.根据权利要求9所述的设备,其中所述第一预处...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。