This application involves aligning multiple camera images by matching the projected one-dimensional image contours. A multi-camera imaging system includes: a first camera image sensor configured to obtain the first image of the scene from the first advantageous perspective point; a second camera image sensor configured to obtain the second image of the scene from the second advantageous perspective point; and an image signal processor ISP configured to process the first image and the first image by performing the following steps Two images: a first monochrome image is generated from the first image and a second monochrome image is generated from the second image; the first monochrome image is projected to produce a first-dimensional contour; and the second monochrome image is projected to produce a second-dimensional contour; and the first and second-dimensional contours are matched by matching the second-dimensional contour with the first-dimensional contour. The matching information is extracted from the one-dimensional contour, and the matching information is used to generate the first processed two-dimensional image and the second processed two-dimensional image aligned with the first processed two-dimensional image.
【技术实现步骤摘要】
通过对所投影一维图像轮廓进行匹配将多个相机图像对准
本专利技术涉及双相机或多相机成像系统的图像信号处理，所述双相机或多相机成像系统包含两个或多于两个相机，其中每一相机从其自身的有利透视点捕捉其自身的关于相同场景的图像。更特定来说，本专利技术涉及将二维的这些相机图像变换成一维积分或平均轮廓，及使用一维轮廓匹配技术来将由前述两个或多于两个相机获得的两个或多于两个图像对准。
技术介绍
阵列相机包含个别相机的阵列且替代地称为多相机成像系统。此成像系统的实例是变成移动电话中的流行产品特征的双相机系统。通常，个别相机合作以提供通过使用仅一个相机自身无法实现的成像功能性。举例来说，在立体成像中，两个个别相机各自从两个略微不同的有利点捕捉相同场景的图像，借此产生利用单独单个相机无法实现的深度感知功能性。作为另一实例，在动态缩放中，双相机系统包含具有较窄但较聚焦的视场(FOV)的长焦镜头相机及具有较宽但不那么聚焦的视场的宽FOV相机。这两个相机经引导以各自捕捉基本上相同场景的图像，其中长焦镜头相机提供场景的较放大视图。由这两个相机捕获的成对的图像可经处理且接着经组合以提供一缩放等级...
【技术保护点】
1.一种多相机成像系统，其包括：第一相机图像传感器，其经配置以从第一有利透视点获得场景的第一图像；第二相机图像传感器，其经配置以从第二有利透视点获得所述场景的第二图像；及图像信号处理器ISP，其经配置以通过执行以下步骤而处理所述第一图像及所述第二图像：(a)从所述第一图像产生第一单色调图像，且从所述第二图像产生第二单色调图像；(b)将所述第一单色调图像投影以产生第一一维轮廓，且将所述第二单色调图像投影以产生第二一维轮廓；(c)通过对所述第二一维轮廓与所述第一一维轮廓进行匹配而从所述第一及第二一维轮廓提取匹配信息；(d)使用所述匹配信息来产生第一经处理二维图像及与所述第一经处...
【技术特征摘要】
2017.10.16 US 15/785,2391.一种多相机成像系统，其包括：第一相机图像传感器，其经配置以从第一有利透视点获得场景的第一图像；第二相机图像传感器，其经配置以从第二有利透视点获得所述场景的第二图像；及图像信号处理器ISP，其经配置以通过执行以下步骤而处理所述第一图像及所述第二图像：(a)从所述第一图像产生第一单色调图像，且从所述第二图像产生第二单色调图像；(b)将所述第一单色调图像投影以产生第一一维轮廓，且将所述第二单色调图像投影以产生第二一维轮廓；(c)通过对所述第二一维轮廓与所述第一一维轮廓进行匹配而从所述第一及第二一维轮廓提取匹配信息；(d)使用所述匹配信息来产生第一经处理二维图像及与所述第一经处理二维图像对准的第二经处理二维图像。2.根据权利要求1所述的多相机成像系统，其中所述第二相机传感器经配置以获得所述第二图像，所述第二图像具有比由所述第一相机传感器获得的所述第一图像宽的观看范围。3.根据权利要求1所述的多相机成像系统，其中所述第一及第二图像是包含多个色彩通道的彩色图像，且其中步骤(a)进一步包含所述ISP对所述第一及第二图像的所述多个色彩通道求平均以产生所述第一及第二单色调图像。4.根据权利要求3所述的多相机成像系统，其中步骤(a)进一步包含所述ISP使用裁剪来产生所述第一及第二单色调图像，其中所述第二单色调图像具有与所述第一单色调图像大体上相同的物体。5.根据权利要求1所述的多相机成像系统，其中所述第一相机传感器及所述第二相机传感器是沿着第一方向定位；且其中步骤(b)进一步包含所述ISP沿所述第一方向将所述第一及第二单色调图像投影以产生所述第一及第二一维轮廓，其中所述第一及第二一维轮廓沿着正交于所述第一方向的第二方向展开。6.根据权利要求5所述的多相机成像系统，其中步骤(b)进一步包含所述ISP沿所述第一方向对所述第一单色调图像求积分以产生所述第一一维轮廓，且沿所述第一方向对所述第二单色调图像求积分以产生所述第二一维轮廓。7.根据权利要求1所述的多相机成像系统，其中步骤(c)进一步包含以下步骤：(i)对所述第一一维轮廓进行取样以产生多个查询集描述符；(ii)针对每一查询集描述符，处理所述第二一维轮廓以获得候选集描述符群组；随后使用局部匹配方法来识别在值上最接近于所述查询集描述符的最佳匹配候选集描述符；(iii)重复步骤(ii)以形成对应于所述多个查询集描述符的多个最佳匹配候选集描述符；其中所述匹配信息包含所述多个查询集描述符及所述多个所述最佳匹配候选集描述符的开始与结束位置信息集。8.根据权利要求7所述的多相机成像系统，其中步骤(i)进一步包含所述ISP以第一取样间隔对所述第一一维轮廓进行取样以产生所述多个查询集描述符，其中每一查询集描述符具有取决于轮廓统计的轮廓长度。9.根据权利要求8所述的多相机成像系统，其中步骤(ii)进一步包含所述ISP处理所述第二一维轮廓以获得所述候选集描述符群组，其中每一候选集描述符具有与每一查询集描述符相同的轮廓长度，且其中每一候选集描述符处于局部匹配范围内。10.根据权利要求1所述的多相机成像系统，其进一步包含在步骤(b)与(c)之间将所述第一一维轮廓转换为第一经正规化一维轮廓、将所述第二一维轮廓转换为第二经正规化一维轮廓的步骤；且其中步骤(c)通过对所述第二经正规化一维轮廓与所述第一经正规化一维轮廓进行匹配而从所述第一及第二经正规化一维轮廓提取所述匹配信息。11.一种数字图像信号处理方法，其包括：(a)提供包含第一相机传感器、第二相机传感器及图像信号处理器ISP的多相机成像系统；(b)使用所述第一相机传感器来从第一有利透视点获得场景的第一图像；使用所述第二相机传感器来从第二有利透视点获得所述场景的第二图像；(c)使用所述ISP来从所述第一图像产生第一单色调图像，且从所述第二图像产生第二单色调图像；(d)使用所述ISP来将所述第一单色调图像投影以产生第一一维轮廓，且将所述第二单色调图像投影以产生第二一维轮廓；(e)使用所述ISP通过对所述第二一维轮廓与所述第一一维轮廓进行匹配来从所述第一及第二一维轮廓提取匹配信息；(f)使用所述ISP来利用所述匹配信息产生第一经处理二维图像及与所述第一经处理二维图像对准的第二经处理二维图像。12.根据权利要求11所述的数字图像信号处理方法，其中所述第二相机传感器经配置以获得所述第二图像，所述第二图像具有比由所述第一相机传感器获得的所述第一图像宽的观看范围。13.根据权利要求11所述的数字图像信号处理方法...
【专利技术属性】
技术研发人员：高欣婷，徐杉，李诗淼，周瑛，刘关松，常路，
申请(专利权)人：豪威科技股份有限公司，
类型：发明
国别省市：美国,US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。