用于多帧融合的有效率的正则化图像对准的装置和方法制造方法及图纸

一种方法包括：接收参考图像和非参考图像；将参考图像划分成多个片；使用电子设备利用基于由粗略到精细的运动向量估算确定运动向量图；以及使用运动向量图连同参考图像和非参考图像生成输出帧。参考图像生成输出帧。参考图像生成输出帧。

【技术实现步骤摘要】
【国外来华专利技术】用于多帧融合的有效率的正则化图像对准的装置和方法


[0001]本公开总体上涉及图像捕获系统。更具体而言，本公开涉及用于多帧融合的正则化图像对准的装置和方法。

技术介绍

[0002]在多帧融合的背景下，每一非参考帧与选定参考帧的对准是关键步骤。如果这一步骤具有低质量，那么其直接影响接下来的图像混合步骤，并且可能导致不充分的混合水平，乃至导致鬼影伪像。使用全局变换矩阵的全局图像配准算法是一种实现对准的常见有效方式。但是使用全局变换矩阵仅能减少由于相机运动导致的不对准，有时甚至在缺少匹配特征的情况下找不到可靠解决方案。在高动态范围(HDR)应用中，由于输入帧欠曝光或者过曝光，这种情况频繁发生。一种替代方案是使用诸如光流的方法找到帧之间的稠密对应关系。尽管这些方法产生高质量对准，但是这些方法需要相当高的计算成本，从而给移动平台带来了很大挑战。

技术实现思路

[0003]技术解决方案
[0004]一种方法包括：接收参考图像和非参考图像；将参考图像划分成多个片；使用电子设备利用基于由粗略到精细的运动向量估算确定运动向量图；以及使用运本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：接收参考图像和非参考图像；将所述参考图像划分成多个片；使用电子设备利用基于由粗略到精细的运动向量估算确定运动向量图；以及使用所述运动向量图连同所述参考图像和非参考图像生成输出帧。2.根据权利要求1所述的方法，其中，确定所述运动向量图包括：将高斯金字塔的较低分辨率帧划分成多个搜索片，所述高斯金字塔对应于所述非参考图像；针对所述参考图像中的所述多个片的每者：从所述多个搜索片中定位对应于所述多个片中的片的匹配片；以及基于所述参考图像中的所述片的位置与所述非参考图像的较低分辨率帧中的所述匹配片的位置之间的差异确定低分辨率移动向量；以及基于所述参考图像中的所述多个片的低分辨率移动向量生成低分辨率运动图。3.根据权利要求2所述的方法，其中，确定所述运动向量图进一步包括：针对所述参考图像中的所述多个片的每者：将所述非参考图像中的搜索区域划分成多个第二搜索片，其中，所述搜索区域对应于所述匹配片，从所述多个第二搜索片中定位对应于所述多个片中的所述片的第二匹配片，以及基于所述参考图像中的所述片的位置与所述非参考图像中的所述第二匹配片的位置之间的差异确定运动向量；以及基于所述参考图像中的所述多个片的低分辨率移动向量生成所述运动向量图。4.根据权利要求1所述的方法，进一步包括：使用所述运动向量图中的运动向量计算全局几何变换；通过将所述运动向量的每者与所述全局几何变换进行比较而确定差异；在所述差异大于阈值时确定大运动向量；以及从所述运动向量图去除所确定的大运动向量。5.根据权利要求4所述的方法，进一步包括：将所述非参考图像划分成多个非参考片；将所述非参考片内的梯度幅值累积与预定义阈值进行比较；基于所述梯度幅值累积超过了所述预定义阈值而检测无景深区域；以及从所述运动向量图去除对应于所述无景深区域的运动向量。6.根据权利要求1所述的方法，进一步包括：在与所述非参考图相对应的图像结构的网格顶点上施加二次约束。7.根据权利要求6所述的方法，其中，所述二次约束由下式定义：E＝E
p
+λ1E
g
+λ2E
s
,其中，E
p
是局部对准项，E
g
是全局约束项，并且E
s
是相似性项。8.一种电子设备，包括：至少一个传感器；以及至少一个处理器，所述至少一个处理器被配置为：
接收参考图像和非参考图像；将所述参考图像划分成多个片；使用基于由粗略到精细的运动向量估算利用...

【专利技术属性】
技术研发人员：甄睿文，JW格洛茨巴赫，HR谢克，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：