【技术实现步骤摘要】
【国外来华专利技术】景深图像重聚焦
本专利技术涉及执行图像重聚焦。一些方面涉及训练执行输入图像的重聚焦的图像处理模型。
技术介绍
图像的景深(depthoffield,DOF)是指所有对象都清晰(对焦)的深度范围。例如,浅DOF图像可用于将对象与其背景分离,通常用于人像和微距摄影。图像的景深部分取决于用于捕获图像的设备的孔径大小。因此,一些具有窄孔径的图像处理设备(如智能手机)通常无法光学呈现浅景深图像,而是基本上捕获全焦图像。然而,通过合适的数字图像处理技术,可以通过重聚焦数字图像来模拟或合成浅景深效果。一些以计算方式重聚焦数字图像的方法利用了图像的深度信息。图1示出了如何以计算方式重聚焦输入数字图像的示例。图1示出了全焦图像101。103处示出了包含图像101的深度信息的图。在该示例中,图是视差图,但在其它示例中,它可以是深度图。视差图对表示公共场景的一对(通常是立体)图像的块之间的空间移位进行编码。当所述一对图像由两个空间分离的摄像机捕获时,场景中的一个点投影到每个图像内的不同块位置。这些不同块位置之间的坐标移位是视差。因此,视差图中的每个块对一对图像表示的场景的一部分之间的空间移位进行编码。视差图的块对一对图像中一个图像中的并置块表示的场景的一部分与一对图像中另一个图像表示的场景的所述一部分之间的坐标移位进行编码。视差图的所述块的视差值表示校正图像域中的坐标移位。块是指图的一个或多个像素的块。与距离图像平面深度较浅的场景部分相比,距离图像平面深度较深的场景部分在一对图像之间的块位移相对较小。因此, ...
【技术保护点】
1.一种图像处理设备,包括处理器,所述处理器用于通过以下步骤根据输入图像和指示所述输入图像的深度信息的图生成重聚焦图像:/n对于与所述图像内相应深度关联的多个平面中的每个平面:/n生成深度掩码,所述深度掩码的值指示所述输入图像的区域是否在所述平面的指定范围内,其中,通过评估所述输入图像的区域与根据所述图确定的所述平面之间的范围的可微函数来评估区域是否在所述平面的所述指定范围内;/n根据所述输入图像和所述生成的深度掩码生成掩码图像;/n使用模糊核重聚焦所述掩码图像以生成重聚焦的分图像;/n根据所述多个重聚焦的分图像生成所述重聚焦图像。/n
【技术特征摘要】
【国外来华专利技术】1.一种图像处理设备,包括处理器,所述处理器用于通过以下步骤根据输入图像和指示所述输入图像的深度信息的图生成重聚焦图像:
对于与所述图像内相应深度关联的多个平面中的每个平面:
生成深度掩码,所述深度掩码的值指示所述输入图像的区域是否在所述平面的指定范围内,其中,通过评估所述输入图像的区域与根据所述图确定的所述平面之间的范围的可微函数来评估区域是否在所述平面的所述指定范围内;
根据所述输入图像和所述生成的深度掩码生成掩码图像;
使用模糊核重聚焦所述掩码图像以生成重聚焦的分图像;
根据所述多个重聚焦的分图像生成所述重聚焦图像。
2.根据权利要求1所述的设备,其特征在于,所述多个平面定义深度范围,并且所述输入图像具有跨越所述多个平面的所述深度范围的景深。
3.根据权利要求1或2所述的设备,其特征在于:(i)指示所述图像的深度信息的所述图是视差图,并且所述多个平面中的每个平面是处于相应视差值的平面;或者(ii)指示所述图像的深度信息的所述图是深度图,并且所述多个平面中的每个平面是处于相应深度处的平面。
4.根据上述权利要求中任一项所述的设备,其特征在于,所述函数在定义函数值范围的下界与上界之间平滑变化,当正在评估所述函数的图像区域在所述平面的所述指定范围内时,所述函数具有在其范围的前半部分内的值;当正在评估所述函数的图像区域不在所述平面的所述指定范围内时,所述函数具有在其范围的后半部分内的值。
5.根据权利要求3或4所述的设备,其特征在于,评估所述可微函数以评估是否满足的条件,其中,D(x)是在所述输入图像的块x处图像区域的所述视差图或深度图的值,d′是所述平面的所述视差或深度,a是孔径的大小,当满足所述条件时,确定图像区域在所述平面的所述指定范围内;当不满足所述条件时,确定所述图像区域不在所述平面的所述指定范围内。
6.根据上述权利要求中任一项所述的方法,其特征在于,所述深度掩码为所述输入图像的一个或多个像素的每个块指定值。
7.根据上述权利要求中任一项所述的方法,其特征在于,所述模糊核是半径为所述孔径大小,以及所述平面与焦平面之间的深度或视差差值的函数的径向核。
8.根据上述权利要求中任一项所述的方法,其特征在于,所述生成的掩码图像仅包含所述输入图像中确定在所述平面的所述指定范围内的那些区域。
9.一种训练图像处理模型的方法,其特征在于,所述方法包括:
接收多个图像元组,每个图像元组包括表示公共场景的一对图像和所述场景的重聚焦的训练图像;
对于每个图像元组:
(i)使用所述图像处理模型处理所述一对图像,以估计指示所述场景的深度信息的图;
(ii)对于与所述图像内相应深度关联的多个平面中的每个...
【专利技术属性】
技术研发人员:本杰明·布萨姆,马蒂厄·奥格,史蒂文·乔治·麦克唐纳,格雷戈里·斯拉堡,
申请(专利权)人:华为技术有限公司,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。