用于图像捕捉的感兴趣区域的动态调整制造技术

提供了用于确定感兴趣区域(404，504)以执行一个或多个相机操作(诸如自动聚焦、自动曝光、自动增益或自动白平衡)的方法、系统和装置。例如，图像捕捉设备(100)从设备(100)的传感器(115)获得第一图像数据，并且检测图像数据(165)的包括对象的至少一个面部的感兴趣区域(404，504)。设备(100)确定对象的面部的朝向类型，并且进一步确定图像数据是否表示高动态范围场景。设备(100)基于所确定的面部的朝向类型以及关于场景是否为高动态范围场景的确定，在一个或多个方向上调整感兴趣区域(404，504)。设备(100)可以使用经调整的感兴趣区域(404，504)，基于相机操作来捕捉第二图像数据。基于相机操作来捕捉第二图像数据。基于相机操作来捕捉第二图像数据。

【技术实现步骤摘要】
【国外来华专利技术】用于图像捕捉的感兴趣区域的动态调整


[0001]概括而言，本公开内容涉及成像设备，并且更具体地，本公开内容涉及调整用于图像捕捉的感兴趣区域。

技术介绍

[0002]数字图像捕捉设备(诸如蜂窝电话和智能设备中的相机)使用各种信号处理技术来尝试渲染高质量图像。例如，这些图像捕捉设备为了图像锐度而自动地将其镜头聚焦，基于光水平来自动地设置曝光时间，并且自动地调整白平衡以适应光源的色温。在一些示例中，图像捕捉设备包括面部检测技术。面部检测技术允许图像捕捉设备在图像捕捉设备的镜头的视野中识别面部。然后，图像捕捉设备可以基于所识别的面部来应用各种信号处理技术。

技术实现思路

[0003]根据一个方面，一种用于操作图像捕捉设备的方法包括：获得第一图像数据。所述第一图像数据表示在所述图像捕捉设备的视野内的对象。所述方法包括：检测所述第一图像数据的包括所述对象的面部的感兴趣区域。所述方法还包括：基于所述感兴趣区域来确定所述对象的所述面部的朝向类型。所述方法还包括：基于所述对象的所述面部的所述朝向类型来调整所述感兴趣区域。进一步地，所述方法包括：基于经调整的感兴趣区域来执行至少一个图像捕捉操作。所述至少一个图像捕捉操作可以包括：使用经调整的感兴趣区域来执行(例如，调整)自动聚焦、自动增益、自动曝光或自动白平衡中的一项或多项。
[0004]根据另一方面，一种图像捕捉设备包括：存储指令的非暂时性机器可读存储介质；以及耦合到所述非暂时性机器可读存储介质的至少一个处理器。所述至少一个处理器被配置为执行所述指令以进行以下操作：获得第一图像数据。所述第一图像数据表示在所述图像捕捉设备的视野内的对象。所述处理器还被配置为执行所述指令以进行以下操作：检测所述第一图像数据的包括所述对象的面部的感兴趣区域。进一步地，所述处理器被配置为执行所述指令以进行以下操作：基于所述感兴趣区域来确定所述对象的所述面部的朝向类型。所述处理器还被配置为执行所述指令以进行以下操作：基于所述对象的所述面部的所述朝向类型来调整所述感兴趣区域。所述处理器还被配置为执行所述指令以进行以下操作：基于经调整的感兴趣区域来执行至少一个图像捕捉操作。
[0005]根据另一方面，一种非暂时性机器可读存储介质存储指令，所述指令在由至少一个处理器执行时使得所述至少一个处理机执行操作，所述操作包括：获得第一图像数据。所述第一图像数据表示在图像捕捉设备的视野内的对象。所述存储介质存储在由所述至少一个处理器执行时使得所述至少一个处理机执行以下操作的进一步的指令：检测所述第一图像数据的包括所述对象的面部的感兴趣区域；基于所述感兴趣区域来确定所述对象的所述面部的朝向类型；基于所述对象的所述面部的所述朝向类型来调整所述感兴趣区域；以及基于经调整的感兴趣区域来执行至少一个图像捕捉操作。
[0006]根据另一方面，一种图像捕捉设备包括：用于获得第一图像数据的单元，所述第一图像数据表示在图像捕捉设备的视野内的对象；用于检测所述第一图像数据的包括所述对象的面部的感兴趣区域的单元；用于基于所述感兴趣区域来确定所述对象的所述面部的朝向类型的单元；用于基于所述对象的所述面部的所述朝向类型来调整所述感兴趣区域的单元；以及用于基于经调整的感兴趣区域来执行至少一个图像捕捉操作的单元。
附图说明
[0007]图1是根据一些实现方式的示例性图像捕捉设备的框图；
[0008]图2和3是示出根据一些实现方式的示例性图像捕捉设备的组件的图；
[0009]图4A、4B以及5A、5B和5C示出了根据一些实现的在示例性图像捕捉设备的视野(FOV)中显示对象的图像；
[0010]图6和7是根据一些实现的用于调整被捕捉的图像数据内的感兴趣区域的示例性过程的流程图；以及
[0011]图8是根据一些实现的用于在图像捕捉设备中执行图像捕捉操作的示例性过程的流程图。
具体实施方式
[0012]虽然本文中描述的特征、方法、设备和系统可以以各种形式来体现，但是在附图中示出了以及在下文描述了一些示例性且非限制性实施例。在本公开内容中描述的组件中的一些组件是可选的，并且一些实现方式可以包括与在本公开内容中明确描述的组件相比额外的、不同的或更少的组件。
[0013]许多图像捕捉设备(诸如相机)被配备为在相机的视野(FOV)中识别面部，并且选择针对包含所识别的面部的感兴趣区域(ROI)提供焦点值的镜头位置。然而，所选择的镜头位置可能不产生针对ROI内的面部中的一个或多个面部的最佳捕捉图像。例如，ROI可能仅包括面部的一部分，或者可能包括FOV中的除了出现面部的位置以外的区域，诸如包括图像的背景中的对象的区域。
[0014]在一些实现方式中，图像捕捉设备可以调整ROI以改进自动聚焦(AF)、自动曝光(AE)、自动增益(AG)或自动白平衡(AWB)控制以及对应的方法。图像捕捉设备可以识别其FOV内的对象，并且确定包括对象的面部的ROI(例如，原始ROI)。图像捕捉设备还可以确定FOV内的对象的面部的姿势角度，并且基于ROI和姿势角度来确定对象的面部的朝向类型。面部的朝向类型可以包括例如正面朝向(例如，沿着图像捕捉设备的图像传感器的视线看过去)或侧面朝向(例如，垂直于图像捕捉设备的图像传感器的视线看过去)。
[0015]然后，图像捕捉设备可以基于对象的面部的朝向类型来调整ROI。例如，图像捕捉设备可以在垂直方向上(例如，沿着原始ROI的中心线)延伸ROI。作为另一示例，图像捕捉设备可以沿着水平方向(例如，垂直于原始ROI的中心线)减小ROI。
[0016]在一些示例中，图像捕捉设备可以基于所有被捕捉的图像数据的亮度和ROI内的图像数据的一部分的亮度的比较来确定被捕捉的图像数据标识“高动态范围”场景还是“非高动态范围”场景(例如，“低动态范围”场景)。例如，当ROI内的图像数据的亮度与所有图像数据的亮度相差至少门限量时，图像捕捉设备可以识别“高动态范围”场景。在一些示例中，
当ROI内的图像数据的亮度与所有图像数据的亮度相差至少门限量时，图像捕捉设备可以识别“非高动态范围”场景。然后，图像捕捉设备可以基于对象的面部的朝向类型以及图像数据标识“高动态范围”场景还是“非高动态范围”场景来调整ROI。
[0017]然后，图像捕捉设备可以基于经调整的ROI内的图像数据来确定(例如，调整、应用)AF、AE、AG或AWB控制中的一项或多项。在本说明书中，除非另有明确说明，否则经调整的ROI是指图像捕捉设备在操作(诸如AF、AE、AG和/或AWB)期间使用的感兴趣区域。
[0018]在一些示例中，图像捕捉设备可以基于对被捕捉的图像数据内的包括对象的面部的ROI的更准确的确定来提供自动图像捕捉增强。例如，图像捕捉设备可以基于在其视野内识别的更准确地表示对象的面部的图像数据来自动地优化AF、AE、AG或AWB中的一项或多项。换句话说，与经由传统相机而实现的调整过程相比，图像捕捉设备可以基于包括对象的面部的较大部分的ROI来调整AF、AE、AG或AWB中的一项或多项。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于操作图像捕捉设备的方法，包括：获得第一图像数据，所述第一图像数据表示在所述图像捕捉设备的视野内的对象；检测所述第一图像数据的包括所述对象的面部的感兴趣区域；基于所述感兴趣区域来确定所述对象的所述面部的朝向类型；基于所述对象的所述面部的所述朝向类型来调整所述感兴趣区域；以及基于经调整的感兴趣区域来执行至少一个图像捕捉操作。2.根据权利要求1所述的方法，其中，执行所述至少一个图像捕捉操作包括：使用经调整的感兴趣区域来执行自动聚焦、自动增益、自动曝光或自动白平衡中的至少一项。3.根据权利要求2所述的方法，其中：获得所述第一图像数据包括：从相机获得所述第一图像数据；并且所述方法还包括：基于对所述自动聚焦、所述自动增益、所述自动曝光或所述自动白平衡中的所述至少一项的所述执行从所述相机获得第二图像数据。4.根据权利要求1所述的方法，包括：确定所述面部的姿势角度，其中，确定所述面部的所述朝向类型是基于所述姿势角度的。5.根据权利要求1所述的方法，包括：检测所述面部的至少一个面部特征，其中，确定所述面部的所述朝向类型是基于所述至少一个面部特征的。6.根据权利要求1所述的方法，其中，所述面部的所述朝向类型包括正面朝向或侧面朝向。7.根据权利要求6所述的方法，其中，调整所述感兴趣区域包括：当所述面部的所述朝向类型包括所述正面朝向时，在第一方向上延伸所述感兴趣区域。8.根据权利要求7所述的方法，其中，调整所述感兴趣区域包括：当所述面部的所述朝向类型包括所述侧面朝向时，在第二方向上减小所述感兴趣区域。9.根据权利要求1所述的方法，还包括：基于所获得的第一图像数据的像素值来确定第一值；基于所述感兴趣区域内的像素值来确定第二值；以及基于所述第一值和所述第二值来确定所述第一图像数据标识高动态范围场景还是低动态范围场景，其中，调整所述感兴趣区域包括：基于关于所述第一图像数据标识所述高动态范围场景还是所述低动态范围场景的所述确定来调整所述感兴趣区域。10.根据权利要求9所述的方法，其中：所述面部的所述朝向类型包括正面朝向；并且调整所述感兴趣区域还包括：当所述面部的所述朝向类型对应于所述正面朝向时并且当所述第一图像数据标识所述低动态范围场景时，在第一方向上将所述感兴趣区域延伸第一量；以及当所述面部的所述朝向类型对应于所述正面朝向并且所述第一图像数据标识所述高动态范围场景时，在所述第一方向上将所述感兴趣区域延伸第二量。11.根据权利要求9所述的方法，其中：所述面部的所述朝向类型包括侧面朝向；并且调整所述感兴趣区域还包括：
当所述面部的所述朝向类型对应于所述侧面朝向并且所述第一图像数据标识所述高动态范围场景时，在第一方向上将所述感兴趣区域减小第一量；以及当所述面部的所述朝向类型对应于所述侧面朝向并且所述第一图像数据确实标识所述低动态范围场景时，在所述第一方向上将所述感兴趣区域减小第二量。12.根据权利要求1所述的方法，还包括：确定功率配置设置的状态，其中：如果所述功率配置设置的所述状态对应于第一状态，则所述方法还包括：检测所述对象的所述面部的至少一个面部特征；以及基于所述至少一个面部特征来确定所述面部的所述朝向类型；以及如果所述功率配置设置的所述状态对应于第二状态，则所述方法还包括：确定所述对象的所述面部的姿势角度；以及基于所述姿势角度来确定所述面部的所述朝向类型。13.一种图像捕捉设备，包括：存储指令的非暂时性机器可读存储介质；以及耦合到所述非暂时性机器可读存储介质的至少一个处理器，所述至少一个处理器被配置为执行所述指令以进行以下操作：获得第一图像数据，所述第一图像数据表示在所述图像捕捉设备的视野内的对象；检测所述第一图像数据的包括所述对象的面部的感兴趣区域；基于所述感兴趣区域来确定所述对象的所述面部的朝向类型；基于所述对象的所述面部的所述朝向类型来调整所述感兴趣区域；以及基于经调整的感兴趣区域来执行至少一个图像捕捉操作。14.根据权利要求13所述的设备，其中，所述至少一个处理器还被配置为执行所述指令以进行以下操作：使用经调整的感兴趣区域来执行自动聚焦、自动增益、自动曝光或自动白平衡中的至少一项。15.根据权利要求14所述的设备，其中，所述至少一个处理器还被配置为执行所述指令以进行以下操作：从相机获得所述第一图像数据；以及基于对所述自动聚焦、所述自动增益、所述自动曝光或所述自动白平衡的所述执行从所述相机获得第二图像数据。16.根据权利要求13所述的设备，其中，所述至少一个处理器还被配置为执行所述指令以进行以下操作：确定所述面部的姿势角度；以及基于所述姿势角度来确定所述面部的所述朝向类型。17.根据权利要求13...

【专利技术属性】
技术研发人员：徐金涛，李勉，刘轩铭，侯耀耀，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：