功率高效多相机系统技术方案

一种装置(102)可包括：数字相机(120)，其包括第一相机(124‑1)和第二相机(124‑2)的立体相机(122)对；以及系统控制(130)，其能够单独地将第一相机和第二相机打开和关闭。另外，所述装置可包括处理器(202)以经由第一相机接收第一图像并且检测与第一图像关联的场景类型。所述装置还可确定场景类型是否适合立体拍摄并且执行视差差数检测以检测第一图像是否能够被正确地分解。响应于第一图像能够被正确地分解的确定，所述装置可经由立体相机对执行第一图像和第二图像的立体图像拍摄。

【技术实现步骤摘要】
【国外来华专利技术】功率高效多相机系统
技术介绍
诸如移动或便携式装置的各种用户装置包括数字相机以允许用户拍摄图像和视频。这些用户装置相机的功耗取决于数字相机的功耗以及与越来越多地增加到这些用户装置的各种传感器关联的功耗。各个数字相机可包括镜头组件、图像拍摄传感器、MIPI(移动行业处理器接口)相机串行接口和图像信号处理器(ISP)。MIPI联盟是非营利企业，其充当移动装置行业中的所有公司的开放成员组织并为诸如数字相机的移动装置生成标准。在一些情况下，数字相机可包括多个相机。例如，数字相机可包括立体相机或微镜头阵列。立体相机可包括可用于拍摄三维(3D)图像的一对相机。成对的相机可具有不同的功能和能力。例如，成对的相机可包括高分辨率相机或低分辨率相机。
技术实现思路
在一个实现方式中，一种移动装置可包括：数字相机，其包括第一相机和第二相机的立体相机对；以及系统控制，其能够单独地打开和关闭第一相机和第二相机。该移动装置可包括处理器，其可经由第一相机接收第一图像并检测与第一图像关联的场景类型。该处理器可确定场景类型是否适合立体拍摄，并且响应于场景类型适合立体拍摄的确定，执行视差差数(parallaxdifference)检测以检测第一图像是否能够被正确地分解(resolve)。响应于第一图像能够被正确地分解的确定，该处理器可经由立体相机对执行第一图像和第二图像的立体图像拍摄。根据另一实现方式，一种计算机实现的方法可包括经由包括第一相机和第二相机的立体相机对的数字相机系统的第一相机、以及能够单独地打开和关闭第一相机和第二相机的系统控制来接收第一图像。该方法可包括检测与第一图像关联的场景类型，并且确定场景类型是否适合立体拍摄。响应于场景类型适合立体拍摄的确定，该方法可包括执行视差差数检测以检测第一图像是否能够被正确地分解。该方法还可包括响应于第一图像能够被正确地分解的确定，经由立体相机对执行第一图像和第二图像的立体图像拍摄。在另一实现方式中，一种包括计算机可执行指令的非瞬时计算机可读介质，所述计算机可执行指令可包括经由包括第一相机和第二相机的立体相机对的数字相机系统的第一相机、以及能够单独地打开和关闭第一相机和第二相机的系统控制来接收第一图像的指令。所述指令可检测与第一图像关联的场景类型。所述指令可确定场景类型是否适合立体拍摄。响应于场景类型适合立体拍摄的确定，所述指令可执行视差差数检测以检测第一图像是否能够被正确地分解。响应于第一图像能够被正确地分解的确定，所述指令可经由立体相机对执行第一图像和第二图像的立体图像拍摄。附图说明附图被并入本说明书并构成本说明书的一部分，附图示出本文所描述的一个或更多个实施方式，并且与说明书一起说明实施方式。附图中：图1示出本文所描述的概念；图2是可与图1的移动装置对应的装置的示例性部件的框图；图3是图1的功率高效管理模块的示例性功能部件的示图；图4是在本文所描述的立体相机中用于功率的高效管理的处理的概念表示；图5是本文所描述的惯性导航系统重新校准处理的概念表示；以及图6是与移动装置中的立体相机关联的用于确定功率的高效管理的示例性处理的流程图。具体实施方式以下详细描述参考了附图。不同图中的相同标号可标识相同或相似的元件。另外，以下详细描述仅是示例性和说明性的，并非限制要求保护的本专利技术。在下文中，移动装置可包括诸如立体相机的、包括多个相机的数字相机系统。立体相机可包括两个相同类型的相机(例如，两个高分辨率相机或两个低分辨率相机)。另选地，立体相机可包括主相机和辅相机。主相机可为高分辨率相机，辅相机可为低分辨率相机。移动装置可包括系统控制，其能够单独地打开和关闭各个相机。移动装置可包括图像信号处理器(ISP)，其可经由MIPI接口接收相机图像，并且可基于尽可能节省功率的主题(subjectmatter)启用针对立体相机的处理。ISP可检测图像中为何种类型的场景，然后基于场景类型打开和关闭多个相机中的一个或更多个。在多个相机中的一个或更多个被关闭的情况下，ISP可利用其余相机来处理图像。图1示出可实现本文所描述的系统和/或方法的示例性环境100。如所示，环境100可包括移动装置102，其包括数字相机系统120。数字相机110可包括立体相机122和功率高效管理模块130。立体相机122可用于从场景150拍摄图像152。尽管图1示出环境100的示例性部件，在其它实现方式中，与图1中所描绘的相比，环境100可包括更少的部件、不同的部件、不同地布置的部件、或附加部件。另外地或另选地，环境100的一个或更多个部件可执行被描述为由环境100的一个或更多个其它部件执行的功能。如图1所示，数字相机系统120可包括立体相机122，其可包括诸如第一相机124-1和第二相机124-2的多个(例如，立体对)相机124，各个相机在用于拍摄相应图像152-1和152-2(用于例如形成三维(3D)图像)时独立地消耗功率。第一相机124-1可包括低分辨率相机124-1，其与可包括高分辨率相机124-2的第二相机124-2相比消耗更低的功率。另选地，两个相机124可消耗相同量的功率和/或具有相同的分辨率。数字相机系统120可包括功率高效管理模块130，其针对移动装置102中的多个相机124管理功率节省。更具体地，功率高效管理模块130可监测并控制立体对相机124的利用(数字相机系统120用来拍摄用于3D成像的图像)以检测立体对相机124的使用的值落在最小阈值以下的情况，例如本文中在下面关于图3至图8所描述的。例如，功率高效管理模块130可检测到对于所拍摄的图像152之间的有效眼或视差差数而言对象150距移动装置102的距离太远，难以形成提供附加信息的3D图像。换言之，距对象的距离可使得两个图像基本上相同，因此消除了基于图像生成的3D图像的优势。另外，功率高效管理模块130可检测到图像152之间存在太多串扰。在这些情况下，数字相机系统120可禁用通过立体对相机124的立体拍摄，因此将功耗减半。在多个相机124包括低分辨率相机124-1和高分辨率相机124-2的情况下，功率高效管理模块130可针对低分辨率相机124-1使用场景检测(在移动装置102的ISP中，图1中未示出)以去除无法用于一般立体拍摄的各种场景或布局。在这些情况下，与单个图像152-1相比，一般视差会聚3D构造没有提供显著的附加信息。由此对于这些场景或布局，功率高效管理模块130可限制与立体图像拍摄152关联的功耗区域上的功率开销。功率高效管理模块130可指导从低分辨率相机124-1接收的图像的ISP处理。在从针对3D图像的处理去除(或排除)不需要立体图像的场景或布局的情况下，功率高效管理模块130可对其余图像执行居中图像分割视差差数检测，以检查将不会正确地分解的表面或物体(subjectmatter)。由此，功率高效管理模块130可去除假阳性(即，立体拍摄没有承载附加值的图像152)并且进一步降低立体实现的功率开销。当消除了立体图像没有提供足够的附加信息的情况时，功率高效管理模块130可允许完整3D视差场景重构，以相应地重构来自立体对相机124的图像，因此限制相机实现的功率开销。在本文所描述的实现方式中，公开了一种针对由一个主相机和辅相机组成的立体相机确定功率节省或降低功本文档来自技高网...

【技术保护点】
一种装置(102)，该装置(102)包括：数字相机(120)，该数字相机(120)包括第一相机(124‑1)和第二相机(124‑2)的立体相机(122)对；系统控制(130)，该系统控制(130)能够单独地将所述第一相机和所述第二相机打开和关闭；以及处理器(202)，该处理器(202)：经由所述第一相机接收第一图像；检测与所述第一图像关联的场景类型；确定所述场景类型是否适合立体拍摄；响应于所述场景类型适合立体拍摄的确定，执行视差差数检测以检测所述第一图像是否能够被正确地分解；并且响应于所述第一图像能够被正确地分解的确定，经由所述立体相机对执行所述第一图像和第二图像的立体图像拍摄。

【技术特征摘要】
【国外来华专利技术】2015.04.01 US 14/675,8111.一种装置(102)，该装置(102)包括：数字相机(120)，该数字相机(120)包括第一相机(124-1)和第二相机(124-2)的立体相机(122)对；系统控制(130)，该系统控制(130)能够单独地将所述第一相机和所述第二相机打开和关闭；以及处理器(202)，该处理器(202)：经由所述第一相机接收第一图像；检测与所述第一图像关联的场景类型；确定所述场景类型是否适合立体拍摄；响应于所述场景类型适合立体拍摄的确定，执行视差差数检测以检测所述第一图像是否能够被正确地分解；并且响应于所述第一图像能够被正确地分解的确定，经由所述立体相机对执行所述第一图像和第二图像的立体图像拍摄。2.根据权利要求1所述的装置，其中，所述第一相机是低分辨率相机，并且所述第二相机是高分辨率相机。3.根据权利要求1所述的装置，其中，所述第一相机和所述第二相机具有相同的分辨率。4.根据权利要求1至3中的任一项所述的装置，其中，所述处理器还被配置为：响应于所述场景类型不适合立体拍摄的确定，关闭所述第二相机并利用所述第一相机拍摄图像。5.根据权利要求1至4中的任一项所述的装置，其中，在检测与所述第一图像关联的场景类型时，所述处理器还被配置为：基于红外IR光谱反射率或视差差数中的至少一个来检测文档。6.根据权利要求1至5中的任一项所述的装置，其中，在检测与所述第一图像关联的场景类型时，所述处理器还被配置为：基于红外IR光谱反射率或视差差数中的至少一个确定所述第一图像包括二维2D显示画面，其中，所述2D显示画面不适合立体拍摄。7.根据权利要求1至6中的任一项所述的装置，其中，在检测与所述第一图像关联的场景类型时，所述处理器还被配置为：基于脸部检测来检测脸部，其中，所述脸部为3D的并且适合立体拍摄。8.根据权利要求1至7中的任一项所述的装置，其中，在检测与所述第一图像关联的场景类型时，所述处理器还被配置为：基于场景识别来检测不包括前景对象的风景。9.根据权利要求1至8中的任一项所述的装置，其中，在检测与所述第一图像关联的场景类型时，所述处理器还被配置为：基于距前景对象的距离来检测包括所述前景对象的风景。10.根据权利要求1至9中的任一项所述的装置，其中，在检测与所述第一图像关联的场景类型时，所述处理器还被配置为：基于立体场景来检测合影。11.根据权利要求1至10中的任一项所述的装置，其中，所述处理器还被配置为：接收影响所述第一图像的改变的指示；以及重新开始检测所述第一图像的处理。12.一种计算机实现的方法，该计算机实现的方法包括以下步骤：经由包括第一相机(124-1)和第二相机(124-2)的立体相机(122)对的数字相机系统(120)的所述第一相机、以及能够单独地将所述第一相机和所述第二相机打开和关闭的系...

【专利技术属性】
技术研发人员：O·索恩，J·古斯塔夫森，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP