用于智能成像的集成方案制造技术

描述了集成的堆叠和/或邻接的传感器、存储器和处理硬件相机方案。传感器将从图像接收光，并从光生成电子像素。处理硬件将处理电子像素以：a)在较低质量图像模式中从图像识别场景；b)响应于对场景的识别，触发相机方案的动作，该动作包括：i)将相机方案从较低质量图像模式转换为较高质量图像模式以捕获较高质量版本的图像；以及ii)从相机方案中转发重要图像，以及不从相机方案中转发不重要的图像。

An integrated scheme for intelligent imaging

The integrated stack and / or adjacency sensors, memory and processing hardware camera schemes are described. The sensor will receive light from the image and generate electronic pixels from the light. The electronic processing hardware processing pixels: a) in the low quality image mode from scene image recognition; b) in response to the identification of the scene, trigger the camera program action, this action will include: I) camera solution from the low quality image pattern to transform the image into high quality image mode to capture high quality the version of II); and forwarding the important image from the camera program, and is not important from the camera image forwarding scheme.

【技术实现步骤摘要】
【国外来华专利技术】用于智能成像的集成方案
本申请要求于2015年9月28日提交的题为“IntegratedSolutionsForSmartImaging”的美国临时申请No.62/234,010的优先权，其通过引用整体并入本文。
技术介绍
如图1所示，智能和/或复杂的图像相关任务100传统上完全由计算系统的较高性能数据处理组件(诸如其通用处理核102和/或其图像信号处理器(ISP)103)执行。在这些组件102、103内执行所有这类任务100的问题是在系统内移动图像数据所消耗的功率。具体地说，数据的整个图像通常需要从相机101直接转发到ISP103或系统存储器104中。这种在系统内大量数据的移动消耗大量的功率，在电池供电的设备的情况下，会显著降低设备的电池寿命。复合低效率的是经常多数的图像数据不重要或价值不大。例如，考虑试图分析图像的小区域的成像任务。这里，尽管处理任务只是对图像的小区域感兴趣，但整个图像将通过系统被转发。只有在系统消耗了相当大的功率将大量无用数据移动至区域外之后，才能从较大的图像中有效地解析感兴趣的小区域。另一示例是图像内“寻找”特征的初始识别(例如，在上面刚刚讨论的示例中的感兴趣本文档来自技高网...

【技术保护点】
一种存储用于集成相机方案的程序代码的机器可读存储介质，其中，当通过所述相机方案的处理硬件来处理所述程序代码时，所述相机方案执行一种方法，包括：利用所述处理硬件处理电子像素，所述集成相机方案包括所述处理硬件、存储器和传感器，所述处理硬件、存储器和传感器被堆叠和/或邻接，响应于所述传感器从图像接收光，由所述传感器生成所述电子像素，所述处理包括：在较低质量图像模式中从所述图像识别场景；响应于所述场景的识别，触发所述相机方案的动作，所述动作包括：i)从所述较低质量图像模式转换为较高质量图像模式以捕获较高质量版本的图像；以及ii)从所述相机方案中转发重要图像，以及不从所述相机方案中转发不重要的图像。

【技术特征摘要】
【国外来华专利技术】2015.09.28 US 62/234,010;2016.09.22 US 15/273,4271.一种存储用于集成相机方案的程序代码的机器可读存储介质，其中，当通过所述相机方案的处理硬件来处理所述程序代码时，所述相机方案执行一种方法，包括：利用所述处理硬件处理电子像素，所述集成相机方案包括所述处理硬件、存储器和传感器，所述处理硬件、存储器和传感器被堆叠和/或邻接，响应于所述传感器从图像接收光，由所述传感器生成所述电子像素，所述处理包括：在较低质量图像模式中从所述图像识别场景；响应于所述场景的识别，触发所述相机方案的动作，所述动作包括：i)从所述较低质量图像模式转换为较高质量图像模式以捕获较高质量版本的图像；以及ii)从所述相机方案中转发重要图像，以及不从所述相机方案中转发不重要的图像。2.根据权利要求1所述的机器可读介质，其中，所述方法还包括从所述存储器读取所述电子像素，所述电子像素存储在所述存储器中以捕获所述图像。3.根据权利要求1所述的机器可读介质，其中，ii)的所述重要图像包括具有感兴趣特征的第一帧，以及ii)的所述不重要的图像包括不具有所述感兴趣特征的第二帧。4.根据权利要求1所述的机器可读介质，其中，ii)的所述重要图像包括帧的感兴趣区域，以及ii)的所述不重要的图像包括所述帧的另一区域。5.根据权利要求1所述的机器可读介质，其中，所述动作还包括使所述传感器仅捕获所述图像的预期的感兴趣区域。6.根据权利要求1所述的机器可读介质，其中，上述ii)还包括丢弃所述不重要的图像。7.根据权利要求1所述的机器可读介质，其中，所述动作还包括从所述图像的捕获版本中移除不重要的信息。8.根据权利要求7所述的机器可读介质，其中，所述移除还包括压缩在所述图像的捕获版本内找到的感兴趣区域。9.根据权利要求1所述的机器可读介质，其中，所述动作还包括以比对图像质量较不敏感的第二图像的捕获版本低的压缩比来压缩对图像质量较敏感的第一图像的捕获版本。10.根据权利要求1所述的机器可读介质，其中，所述动作还包括以与所述图像内的感兴趣区域的一部分不同的压缩比压缩所述感兴趣区域的另一部分。11.一种计算系统，包括：一个或多个处理核；系统存储器；耦合到所述系统存储器的存储器控制器；集成的堆叠和/或邻接的传感器、存储器和处理硬件相机方案，其中：所述传感器用于从图像接收光并从所述光生成电子像素；所述处理硬件用于处理所述电子像素以：a)在较低质量图像模式中从所述图像识别场景；b)响应于所述场景的识别，触发所述相机方案的动作，所述动作包括以下：i)将所述相机方案从所述较低质量图像模式转换为较...

【专利技术属性】
技术研发人员：苏·焕·林，温宗晋，春·平·庄，布勒斯·阿格拉阿尔卡斯，
申请(专利权)人：谷歌有限责任公司，
类型：发明
国别省市：美国,US