当前位置: 首页 > 专利查询>英特尔公司专利>正文

用于对象跟踪的相机和光源同步制造技术

技术编号:15086905 阅读:76 留言:0更新日期:2017-04-07 16:45
用于相机和光源同步的技术包含成像装置以检测由成像装置生成的捕获图像中对象的当前位置。成像装置基于对象的当前位置预测由成像装置生成的下一捕获图像中对象的下一位置。成像装置确定照明间隔,所述照明间隔定义在其期间成像装置的相机将在下一捕获图像的捕获期间使一组传感器线曝光的时段,并且激活成像装置的光源以在确定的照明间隔期间照明对象。该组传感器线与对象的预测的下一位置相对应。

【技术实现步骤摘要】
【国外来华专利技术】
技术介绍
在各种应用中都已经实现了远程眼睛和视线跟踪系统,以跟踪用户的眼睛运动和/或用户正在看的方向。此类应用的范围从严肃的(例如机场保安系统)扩展到好玩的(例如视频游戏化身渲染)。典型的眼睛跟踪系统可使用各种技术来跟踪用户的眼睛运动。例如,在一些实现中,使用红外传感器来检测来自人的视网膜/角膜的反射。数字相机已经变成了无所不在的消费装置,经常合并在其它数字电子装置(诸如智能电话、平板计算机)以及其它计算装置中。典型的数字相机包含图像传感器(诸如电荷耦合装置(CCD)或互补金属氧化物半导体(CMOS)图像传感器),其可由单独的像素传感器阵列形成。取决于数字相机的类型,关联的图像传感器可操作在全局快门模式或卷帘快门模式。在全局快门相机中,单独的像素传感器的整个阵列在相同时间窗期间曝光并捕获。相反,在卷帘快门相机中,像素传感器阵列的各部分在不同时间捕获。然而,因为在卷帘快门相机中不在同一时间点捕获整个图像,所以捕获的图像可由于各种现象而失真。例如,快速运动或照明改变可导致在生成的图像中出现伪影。此外,传感器读出时间可比理想曝光时间长很多。然而,卷帘快门相机相对于全局快门相机时常受益于改进的图像质量和降低的成本。在操作时,卷帘快门相机通过陆续读出关联图像传感器的像素传感器(“传感器线”)的行或列来捕获图像(例如作为视频帧)。每个传感器线以顺序卷帘基础读出。类似地,传感器线在读出先前以卷帘顺序基础重置。确切地说,在那个传感器线的读出时间先前的预定时间量,每个传感器线被重置(即,任何存储的信息都被丢弃),使得在重置之后的相同时间量内使每个传感器线曝光。给定图像传感器的传感器线的总体数量定义关联相机的分辨率(即,传感器线的数量越大导致图像分辨率越高)。附图说明本文描述的概念在附图中作为示例而非作为限制图示。为了图示的简洁和清晰起见,在附图中图示的元件不一定按比例绘制。视情况而定,附图标记在各图之间已经被重复了以指示对应或类似元件。图1是具有相机和光源同步的成像装置的至少一个实施例的简化框图;图2是图1的成像装置的环境的至少一个实施例的简化框图;图3是用于执行图1的成像装置上的相机和光源同步的方法的至少一个实施例的简化流程图;图4是用于重置在图1的成像装置上具有相机和光源同步的传感器线的方法的至少一个实施例的简化流程图;图5是用于读取在图1的成像装置上具有相机和光源同步的传感器线的方法的至少一个实施例的简化流程图;以及图6是图1的成像装置上的相机和光源同步的至少一个实施例的简化时间图。具体实施方式虽然本公开的概念易受到各种修改和备选形式,但其特定实施例已经在附图中作为示例示出,并且将在本文中详细描述。然而,应该理解,没有意图将本公开的概念局限于所公开的具体形式,而是相反,本专利技术覆盖与本公开和所附权利要求书一致的所有修改、等同物和备选。在说明书中提到“一个实施例”、“实施例”、“图示实施例”等指示所描述的实施例可包含具体特征、结构或特性,但每一个实施例可以一定或者可以不一定包含该具体特征、结构或特性。而且,此类短语不一定是指同一实施例。另外,当结合实施例描述具体特征、结构或特性时,认为结合不管是否明确描述的其它实施例实现此类特征、结构或特性在本领域技术人员的知识范围内。此外,应该认识到,包含在以“至少一个A、B和C”形式的列表中的项目可意味着(A);(B);(C);(A和B);(B和C)或(A,B和C)。类似地,包含在以“A、B或C中的至少一个”形式的列表中的项目可意味着(A);(B);(C);(A和B);(B和C)或(A,B和C)所公开的实施例在一些情况下可用硬件、固件、软件或它们的任何组合来实现。所公开的实施例也可实现为由易失性或非易失性机器可读(例如计算机可读)介质携带或存储在其上的指令,其可由一个或多个处理器读取和执行。机器可读存储介质可实施为用于存储或传送由机器(例如易失性或非易失性存储器、媒体盘或其它媒体装置)可读形式的信息的任何存储装置、机制或其它物理结构。在附图中,一些结构或方法特征可按特定布置和/或排序示出。然而,应该认识到,可能不需要此类特定布置和/或排序。而是,在一些实施例中,此类特征可按与在说明性附图中示出的不同的方式和/或次序布置。此外,在具体附图中包含结构或方法特征不打算暗示此类特征在所有实施例中都需要,并且在一些实施例中,可能不包含或者可与其它特征组合。现在参考图1,在说明性实施例中,成像装置100包含相机120和与之关联的一个或多个光源(例如曝光灯)122。如下面更详细论述的,相机120包含多个传感器线130,并配置成操作在卷帘快门模式。在使用时,成像装置100配置成使相机120的传感器线130的读取/重置和关联光源122的激活同步。如下面详细论述的,此类同步可降低与激活光源关联的成像装置100的能耗,并且由此改进成像装置100的能效,因为仅在捕获期望对象(例如用户的眼睛)所需的时期内激活光源。在一些实施例中,同步也可降低运动模糊和其它图像伪影的发生率,和/或以最小或降低的成本来改进图像质量。成像装置100可被实施为能够进行相机和光源同步并执行本文描述的功能的任何类型计算装置。例如,成像装置100可实施为独立式数字相机、蜂窝电话、智能电话、平板计算机、膝上型计算机、个人数字助理、移动因特网装置、台式计算机和/或任何其它计算/通信装置。如图1所示,说明性成像装置100包含处理器110、输入/输出(\I/O\)子系统112、存储器114、数据存储装置116、通信电路118、相机120、一个或多个光源122和一个或多个外围装置124。当然,在其它实施例中,成像装置100可包含其它或附加组件,诸如通常在典型计算装置(例如各种输入/输出装置)中发现的组件。此外,在一些实施例中,一个或多个说明性组件可结合在另一组件中,或另外来自另一组件的一部分。例如,在一些实施例中,存储器114或其部分可合并在处理器110中。处理器110可被实施为能够执行本文描述的功能的任何类型处理器。例如,处理器可实施为单核或多核处理器、数字信号处理器、微控制器或其它处理器或处理/控制电路。类似地,存储器114可实施为能够执行本文描述的功能的任何类型易失性或非易失性存储器或数据存储装置。在操作中,存储器114可存储在操作成像装置100(诸如操作系统、应用、程序、库和驱动)期间使用的各种数据和软件。存储器114以通信方式经由I/O子系统112耦合到处理器110,I/O子系统104可实施为电路和/或组件以便于与成像装置100的处理器110、存储器114和/或其它组件的输入/输出操作。例如,I/O子系统112可实施为或以别的方式包含存储器控制器集线器、输入/输出控制集线器、固件装置、通信链路(即,点对点链路、总线链路、导线、电缆、光导、印刷电路板迹线等)和/或其它组件和子系统以便于输入/输出操作。在一些实施例中,I/O子系统112可形成片上系统(SoC)的一部分,并与成像装置100的处理器110、存储器114和其它组件一起结本文档来自技高网...

【技术保护点】
一种用于相机和光源同步的成像装置,所述成像装置包括:图像处理模块,用于检测由所述成像装置生成的捕获图像中对象的当前位置;位置预测模块,用于基于所述对象的所述当前位置预测由所述成像装置生成的下一捕获图像中所述对象的下一位置;以及照明模块,用于(i)确定照明间隔,所述照明间隔定义在其期间所述成像装置的相机将在所述下一捕获图像的捕获期间使一组传感器线曝光的时段,其中该组传感器线与所述对象的所述预测的下一位置相对应;以及(ii)激活所述成像装置的光源以在整个所述确定的照明间隔照明所述对象。

【技术特征摘要】
【国外来华专利技术】1.一种用于相机和光源同步的成像装置,所述成像装置包括:
图像处理模块,用于检测由所述成像装置生成的捕获图像中对象的当前位置;
位置预测模块,用于基于所述对象的所述当前位置预测由所述成像装置生成的下一捕获图像中所述对象的下一位置;以及
照明模块,用于(i)确定照明间隔,所述照明间隔定义在其期间所述成像装置的相机将在所述下一捕获图像的捕获期间使一组传感器线曝光的时段,其中该组传感器线与所述对象的所述预测的下一位置相对应;以及(ii)激活所述成像装置的光源以在整个所述确定的照明间隔照明所述对象。
2.如权利要求1所述的成像装置,其中检测所述对象的所述当前位置包括检测所述捕获图像中主体的眼睛的当前位置。
3.如权利要求1所述的成像装置,其中检测所述对象的所述当前位置包括基于所述对象的先前预测的位置减小所述捕获图像的搜索区域。
4.如权利要求1所述的成像装置,其中所述位置预测模块将接收指示所述计算装置或所述对象的移动的传感器数据,
其中预测所述对象的所述下一位置包括基于所述当前位置和所述传感器数据预测所述下一捕获图像中的所述对象的下一位置。
5.如权利要求1-4中任一项所述的成像装置,其中预测所述对象的所述下一位置包括基于所述当前位置和先前捕获图像中的所述对象的先前检测位置来预测所述下一捕获图像中的所述对象的下一位置。
6.如权利要求1-4中任一项所述的成像装置,其中所述照明模块将在所述相机使所述下一捕获图像的该组传感器线曝光的所述确定的照明间隔之外的时段期间停用所述光源。
7.如权利要求1所述的成像装置,进一步包括图像捕获模块以用所述成像装置的所述相机捕获所述下一捕获图像。
8.如权利要求7所述的成像装置,其中所述相机将基于电子卷帘快门模式捕获所述下一捕获图像。
9.如权利要求1-4中任一项所述的成像装置,其中所述成像装置是平板计算机、膝上型计算机或蜂窝电话中的一个。
10.如权利要求1所述的成像装置,进一步包括图像捕获模块以按顺序重置所述下一捕获图像中的每个传感器线,
其中所述照明模块将响应于(i)要重置的所述下一传感器线与所述对象的所述预测的下一位置相对应以及(ii)所述光源未已经激活的确定而激活所述光源。
11.如权利要求10所述的成像装置,其中所述图像捕获模块将在按顺序重置每个传感器线之后的预定曝光时间按顺序读取所述下一捕获图像中的每个传感器线;以及
其中所述照明模块将响应于要读取的下一传感器线和已读取的最后的传感器线都不与所述对象的所述预测的下一位置相对应的确定而停用所述光源。
12.如权利要求1-4中任一项所述的成像装置,其中所述图像处理模块将分析所述下一捕获图像以标识指示在所述下一捕获图像的捕获期间照明的所述传感器线的照明的传感器线;并且
其中所述照明模块将基于所述图像处理模块的分析来调整所述照明间隔。
13.一种用于成像装置上相机和光源同步的方法,所述方法包括:
由所述成像装置检测由...

【专利技术属性】
技术研发人员:N·荷来希
申请(专利权)人:英特尔公司N·荷来希
类型:发明
国别省市:美国;US

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1