成像装置、电子器件及成像方法制造方法及图纸

本发明专利技术的目的是提供一种成像装置和电子器件，其可以对被摄体的运动中用户期望的瞬时运动进行成像。作为根据本公开的成像装置的示例，CIS(2)具有成像单元(5)、存储器(6)、检测单元(83)和决定单元(84)。成像单元(5)顺序并连续地捕获被摄体的图像以生成成像数据。存储器(6)存储成像数据。检测单元(83)基于成像数据检测被摄体的运动。决定单元(84)将在其中由检测单元检测到被摄体在与基于成像数据预测的被摄体运动方向一致的方向上的运动的成像数据，决定为要存储在存储器中的成像数据。决定为要存储在存储器中的成像数据。决定为要存储在存储器中的成像数据。

【技术实现步骤摘要】
【国外来华专利技术】成像装置、电子器件及成像方法


[0001]本公开涉及成像装置、电子器件以及成像方法。

技术介绍

[0002]存在具有连续成像功能的成像装置，该成像装置能够通过以高速连续地对移动的被摄体进行成像来捕获移动的被摄体，具体地说，在被摄体的运动中捕获在用户期望时刻的被摄体的运动。例如，专利文献1描述了一种成像装置，当确定用于连续成像的操作单元正被用户按压时，该成像装置控制以高于当前帧速度的帧速度执行连续成像，并且当确定操作单元未被按压时，该成像装置控制以保持当前帧速度。
[0003]现有技术文献
[0004]专利文献
[0005]专利文献1：JP 2012
‑
147355 A

技术实现思路

[0006]技术问题
[0007]然而，在执行高速连续成像时，存在成像装置不能在被摄体的运动中的用户期望时刻对被摄体的运动进行成像的情况。因此，本公开提出了一种成像装置、电子器件以及成像方法，其能够在被摄体的运动中在用户期望的时刻对被摄体的运动进行成像。
[0008]问题的解决方案
[0009]根据本公开的成像装置包括成像单元、存储器、检测单元以及决定单元。成像单元连续地捕获被摄体的图像以生成图像数据。存储器存储图像数据。检测单元基于图像数据检测被摄体的运动。决定单元将已由检测单元检测到被摄体在与基于图像数据预测的被摄体移动方向一致的方向上的运动的图像数据，决定为要保存在存储器中的图像数据。
附图说明
[0010]图1是示出根据第一实施例的电子器件的示意性配置示例的框图。
[0011]图2是根据第一实施例的CIS的操作示意图。
[0012]图3是示出根据第一实施例的比较示例的高速捕获图像的示图。
[0013]图4是示出根据第一实施例的高速捕获图像的示图。
[0014]图5是示出根据第一实施例的由CIS执行的处理的示例的流程图。
[0015]图6是示出根据第二实施例的电子器件的示意性配置示例的框图。
[0016]图7是根据第二实施例的CIS的操作示意图。
具体实施方式
[0017]下面将参照附图详细描述本公开的实施例。在下面的每个实施例中，相同的部分由相同的参考符号表示，并且将省略相同的部分的重复描述。
[0018][1.第一实施例][0019][1
‑
1.根据第一实施例的电子器件的配置][0020]图1是示出根据第一实施例的电子器件的示意性配置示例的框图。图1所示的电子器件1是捕获静止图像或运动图像的设备，并且电子器件1的示例包括具有相机功能的数码相机和数字摄像机、或平板终端、智能手机等。
[0021]如图1所示，电子器件1包括互补金属氧化物半导体(CMOS)图像传感器(以下称为CIS 2)、应用处理器(以下称为AP 3)、以及显示操作单元4。
[0022]显示操作单元4是具有显示图像的功能和接收用户的触摸操作的功能的触摸面板液晶显示器。可替换地，代替显示操作单元4，电子器件1可以包括：用于显示图像的液晶显示器；以及用于接收用户的触摸操作的操作开关。
[0023]作为具有单芯片配置的成像装置的示例，CIS 2捕获图像，并且将捕获图像的图像数据输出到AP 3。除了捕获正常静止图像或运动图像的功能之外，CIS 2还具有以高速连续地对被摄体成像的高速成像功能(以下称为高速成像)。根据本公开的成像装置不限于CIS 2，并且可以是诸如电荷耦合器件(CCD)图像传感器的其它图像传感器。
[0024]AP 3包括：AP控制单元31，其是根据电子器件1的应用执行各种应用程序的处理器(例如中央处理单元(CPU))的示例；以及与CIS 2执行信息通信的通信接口(I/F)32。
[0025]AP 3对从CIS 2输入的图像数据执行例如校正处理和修改处理，以及执行用于在显示操作单元4上显示图像数据的显示控制处理。此外，通过控制以在显示操作单元4上按时间序列显示由CIS 2高速捕获的捕获图像的图像数据，AP 3可以执行高速移动的被摄体的运动的超慢回放。
[0026]这里，当装备在诸如智能手机的常规电子器件上的相机执行高速成像时，CIS以高速连续地对被摄体成像，并且将捕获图像的图像数据按时间序列存储在存储器中。
[0027]然而，不幸的是，电子器件对存储图像数据的存储器的容量具有上限。为此，在常规电子器件中，例如，当用户开始高速成像的操作定时太早时，在被摄体的运动中用户期望的时刻到来之前，捕获图像的图像数据量已达到存储器容量的上限。
[0028]在这种情况下，即使当以高速捕获的图像数据以超慢速度在电子器件上回放时，回放在被摄体的运动中用户期望时刻的图像也可能是困难的，因为捕获在被摄体的运动中用户期望时刻的运动的图像数据没有存储在存储器中。以这种方式，存在这样的情况：即用常规电子器件捕获被摄体的运动当中用户期望时刻的被摄体的运动是不可能的。
[0029]因此，根据本公开的CIS 2具有即使当用户用于开始高速成像的操作太早时也能够捕获在用户期望时刻的被摄体的运动的配置。具体地，CIS 2包括成像单元5、存储器6、通信I/F 7以及开始判定单元8。
[0030]成像单元5包括光接收单元51和读出单元52。光接收单元51包括：配备有变焦透镜、对焦透镜、光圈等的光学系统；以及像素阵列单元，该像素阵列单元具有例如其中包括诸如光电二极管的光接收元件的单位像素以二维矩阵布置的配置。
[0031]光接收单元51使用光学系统在像素阵列单元的光接收表面上形成从外部入射的光的图像。通过对入射到光接收元件上的光执行光电转换，像素阵列单元的每个单位像素可读地累积与入射光量相对应的电荷。
[0032]读出单元52包括：读出电路，读出在每个单位像素中累积的电荷作为像素信号；以
及模数转换器(ADC)，通过将由读出电路读出的模拟像素信号转换成数字值来生成数字图像数据。读出单元52以一帧图像为单位将生成的图像数据输出到开始判定单元8。
[0033]成像单元5具有自动对焦(AF)功能。当通过AF功能对被摄体实现对焦(焦点设置)时，成像单元5向开始判定单元8输出表示捕获图像中焦点的位置的信息。
[0034]当从显示操作单元4输入表示用户已经执行了成像操作的信号时，成像单元5捕获静止图像或运动图像。此外，成像单元5在接收到表示用户已经对显示操作单元4执行了高速成像开始操作的信号(以下，称为高速成像触发)时开始高速成像。
[0035]开始判定单元8通过从成像单元5输入的高速成像而获得的图像数据中擦除在用户可能期望捕获的图像数据之前捕获的图像数据，并且选择性地将用户可能期望捕获的图像数据存储在存储器6中。
[0036]通过这种配置，即使当用户用于开始高速成像的操作太早时，开始判定单元8也能够在用户期望的时刻对被摄体的运动成像。例如，开始判定单元8包括具有中央处理单元(CPU)、只读存储器(ROM)、随机存取存储器(RAM)等本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种成像装置，包括：成像单元，连续地捕获被摄体的图像以生成图像数据；存储器，存储所述图像数据；检测单元，基于所述图像数据检测所述被摄体的运动；以及决定单元，将由所述检测单元检测到所述被摄体在与基于图像数据预测的所述被摄体的移动方向一致的方向上的运动的图像数据，决定为要保存在所述存储器中的图像数据。2.根据权利要求1所述的成像装置，其中，所述决定单元基于在存储于所述存储器中之前的图像数据，决定要保存在所述存储器中的所述图像数据，并且将决定要保存的所述图像数据存储并保存在所述存储器中。3.根据权利要求1所述的成像装置，其中，所述决定单元基于在存储于所述存储器中之后的图像数据，决定要保存在所述存储器中的所述图像数据，并且从所述存储器中擦除决定要保存的所述图像数据之外的图像数据。4.权利要求1所述的成像装置，还包括：预测单元，基于所述图像数据预测所述被摄体的所述移动方向。5.根据权利要求4所述的成像装置，其中，所述预测单元通过使用深度神经网络DNN的DNN处理来预测所述被摄体的所述移动方向。6.根据权利要求1所述的成像装置，还包括：指定单元，根据所述图像数据指定所述被摄体。7.根据权利要求6所述的成像装置，其中，所述指定单元指定在所述图像中心的对象作为被摄体。8.根据权利要求6所述的成像装置，其中，所述指定单元指定用户从所述图像中选择的对象作为所述被摄体。9.根据权利要求6所述的成像装置，其中，所述指定单元从要被指定为所述被摄体的目标中，排除用户从所述图像中选择的对象。10.根据权利要求6所述的成像装置，其中，所述指定单元指定接近于自动对焦的焦点的对...

【专利技术属性】
技术研发人员：渡部刚史，
申请(专利权)人：索尼半导体解决方案公司，
类型：发明
国别省市：