用于捕捉图像的传感器及其控制方法技术

根据本公开的实施例，一种电子设备可以包括图像传感器和一个或多个处理器，该一个或多个处理器被配置为按照第一帧速率来获取外部对象的第一多个图像帧，检测与外部对象相关联的变化，当变化满足指定的条件时，按照第一帧速率或第二帧速率来获取外部对象的第二多个图像帧，使用第一多个图像帧中的至少一些来生成视频的第一部分，使用第二多个图像帧中的至少一些来生成视频的第二部分，以及使用按照第一帧速率或第三帧速率获取的外部对象的第三多个图像帧中的至少一些来生成视频的第三部分。

Sensors for capturing images and their control methods

【技术实现步骤摘要】
【国外来华专利技术】用于捕捉图像的传感器及其控制方法
本公开涉及用于捕捉图像的传感器及其控制方法。
技术介绍
最近，电子设备提供更多样化的服务以及附加功能。正在开发可在电子设备上运行的各种应用以满足各种用户的需求并且提高电子设备的实用性。照相机应用处于它们当中，并且用户可以使用她的电子设备的照相机来获取自拍照或背景。电子设备可以包括用于捕捉图像的照相机模块。照相机模块一般可以包括用于收集光的镜头、用于将收集的光转换为电信号的光电二极管，以及用于将电信号(其是模拟信号)转换为数字电信号的模数转换器(ADC)。将来自多个光电二极管的电信号转换为数字电信号并且输出数字电信号的照相机模块的处理可以被叫作‘读出’。
技术实现思路
技术问题为了解决以上讨论的不足，主要目的是提供用于检测图像帧的变化的方法和装置。有高速照相(photography)能力的电子设备依赖足够的存储容量和电力供应来实现高速照相，并且体积大、使用受限——它们应当在固定的位置中被使用。最近，对于能够进行高速照相的便携式电子设备的大力研究正在进行。高速照相使用能够存储在短时间获取的许多图像帧的存储器，这对可能没有配备足够容量的存储器的便携式电子设备施加相当多的限制。解决这样的限制的一种可选方法可以是检测外部对象——用于高速照相的目标的运动(motion)，并且从外部对象实际上开始移动的时刻起开始捕捉。由于受限的存储和功率消耗问题，便携式电子设备可能仍然在高速照相或利用紧接事件发生前所拍的并且先前存储的图像来产生慢动作(slowmotion)视频的使用方面受到限制。已经构思了在本文公开的各种实施例来解决这样的问题。根据本公开的实施例，能够使用包括图像传感器的便携式电子设备来连续多次地实现高速照相。根据本公开的实施例，可以使用紧接事件发生前所拍的图像来生成慢动作视频。技术方案根据本公开的实施例，一种电子设备可以包括图像传感器和一个或多个处理器，其中，一个或多个处理器可以被配置为接收用于照相的信号，响应于信号通过图像传感器按照第一帧速率来获取外部对象的第一多个图像帧，基于第一多个图像帧来检测与外部对象相关联的变化，当变化满足指定的条件时，按照第一帧速率或第二帧速率来获取外部对象的第二多个图像帧并且停止检测变化，使用第一多个图像帧中的至少一些来生成视频的第一部分，使用第二多个图像帧中的至少一些来生成视频的第二部分，以及在停止检测变化之后，基于用户输入，使用按照第一帧速率或第三帧速率获取的外部对象的第三多个图像帧中的至少一些来生成视频的第三部分。根据本公开的实施例，一种电子设备可以包括具有存储器的图像传感器和第一处理器和在图像传感器外部提供的第二处理器，其中，第一处理器可以被配置为从第二处理器接收用于视频照相的信号，响应于信号按照第一帧速率来获取外部对象的第一多个图像帧，在存储器中存储第一多个图像帧当中的指定的数量的第一图像帧，基于第一多个图像帧中的至少一些来检测与外部对象相关联的变化，以及当变化满足指定的条件时，按照第一帧速率或第二帧速率来获取外部对象的第二多个图像帧并且将第二多个图像帧存储在存储器中，并且第二处理器可以被配置为使用第一多个图像帧当中的第二图像帧来生成视频的第一部分，以及至少使用第一图像帧中的至少一些和第二多个图像帧中的至少一些来生成视频的第二部分。根据本公开的实施例，一种电子设备可以包括包括存储器的图像传感器和一个或多个处理器，其中，一个或多个处理器可以被配置为接收用于照相的信号，响应于信号通过图像传感器按照第一帧速率来获取外部对象的第一多个图像帧，使用第一多个图像帧中的至少一些来生成视频的第一部分，基于第一多个图像帧来检测与外部对象相关联的变化，当变化满足指定的条件时，停止生成第一部分，通过图像传感器按照所述第一帧速率或第二帧速率来获取外部对象的第二多个图像帧，识别与变化满足指定的条件时的时间相对应的第一信息，将第二多个图像帧存储在存储器中并且识别与获取第二多个图像帧中的每一个时的时间相对应的第二信息，当预设事件发生时，按照第一帧速率来获取外部对象的第三多个图像帧并且识别与获取第三多个图像帧中的每一个时的时间相对应的第三信息，以及至少基于识别的第一信息、第二信息，以及第三信息来生成视频的第二部分和第三部分。根据结合附图的用于公开本公开的示例性实施例的以下详细描述，本公开的其他方面、优点和显著的特征将对于本领域技术人员变得明显。技术效果根据本公开的实施例，能够使用便携式电子设备连续多次地执行高速照相。根据本公开的实施例，可以使用便携式电子设备基于紧接事件发生前所拍的图像来生成慢动作视频。附图说明为了本公开和其优点的更完全的理解，现在对结合附图所采取的以下描述进行参考，其中，同样的附图标记表示相同部分：图1图示出包括根据本公开的实施例的电子设备的网络环境的视图；图2图示出根据本公开的实施例的电子设备的块配置；图3图示出根据本公开的实施例的图像传感器的结构的框图；图4图示出根据本公开的实施例的、用于通过图像传感器来获取图像帧的处理的框图；图5图示出根据本公开的实施例的电子设备的组件的框图；图6图示出根据本公开的实施例的、使用电子设备来执行高速照相的方法的视图；图7图示出根据本公开的实施例的、使用电子设备来执行自动高速照相的方法的流程图；图8图示出根据本公开的实施例的、使用电子设备来执行高速照相的方法的流程图；图9图示出根据本公开的实施例的、使用电子设备来执行高速照相的方法的随着时间推移的视图；图10图示出根据本公开的实施例的、用于利用缓冲存储器的方法的流程图；图11图示出根据本公开的实施例的、用于利用缓冲存储器的方法的随着时间推移的视图；图12图示出根据本公开的实施例的、用于利用缓冲存储器的方法的随着时间推移的视图；图13和14图示出根据本公开的实施例的、使用电子设备来多次执行高速照相的方法的视图；图15A和15B图示出根据本公开的实施例的、用于在使用电子设备所获取的图像帧中设置感兴趣区域的方法的视图；图16图示出根据本公开的实施例的、用于在从图像传感器输出的多个图像帧之间进行区分的方法的视图；图17A以及17B图示出根据本公开的实施例的、用于在从图像传感器输出的多个图像帧之间进行区分的方法的随着时间推移的视图；图18和19图示出根据本公开的实施例的、在使用电子设备来执行高速照相时屏蔽失真部分的方法的视图；图20图示出根据本公开的实施例的、使用电子设备来多次执行高速照相的方法的流程图；图21图示出根据本公开的实施例的、使用缓冲存储器来执行高速照相的方法的流程图；以及图22图示出根据本公开的实施例的程序模块的框图。贯穿附图，相同附图标记将被理解为指的是相同部分、组件和结构。具体实施方式在进行以下的具体实施方式之前，可以有利的是，阐述遍及该专利文献所使用的某些语词的定义：术语“包括”和“包含”以及其派生意指不进行限制的包括；术语“或”是可兼的，意指和/或；字句“与...相关联的”和“与此相关联的”以及其派生可以意指包括包括、被包括在内、与...互连、包含、被包含在内、连接到或与...连接、耦合到或与...耦合、可与...通信、与...协作、交织、并置、接近于、绑定到或与...绑定、具有、具有...的属性等等；并且术语“控制器”意指控制至少一个操作的任何本文档来自技高网...

【技术保护点】
1.一种电子设备，包括：图像传感器；以及一个或多个处理器，其中，一个或多个处理器被配置为：接收用于照相的信号；响应于该信号，通过图像传感器按照第一帧速率来获取外部对象的第一多个图像帧；基于第一多个图像帧来检测与外部对象相关联的变化；当变化满足指定的条件时，按照第一帧速率或第二帧速率来获取外部对象的第二多个图像帧并且停止检测变化；使用第一多个图像帧中的至少一些来生成视频的第一部分；使用第二多个图像帧中的至少一些来生成视频的第二部分；以及在停止检测变化之后，基于用户输入，使用按照第一帧速率或第三帧速率获取的外部对象的第三多个图像帧中的至少一些来生成视频的第三部分。

【技术特征摘要】
【国外来华专利技术】2017.02.03 KR 10-2017-00158601.一种电子设备，包括：图像传感器；以及一个或多个处理器，其中，一个或多个处理器被配置为：接收用于照相的信号；响应于该信号，通过图像传感器按照第一帧速率来获取外部对象的第一多个图像帧；基于第一多个图像帧来检测与外部对象相关联的变化；当变化满足指定的条件时，按照第一帧速率或第二帧速率来获取外部对象的第二多个图像帧并且停止检测变化；使用第一多个图像帧中的至少一些来生成视频的第一部分；使用第二多个图像帧中的至少一些来生成视频的第二部分；以及在停止检测变化之后，基于用户输入，使用按照第一帧速率或第三帧速率获取的外部对象的第三多个图像帧中的至少一些来生成视频的第三部分。2.根据权利要求1所述的电子设备，其中，一个或多个处理器包括第一处理器和第二处理器，第一处理器被包括在图像传感器中，并且其中，第一处理器被配置为：从第二处理器接收用于照相的信号；响应于该信号按照第一帧速率来获取外部对象的第一多个图像帧；基于第一多个图像帧来检测与外部对象相关联的变化；以及当变化满足指定的条件时，按照第一帧速率或第二帧速率来获取外部对象的第二多个图像帧并且停止检测变化，以及其中，第二处理器被配置为：使用第一多个图像帧中的至少一些来生成视频的第一部分；使用第二多个图像帧中的至少一些来生成视频的第二部分；以及在停止检测变化之后，基于用户输入，通过第一处理器使用按照第一帧速率或第三帧速率获取的外部对象的第三多个图像帧中的至少一些来生成视频的第三部分。3.根据权利要求1所述的电子设备，其中，图像传感器还包括存储器，并且其中，一个或多个处理器进一步被配置为：在存储器中存储第一多个图像帧当中的指定的数量的第一图像帧；以及当变化满足指定的条件时，至少使用存储在存储器中的第二多个图像帧中的至少一些和第一图像帧中的至少一些来生成视频的第二部分。4.根据权利要求3所述的电子设备，其中，一个或多个处理器进一步被配置为：按照第一比率在第一多个图像帧当中选择指定的数量的第一图像帧；将所选择的第一图像帧存储在存储器中；按照第二比率在第一多个图像帧当中选择第二图像帧；以及使用所选择的第二图像帧来生成视频的第一部分。5.根据权利要求3所述的电子设备，其中，一个或多个处理器进一步被配置为：当变化满足指定的条件时，停止生成视频的第一部分；获取与停止第一部分的生成时的时间相对应的第一信息以及与获取第二多个图像帧中的每一个时的时间相对应的第二信息；以及基于第一信息和第二信息来生成视频的第二部分。6.根据权利要求1所述的电子设备，其中，一个或多个处理器进一步被配置为：接收关于与外部对象的至少一部分相对应的感兴趣区域(ROI)的信息；基于该信息从第一多个图像帧中的至少一些中识别ROI；以及基于识别的ROI来检测与外部对象相关联的变化。7.根据权利要求1所述的电子设备，其中，一个或多个处理器进一步被配置为：基于第一多个图像帧当中的在从接收用于照...

【专利技术属性】
技术研发人员：金东秀，下川修一，姜和映，尹泳权，金汶洙，元钟勋，李基赫，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR