【技术实现步骤摘要】
【国外来华专利技术】
概括而言，本公开内容涉及控制相机设备。例如，本公开内容的各方面涉及用于减少的相机使用时延的预测性相机初始化。
技术介绍
1、电子设备越来越多地配备有相机硬件以捕获图像和/或视频以供消费。例如，计算设备可以包括相机(例如，诸如包括一个或多个相机的移动电话或智能电话之类的移动设备)，以允许计算设备捕获场景、人、对象等的视频或图像。图像或视频可以由计算设备(例如，移动设备、ip相机、扩展现实设备、连接设备、安全系统等)捕获和处理，并且被存储和/或输出以供消费(例如，显示在设备和/或另一设备上)。在一些情况下，图像或视频可以被进一步处理以用于效果(例如，压缩、图像增强、图像恢复、缩放、帧速率转换、降噪等)和/或某些应用，诸如计算机视觉、扩展现实(例如，增强现实、虚拟现实等)、对象检测、图像识别(例如，面部识别、对象识别、场景识别等)、特征提取、认证和自动化等。
2、在一些情况下，电子设备可以处理图像以检测由图像捕获的对象、面部、事件和/或任何其它项目。对象检测可以用于各种应用，诸如例如认证、自动化、姿势识别、监视、扩展现实、计算机视觉等。在一些示例中，电子设备可以实现持续地或周期性地操作以自动检测环境中的某些对象的较低功率或“始终开启”(aon)相机。可以针对各种用例实现较低功率相机，诸如例如，持久手势检测、持久对象(例如，面部/人、动物、车辆、设备、平面、事件等)检测、持久对象扫描(例如，快速响应(qr)码扫描、条形码扫描等)、用于认证的持久面部识别等。在许多情况下，较低功率相机的成像、处理和/或性能能力/结果可能受到限制
技术实现思路
1、本文描述了用于减少的时延的预测性相机初始化的系统和技术。根据至少一个示例，提供了一种用于减少的时延的预测性相机初始化的方法。所述方法可以包括：从第一图像捕获设备获得描绘场景的图像数据；基于所述图像数据来对所述场景进行分类；基于对所述场景的所述分类来预测相机使用事件；以及基于所预测的相机使用事件来调整所述第一图像捕获设备和第二图像捕获设备中的至少一者的功率模式。
2、根据至少一个示例，提供了一种用于减少的时延的预测性相机初始化的非暂时性计算机可读介质。所述非暂时性计算机可读介质可以包括指令，所述指令在由一个或多个处理器执行时使得所述一个或多个处理器进行以下操作：从第一图像捕获设备获得描绘场景的图像数据；基于所述图像数据来对所述场景进行分类；基于对所述场景的所述分类来预测相机使用事件；以及基于所预测的相机使用事件来调整所述第一图像捕获设备和第二图像捕获设备中的至少一者的功率模式。
3、根据至少一个示例，提供了一种用于减少的时延的预测性相机初始化的装置。所述装置可以包括存储器和一个或多个处理器，其被配置为：从第一图像捕获设备获得描绘场景的图像数据；基于所述图像数据来对所述场景进行分类；基于对所述场景的所述分类来预测相机使用事件；以及基于所预测的相机使用事件来调整所述第一图像捕获设备和第二图像捕获设备中的至少一者的功率模式。
4、根据至少一个示例，提供了另一种用于减少的时延的预测性相机初始化的装置。所述装置可以包括用于进行操作的单元：从第一图像捕获设备获得描绘场景的图像数据；基于所述图像数据来对所述场景进行分类；基于对所述场景的所述分类来预测相机使用事件；以及基于所预测的相机使用事件来调整所述第一图像捕获设备和第二图像捕获设备中的至少一者的功率模式。
5、在一些方面中，上文所描述的方法、非暂时性计算机可读介质和装置可以基于来自所述第一图像捕获设备的一个或多个图像来预收敛曝光值和/或聚焦值。
6、在一些方面中，上文所描述的方法、非暂时性计算机可读介质和装置可以获得指示与所述第一图像捕获设备相关联的电子设备的位置的位置数据和来自与所述电子设备相关联的一个或多个传感器的传感器数据中的至少一项，所述传感器数据包括指示与所述电子设备相关联的运动的运动测量、由所述一个或多个传感器捕获的音频数据、以及指示所述电子设备的位置的位置测量中的至少一项；以及基于所述位置数据、所述音频数据和所述传感器数据中的至少一项以及所述图像数据来对所述场景进行分类。
7、在一些示例中，所预测的相机使用事件可以包括被配置为触发与所述第一图像捕获设备相关联的电子设备捕获额外图像数据的用户输入。
8、在一些示例中，调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式可以包括初始化所述第二图像捕获设备。在一些示例中，所述第二图像捕获设备是在功率模式下被初始化的，所述功率模式比用于捕获所述图像数据的所述第一图像捕获设备的相应功率模式消耗更多的功率。
9、在一些方面中，上文所描述的方法、非暂时性计算机可读介质和装置可以在所述功率模式下使用所述第二图像捕获设备捕获额外图像数据，所述功率模式比所述第一图像捕获设备的相应功率模式消耗更多的功率。在一些示例中，所述功率模式包括以下各项中的至少一项：比与用于捕获所述图像数据的所述第一图像捕获设备的所述相应功率模式相关联的分辨率更高的分辨率、比与用于捕获所述图像数据的所述第一图像捕获设备的所述相应功率模式相关联的帧速率更高的帧速率、比与用于捕获所述图像数据的所述第一图像捕获设备的所述相应功率模式相关联的图像传感器数量更高的图像传感器数量、以及支持比与所述第一图像捕获设备相关联的所述第二图像传感器所支持的不同功率模式消耗更多的功率的特定功率模式的第一图像传感器。
10、在一些情况下，所述第二图像捕获设备与比与所述第一图像捕获设备相关联的第二相机流水线消耗更多的功率的第一相机流水线相关联。在一些示例中，所述第一相机流水线包括比所述第二相机流水线更多的图像处理能力和具有比所述第二相机流水线更高的处理性能的一个或多个硬件组件中的至少一者。
11、在一些示例中，初始化所述第二图像捕获设备包括增加所述第二图像捕获设备的所述功率模式。
12、在一些示例中，初始化所述第二图像捕获设备包括增加所述第二图像捕获设备的所述功率模式。在一些情况下，增加所述第二图像捕获设备的所述功率模式包括：增加所述第二图像捕获设备和与所述第二图像捕获设备的相机流水线相关联的一个或多个硬件组件中的至少一者的功率中的至少一者。
13、在一些方面中，上述方法、非暂时性计算机可读介质和装置可以将来自所述第一图像捕获设备的所述图像数据存储在缓冲器中，其中，所述图像数据的至少一部分在所述第二图像捕获设备的初始化期间和在所述第二图像捕获设备的所述初始化完成之前中的至少一种情况下被存储在所述缓冲器中；以及经由与所述第二图像捕获设备相关联的相机流水线来处理存储在所述缓冲器中的所述图像数据的至少所述一部分，其中，所述图像数据的所述至少所述一部分是在所述第二图像捕获设备被初始化之后处理的。...
【技术保护点】
1.一种用于预测性相机初始化的装置，所述装置包括：
2.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
3.根据权利要求2所述的装置，其中，所述一个或多个处理器被配置为：
4.根据权利要求2所述的装置，其中，所述第二图像捕获设备与比与所述第一图像捕获设备相关联的第二相机流水线消耗更多的功率的第一相机流水线相关联，其中，所述第一相机流水线包括比所述第二相机流水线更多的图像处理能力和具有比所述第二相机流水线更高的处理性能的一个或多个硬件组件中的至少一者。
5.根据权利要求2所述的装置，其中，为了初始化所述第二图像捕获设备，所述一个或多个处理器被配置为：增加所述第二图像捕获设备的所述功率模式。
6.根据权利要求2所述的装置，其中，为了增加所述第二图像捕获设备的所述功率模式，所述一个或多个处理器被配置为：
7.根据权利要求2所述的装置，其中，所述一个或多个处理器被配置为：
8.根据权利要求1所述的装置，其中，为了
9.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
10.根据权利要求1所述的装置，其中，所述一个或多个处理器被配置为：
11.根据权利要求1所述的装置，其中，所述一个或多个处理器被配置为：
12.根据权利要求1所述的装置，其中，所预测的相机使用事件包括被配置为触发所述装置捕获额外图像数据的用户输入。
13.根据权利要求1所述的装置，其中，为了对所述场景进行分类，所述一个或多个处理器被配置为：检测与所述图像数据相关联的事件，其中，所述事件包括以下各项中的至少一项：在所述图像数据中描绘的所述场景、所述装置的特定移动、所述装置相对于与所述装置相关联的用户的位置、在所述图像数据中检测到的人群、与一个或多个用户相关联的手势、在对象上显示的图案、以及一组人相对于彼此的位置。
14.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
15.根据权利要求1所述的装置，其中，所述一个或多个处理器被配置为：
16.根据权利要求1所述的装置，其中，为了调整所述第二图像捕获设备的所述功率模式，所述一个或多个处理器被配置为打开或实现以下各项中的至少一项：泛光照明器、深度传感器设备、双图像捕获设备系统、结构化光系统、飞行时间系统、音频算法、位置服务、以及与关联于所述第一图像捕获设备的相机流水线不同的相机流水线。
17.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
18.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
19.根据权利要求1所述的装置，其中，所述装置包括移动设备。
20.根据权利要求19所述的装置，其中，所述装置包括扩展现实设备。
21.一种用于预测性相机初始化的方法，所述方法包括：
22.根据权利要求21所述的方法，其中，调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式包括：
23.根据权利要求22所述的方法，还包括：
24.根据权利要求22所述的方法，其中，所述第二图像捕获设备与比与所述第一图像捕获设备相关联的第二相机流水线消耗更多的功率的第一相机流水线相关联，其中，所述第一相机流水线包括比所述第二相机流水线更多的图像处理能力和具有比所述第二相机流水线更高的处理性能的一个或多个硬件组件中的至少一者。
25.根据权利要求22所述的方法，其中，初始化所述第二图像捕获设备包括：增加所述第二图像捕获设备的所述功率模式。
26.根据权利要求22所述的方法，其中，增加所述第二图像捕获设备的所述功率模式包括：
27.根据权利要求22所述的方法，还包括：
28.根据权利要求21所述的方法，其中，调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式包括：
29.根据权利要求21所述的方法，其中，调整所述第一图像捕...
【技术特征摘要】
【国外来华专利技术】
1.一种用于预测性相机初始化的装置，所述装置包括：
2.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
3.根据权利要求2所述的装置，其中，所述一个或多个处理器被配置为：
4.根据权利要求2所述的装置，其中，所述第二图像捕获设备与比与所述第一图像捕获设备相关联的第二相机流水线消耗更多的功率的第一相机流水线相关联，其中，所述第一相机流水线包括比所述第二相机流水线更多的图像处理能力和具有比所述第二相机流水线更高的处理性能的一个或多个硬件组件中的至少一者。
5.根据权利要求2所述的装置，其中，为了初始化所述第二图像捕获设备，所述一个或多个处理器被配置为：增加所述第二图像捕获设备的所述功率模式。
6.根据权利要求2所述的装置，其中，为了增加所述第二图像捕获设备的所述功率模式，所述一个或多个处理器被配置为：
7.根据权利要求2所述的装置，其中，所述一个或多个处理器被配置为：
8.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
9.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
10.根据权利要求1所述的装置，其中，所述一个或多个处理器被配置为：
11.根据权利要求1所述的装置，其中，所述一个或多个处理器被配置为：
12.根据权利要求1所述的装置，其中，所预测的相机使用事件包括被配置为触发所述装置捕获额外图像数据的用户输入。
13.根据权利要求1所述的装置，其中，为了对所述场景进行分类，所述一个或多个处理器被配置为：检测与所述图像数据相关联的事件，其中，所述事件包括以下各项中的至少一项：在所述图像数据中描绘的所述场景、所述装置的特定移动、所述装置相对于与所述装置相关联的用户的位置、在所述图像数据中检测到的人群、与一个或多个用户相关联的手势、在对象上显示的图案、以及一组人相对于彼此的位置。
14.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
15.根据权利要求1所述的装置，其中，所述一个或多个处理器被配置为：
16.根据权利要求1所述的装置，其中，为了调整所述第二图像捕获设备的所述功率模式，所述一个或多个处理器被配置为打开或实现以下各项中的至少一项：泛光照明器、深度传感器设备、双图像捕获设备系统、结构化光系统、飞行时间系统、音频算法、位置服务、以及与关联于所述第一图像捕获设备的相机流水线不同的相机流水线。
17.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所述第二图像捕获设备中的至少一者的所述功率模式，所述一个或多个处理器被配置为：
18.根据权利要求1所述的装置，其中，为了调整所述第一图像捕获设备和所...
【专利技术属性】
技术研发人员：W·J·霍兰，U·马赫布卜，V·R·K·达亚娜，R·特鲁帕提，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。