【技术实现步骤摘要】
用于操作移动相机以用于低功率使用的方法和装置
[0001]本申请为分案申请,其原申请是于2020年7月13日(国际申请日为2019年1月9日)向中国专利局提交的专利申请,申请号为201980008306.2,专利技术名称为“用于操作移动相机以用于低功率使用的方法和装置”。
[0002]本公开一般涉及移动计算,并且更具体地涉及操作移动相机以用于低功率使用的方法和装置。
技术介绍
[0003]数码相机经常集成到手持移动计算设备(例如,蜂窝电话和手持媒体设备)中。数码相机还经常集成到其他类型的计算设备(例如,平板计算设备和膝上型计算机)中。这样的数码相机由用户操作以捕获数字图像和视频。数字图像和视频可以本地存储在集成了数码相机的计算设备的存储器中,或者它们可以通过公共网络(例如,互联网)或通过私有网络被发送到网络可访问的存储位置。不管怎样,数字图像和视频可以随后由那些图像和视频的创建者或者由具有访问权限的其他人访问。
附图说明
[0004]图1A示出了根据本公开的教导实现的示例移动相机。
[0005 ...
【技术保护点】
【技术特征摘要】
1.一种移动相机,包括:第一状态转换器,其用于在运动传感器数据中检测到运动特征之后将所述移动相机从运动特征检测状态转换到音频特征检测状态,所述运动特征检测状态的第一功率状态与比所述音频特征检测状态的第二功率状态更低的功耗相对应;第二状态转换器,其用于在第一卷积神经网络识别音频数据中的音频特征之后将所述移动相机从所述音频特征检测状态转换到低分辨率相机特征检测状态,所述移动相机用于在与所述低分辨率相机特征检测状态相对应的第三功率状态中使用比在与所述音频特征检测状态相对应的第二功率状态中更高的功耗操作;以及通信接口,其用于向外部设备发送以下各项中的至少一项:(a)与所述运动特征或所述音频特征相对应的第一元数据,或(b)与图像特征相对应的第二元数据,所述图像特征是在所述移动相机处于所述低分辨率相机特征检测状态中时由第二卷积神经网络在视觉捕获数据中识别的。2.根据权利要求1所述的移动相机,还包括:低分辨率相机,其用于在所述低分辨率相机特征检测状态下提供所述视觉捕获数据;以及高分辨率相机,其用于当所述移动相机处于所述低分辨率相机特征检测状态时处于待机模式,并且当所述移动相机处于高分辨率相机特征检测状态时处于活动模式。3.根据权利要求1或2中任一项或组合所述的移动相机,还包括所述第一卷积神经网络,其用于在所述音频特征满足特征触发阈值之后生成所述第一元数据。4.根据权利要求1或2中任一项或组合所述的移动相机,还包括所述第一卷积神经网络,其用于通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据,所述参考运动特征定义来自参考运动元数据库。5.根据权利要求1所述的移动相机,还包括所述第一卷积神经网络,其用于通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据,所述参考音频特征定义来自参考音频元数据库。6.根据权利要求1、2或5中任一项或任何组合所述的移动相机,其中,所述音频特征与以下各项中的至少一项相对应:(a)语音,(b)车辆声音,或(c)所述音频数据中反映的音频信号的变化率。7.根据权利要求1、2或5中任一项或任何组合所述的移动相机,还包括所述第二卷积神经网络,其用于通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据,所述参考视觉特征定义来自参考图像元数据库。8.一种装置,包括:第一电路,其用于响应于运动传感器数据中的运动特征而将移动相机从运动特征检测状态转换到音频特征检测状态,所述运动特征检测状态中的第一功率状态与比所述音频特征检测状态的第二功率状态更低的功耗相对应;第二电路,其用于在第一卷积神经网络识别音频数据中的音频特征之后将所述移动相机从所述音频特征检测状态转换到第一相机特征检测状态,所述移动相机用于在与所述第一相机特征检测状态相对应的第三功率状态中使用比在与所述音频特征检测状态相对应的第二功率状态中更高的功耗操作;以及
通信电路,其用于发送以下各项中的至少一项:(a)与所述运动特征或所述音频特征相对应的第一元数据,或(b)与图像特征相对应的第二元数据,所述图像特征是在所述移动相机处于所述第一相机特征检测状态中时由第二卷积神经网络在视觉捕获数据中识别的。9.根据权利要求8所述的装置,还包括:第一相机,其用于在所述第一相机特征检测状态下提供所述视觉捕获数据;以及第二相机,其用于当所述移动相机处于所述第一相机特征检测状态时处于待机模式,并且当所述移动相机处于第二相机特征检测状态时处于活动模式。10.根据权利要求8或9中任一项或组合所述的装置,还包括所述第一卷积神经网络,其用于在所述音频特征满足特征触发阈值之后生成所述第一元数据。11.根据权利要求8或9中任一项或组合所述的装置,还包括所述第一卷积神经网络,其用于通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据,所述参考运动特征定义来自参考运动元数据库。12.根据权利要求8所述的装置,还包括所述第一卷积神经网络,其用于通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据,所述参考音频特征定义来自参考音频元数据库。13.根据权利要求8、9或12中任一项或任何组合所述的装置,其中,所述音频特征与以下各项中的至少一项相对应:(a)语音,(b)车辆声音,或(c)所述音频数据中反映的音频信号的变化率。14.根据权利要求8、9或12中任一项或任何组合所述的装置,还包括所述第二卷积神经网络,其用于通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据,所述参考视觉特征定义来自参考图像元数据库。15.一种移动相机,包括:至少一个存储器;以及处理器电路模块,其包括以下各项中的一项或多项:中央处理器单元、图形处理器单元或数字信号处理器中的至少一个,所述中央处理器单元、所述图形处理器单元或所述数字信号处理器中的至少一个具有控制电路、算术和逻辑电路以及一个或多个寄存器,所述控制电路用于控制所述处理器电路模块内的数据移动,所述算术和逻辑电路用于执行与指令相对应的一个或多个第一操作,所述寄存器用于存储所述一个或多个第一操作的第一结果,所述移动相机中的所述指令;现场可编程门阵列(FPGA),所述FPGA包括第一逻辑门电路模块、多个可配置互连和存储电路,所述第一逻辑门电路模块和所述互连用于执行一个或多个第二操作,所述存储电路用于存储所述一个或多个第二操作的第二结果;或者专用集成电路模块,其包括用于执行一个或多个第三操作的第二逻辑门电路模块;处理器电路模块,其用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以对以下各项进行实例化:第一状态转换器,其用于响应于运动传感器数据中的运动特征而将所述移动相机从运动特征检测状态转换到音频特征检测状态,所述运动特征检测状态中的第一功率状态与比所述音频特征检测状态的第二功率状态更低的功耗相对应;第二状态转换器,其用于在第一卷积神经网络识别音频数据中的音频特征之后将所述
移动相机从所述音频特征检测状态转换到低分辨率相机特征检测状态,所述移动相机用于在与所述低分辨率相机特征检测状态相对应的第三功率状态中使用比在与所述音频特征检测状态相对应的第二功率状态中更高的功耗操作;以及通信接口,其用于向外部设备发送以下各项中的至少一项:(a)与所述运动特征或所述音频特征相对应的第一元数据,或(b)与图像特征相对应的第二元数据,所述图像特征是在所述移动相机处于所述低分辨率相机特征检测状态中时由第二卷积神经网络在视觉捕获数据中识别的。16.根据权利要求15所述的移动相机,还包括:低分辨率相机,其用于在所述低分辨率相机特征检测状态下提供所述视觉捕获数据;以及高分辨率相机,其用于当所述移动相机处于所述低分辨率相机特征检测状态时处于待机模式,并且当所述移动相机处于高分辨率相机特征检测状态时处于活动模式。17.根据权利要求15或16中任一项或组合所述的移动相机,其中,所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第一卷积神经网络实例化为在所述音频特征满足特征触发阈值后生成所述第一元数据。18.根据权利要求15或16中任一项或组合所述的移动相机,其中,所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第一卷积神经网络实例化为通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据,所述参考运动特征定义来自参考运动元数据库。19.根据权利要求15所述的移动相机,其中,所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第一卷积神经网络实例化为通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据,所述参考音频特征定义来自参考音频元数据库。20.根据权利要求15、16或19中任一项或任何组合所述的移动相机,其中,所述音频特征与以下各项中的至少一项相对应:(a)语音,(b)车辆声音,或(c)所述音频数据中反映的音频信号的变化率。21.根据权利要求15、16或19中任一项或任何组合所述的移动相机,其中,所述处理器电路模块用于执行所述第一操作、所述第二操作或所述第三操作中的至少一个以将所述第二卷积神经网络实例化为通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据,所述参考视觉特征定义来自参考图像元数据库。22.一种计算机可读存储介质,包括指令,所述指令当被执行时,使处理器电路模块至少用于:在运动传感器数据中检测到运动特征之后将移动相机从运动特征检测状态转换到音频特征检测状态,所述运动特征检测状态的第一功率状态与比所述音频特征检测状态的第二功率状态更低的功耗相对应;在第一卷积神经网络识别音频数据中的音频特征之后将所述移动相机从所述音频特征检测状态转换到低分辨率相机特征检测状态,所述移动相机用于在与所述低分辨率相机特征检测状态相对应的第三功率状态中使用比在与所述音频特征检测状态相对应的第二功率状态中更高的功耗操作;以及
向外部设备发送以下各项中的至少一项:(a)与所述运动特征或所述音频特征相对应的第一元数据,或(b)与图像特征相对应的第二元数据,所述图像特征是在所述移动相机处于所述低分辨率相机特征检测状态中时由第二卷积神经网络在视觉捕获数据中识别的。23.根据权利要求22所述的计算机可读存储介质,其中,所述指令还用于使所述处理器电路模块在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后,使所述移动相机转换到高分辨率相机特征检测状态。24.根据权利要求22或23中任一项或组合所述的计算机可读存储介质,其中,所述指令进一步用于使所述处理器电路模块在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后使所述移动相机捕获视频。25.根据权利要求22或23中任一项或组合所述的计算机可读存储介质,其中,所述图像特征是面部,所述指令进一步用于使所述处理器电路模块访问服务以获得关于与所述面部相对应的人的信息。26.根据权利要求22所述的计算机可读存储介质,其中,所述指令进一步用于使所述处理器电路模块在所述音频特征满足特征触发阈值之后使用所述第一卷积神经网络生成所述第一元数据。27.根据权利要求22或23中任一项或组合所述的计算机可读存储介质,其中,所述指令进一步用于使所述处理器电路模块通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据,所述参考运动特征定义来自参考运动元数据库。28.根据权利要求22所述的计算机可读存储介质,其中,所述指令进一步用于使所述处理器电路模块通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据,所述参考音频特征定义来自参考音频元数据库。29.根据权利要求22、26或28中任一项或任何组合所述的计算机可读存储介质,其中,所述音频特征与以下各项中的至少一项相对应:(a)语音,(b)车辆声音,或(c)所述音频数据中反映的音频信号的变化率。30.根据权利要求22或23中任一项或组合所述的计算机可读存储介质,其中,所述指令用于使所述处理器电路模块通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据,所述参考视觉特征定义来自参考图像元数据库。31.一种用于操作移动相机的系统,所述系统包括:存储器;可编程电路模块;以及指令,所述指令用于使所述可编程电路模块用于:响应于运动传感器数据中的运动特征,将所述移动相机从运动特征检测状态转换到音频特征检测状态,所述运动特征检测状态的第一功率状态与比所述音频特征检测状态的第二功率状态更低的功耗相对应;在第一卷积神经网络识别音频数据中的音频特征之后将所述移动相机从所述音频特征检测状态转换到低分辨率相机特征检测状态,所述移动相机用于在与所述低分辨率相机特征检测状态相对应的第三功率状态中使用比在与所述音频特征检测状态相对应的第二功率状态中更高的功耗操作;以及向外部设备发送以下各项中的至少一项:(a)与所述运动特征或所述音频特征相对应
的第一元数据,或(b)与图像特征相对应的第二元数据,所述图像特征是在所述移动相机处于所述低分辨率相机特征检测状态中时由第二卷积神经网络在视觉捕获数据中识别的。32.根据权利要求31所述的系统,其中,所述可编程电路模块用于在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后使所述移动相机转换到高分辨率相机特征检测状态。33.根据权利要求31或32中任一项或组合所述的系统,其中,所述可编程电路模块用于在所述第二卷积神经网络识别所述视觉捕获数据中的图像特征之后使所述移动相机捕获视频。34.根据权利要求31或32中任一项或组合所述的系统,其中,所述图像特征是面部,并且所述可编程电路模块用于访问服务以获得关于与所述面部相对应的人的信息。35.根据权利要求31所述的系统,其中,所述可编程电路模块用于在所述音频特征满足特征触发阈值之后使用所述第一卷积神经网络生成所述第一元数据。36.根据权利要求31或32中任一项或组合所述的系统,其中,所述可编程电路模块用于通过将所述运动特征与参考运动特征定义进行比较来生成所述第一元数据,所述参考运动特征定义来自参考运动元数据库。37.根据权利要求31所述的系统,其中,所述可编程电路模块用于通过将所述音频特征与参考音频特征定义进行比较来生成所述第一元数据,所述参考音频特征定义来自参考音频元数据库。38.根据权利要求31、35或37中任一项或任何组合所述的系统,其中,所述音频特征与以下各项中的至少一项相对应:(a)语音,(b)车辆声音,或(c)所述音频数据中反映的音频信号的变化率。39.根据权利要求31或32中任一项或组合所述的系统,其中,所述可编程电路模块用于通过将所述图像特征与参考视觉特征定义进行比较来生成所述第二元数据,所述参考视觉特征定义来自参考图像元数据库。40.一种用于操作移动相机的方法,所述方法包括:在运动传感器数据中检测到运动特征之后将所述移动相机从运动特征检测状态转换到音频特征检测状态,所述运动特征检测状态的第一功率状态与比所述...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。