交互处理方法、装置、设备及存储介质制造方法及图纸

技术编号:26482442 阅读:29 留言:0更新日期:2020-11-25 19:29
本公开提供一种交互处理方法、装置、设备及存储介质,本实施例通过在终端设备上设置双目摄像模组,由于双目摄像模组包括基于图像传感器的第一摄像模块和基于动态视觉传感器DVS的第二摄像模块,可以通过比较第一摄像模块采集的图像以及第二摄像模块采集的事件数据流,生成深度图像数据,并从深度图像数据中识别出用于指示终端设备执行操作的目标对象,响应于与目标对象对应的操作指令,控制终端设备执行与操作指令相匹配的操作,从而实现无需触摸和语音输入的情况下,也能与终端设备进行交互,且利用深度图像数据识别目标对象,识别准确率高。

【技术实现步骤摘要】
交互处理方法、装置、设备及存储介质
本申请涉及计算机
,尤其涉及交互处理方法、装置、设备及存储介质。
技术介绍
随着科技的快速发展,各种电子设备不断涌现,例如个人计算机、平板电脑、智能手机等等。拥有自然交互方式的电子设备也受到越来越多人的青睐。因此,智能设备和使用者之间的交互就成为各大智能终端厂商的研发重点,出现了多种多样的在智能终端上实现与使用者操作交互的技术方案。然而,现有技术中大部分都是基于触摸或者语音进行人机交互,用户使用体验没有很大改变,在不方便进行触摸控制或语音控制等特殊情况下,用户无法对电子设备进行操作。
技术实现思路
为克服相关技术中存在的问题,本公开提供了交互处理方法、装置、设备及存储介质。根据本公开实施例的第一方面,提供一种所述方法应用于终端设备,所述终端设备设置有双目摄像模组,所述双目摄像模组包括基于图像传感器的第一摄像模块和基于动态视觉传感器DVS的第二摄像模块,所述方法包括:通过比较第一摄像模块采集的图像以及第二摄像模块采集的事件数据流,生成深度图像数据;<br>从所述深度图像本文档来自技高网...

【技术保护点】
1.一种交互处理方法,其特征在于,所述方法应用于终端设备,所述终端设备设置有双目摄像模组,所述双目摄像模组包括基于图像传感器的第一摄像模块和基于动态视觉传感器DVS的第二摄像模块,所述方法包括:/n通过比较第一摄像模块采集的图像以及第二摄像模块采集的事件数据流,生成深度图像数据;/n从所述深度图像数据中识别出用于指示终端设备执行操作的目标对象;/n响应于与所述目标对象对应的操作指令,控制终端设备执行与所述操作指令相匹配的操作。/n

【技术特征摘要】
1.一种交互处理方法,其特征在于,所述方法应用于终端设备,所述终端设备设置有双目摄像模组,所述双目摄像模组包括基于图像传感器的第一摄像模块和基于动态视觉传感器DVS的第二摄像模块,所述方法包括:
通过比较第一摄像模块采集的图像以及第二摄像模块采集的事件数据流,生成深度图像数据;
从所述深度图像数据中识别出用于指示终端设备执行操作的目标对象;
响应于与所述目标对象对应的操作指令,控制终端设备执行与所述操作指令相匹配的操作。


2.根据权利要求1所述的方法,其特征在于,终端设备执行的操作包括屏幕在息屏状态下触发的操作,所述图像是屏幕处于息屏状态时第一摄像模块采集的图像,所述事件数据流是屏幕处于息屏状态时第二摄像模块采集的事件数据流。


3.根据权利要求1所述的方法,其特征在于,所述第二摄像模块配置有低分辨率模式、以及至少一个其他分辨率模式,所述第二摄像模块在低分辨率模式下处于工作状态的像素单元个数,少于所述第二摄像模块在其他分辨率模式下处于工作状态的像素单元个数,不同模式在预设模式切换条件满足时切换。


4.根据权利要求3所述的方法,其特征在于,所述方法还包括:在预设启动条件满足时,启动第一摄像模块;
预设启动条件可以包括以下任一种:
在控制第二摄像模块从低分辨率模式切换至其他分辨率模式时;
在控制第二摄像模块切换至高分辨率模式时。


5.根据权利要求3所述的方法,其特征在于,所述预设模式切换条件包括以下任一种条件:
依据所述第二摄像模块在当前模式下采集到的事件数据流,判定当前环境光的变化满足预设变化条件;
依据所述第二摄像模块在当前模式下采集到的事件数据流,判定所述第二摄像模块的采集区域内存在待识别对象。


6.根据权利要求5所述的方法,其特征在于,所述其他分辨率模式包括高分辨率模式,用于生成深度图像数据的事件数据流是第二摄像模块在高分辨率模式下采集的事件数据流;
所述方法还包括:
获取所述第二摄像模块在低分辨率模式下采集的事件数据流;
在依据第二摄像模块在低分辨率模式下采集的事件数据流,判定当前环境光的变化满足预设变化条件时,控制所述第二摄像模块从低分辨率模式切换至高分辨率模式。


7.根据权利要求5所述的方法,其特征在于,所述其他分辨率模式包括中分辨率模式和高分辨率模式,用于生成深度图像数据的事件数据流是第二摄像模块在高分辨率模式下采集的事件数据流;
所述方法还包括:
获取所述第二摄像模块在低分辨率模式下采集的事件数据流;
在依据第二摄像模块在低分辨率模式下采集的事件数据流,判定当前环境光的变化满足预设变化条件时,控制所述第二摄像模块从低分辨率模式切换至中分辨率模式;
获取所述第二摄像模块在中分辨率模式下采集的事件数据流;
在依据所述第二摄像模块在中分辨率模式下采集的事件数据流,判定所述第二摄像模块的采集区域内存在待识别对象时,控制所述第二摄像模块从中分辨率模式切换至高分辨率模式。
<...

【专利技术属性】
技术研发人员:武隽
申请(专利权)人:北京小米移动软件有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1