当前位置: 首页 > 专利查询>张沂专利>正文

交互方法、装置、电子设备及计算机可读存储介质制造方法及图纸

技术编号:19690489 阅读:20 留言:0更新日期:2018-12-08 10:50
本发明专利技术提出了一种交互方法,包括:当检测到所述用户叩击牙齿时,执行预置的控制指令。本发明专利技术还公开了一种交互装置、电子设备及计算机可读存储介质,通过实施上述方案,实现了用户通过叩击牙齿与电子设备的交互,避免了用户在特殊环境下无法通过语音或动作与电子设备交互的弊端,提高了用户与电子设备交互的便利性,极大提高了用户与电子设备沟通的效率。

【技术实现步骤摘要】
交互方法、装置、电子设备及计算机可读存储介质
本专利技术涉及计算机
,尤其涉及一种交互方法、装置、电子设备及计算机可读存储介质。
技术介绍
随着电子设备(例如:移动终端,AR(AugmentedReality,增强现实)设备,及VR(VirtualReality,虚拟现实)设备)的快速发展,随之而来的问题就是用户如何与电子设备进行交互。现有的交互方法有:语音识别和/或手势识别等。语音识别通过电子设备上的拾音器采集用户的语音,通过识别语音的语义,来获得用户的命令;手势识别通过电子设备上的摄像头采集用户的手部图像,通过识别手指的运动,来获得用户的命令;语音和手势识别均属于自然交互,不需要使用额外的电子设备。但是当在特定的环境下(例如:开会的环境下,或者交响乐观赏环境下),用户无法通过语音和/或手势与电子设备进行交互。
技术实现思路
本专利技术提出了一种交互方法、装置、电子设备及计算机可读存储介质,用以解决现有技术中在特定的环境下用户无法通过语音和/或手势与电子设备进行交互的问题。本专利技术采用的技术方案是提供一种交互方法,应用于用户头部佩戴的电子设备,所述方法包括:当检测到所述用户叩击牙齿时,执行预置的控制指令。可选的,所述检测所述用户叩击牙齿的方式,包括以下方式中的一种或多种:通过拾音器检测所述用户叩击牙齿的声音;或者,通过加速度传感器检测所述用户叩击牙齿的振动。可选的,所述通过拾音器检测所述用户叩击牙齿的声音的方式,包括:对通过拾音器检测到的所述用户牙齿振动的声音模拟信号进行放大;将放大后的声音模拟信号转换为声音数字信号;判断所述声音数字信号是否符合预置的叩击牙齿声音信号特征;若所述声音数字信号符合所述叩击牙齿声音信号特征,则判定检测到所述用户叩击牙齿的声音;否则判定未检测到所述用户叩击牙齿的声音。可选的,在所述通过拾音器检测所述用户叩击牙齿的声音之前,所述方法还包括:通过所述拾音器采集所述用户牙齿振动的设定数量个声音模拟信号;对所有声音模拟信号分别依次进行放大和模拟数字A/D转换,得到对应的声音数字信号;对得到的所有声音数字信号中叩击牙齿振动对应的声音数字信号,及其它牙齿振动对应的声音数字信号进行分别标记;将标记后的所有声音数字信号输入基于深度学习算法生成的神经网络模型,以生成所述叩击牙齿声音信号特征。可选的,所述通过加速度传感器检测用户叩击牙齿的振动的方式,包括:通过加速度传感器检测用户牙齿振动,得到振动加速度信号;判断所述振动加速度信号是否符合预置的叩击牙齿加速度信号特征;若所述振动加速度信号符合所述叩击牙齿加速度信号特征,则判定检测到所述用户叩击牙齿的振动;否则判定未检测到所述用户叩击牙齿的振动。可选的,在所述通过加速度传感器检测所述用户叩击牙齿的振动之前,所述方法还包括:通过所述加速度传感器采集所述用户牙齿振动的设定数量个振动加速度信号;对采集到的所有振动加速度信号中叩击牙齿振动对应的振动加速度信号,及其它牙齿振动对应的振动加速度信号分别进行标记;将标记后的所有振动加速度信号输入基于深度学习算法生成的神经网络模型,以生成所述叩击牙齿加速度信号特征。可选的,所述执行预置的控制指令,包括:将所述控制指令发送至与所述电子设备连接的终端,以供所述终端基于所述控制指令执行对应的控制操作。本专利技术还提供一种交互装置,设置于用户头部佩戴的电子设备,所述装置包括:检测控制模块,用于当检测到所述用户叩击牙齿时,执行预置的控制指令。可选的,所述检测所述用户叩击牙齿的方式,包括以下方式中的一种或多种:通过拾音器检测所述用户叩击牙齿的声音;或者,通过加速度传感器检测所述用户叩击牙齿的振动。可选的,所述通过拾音器检测所述用户叩击牙齿的声音的方式,包括:对通过拾音器检测到的所述用户牙齿振动的声音模拟信号进行放大;将放大后的声音模拟信号转换为声音数字信号;判断所述声音数字信号是否符合预置的叩击牙齿声音信号特征;若所述声音数字信号符合所述叩击牙齿声音信号特征,则判定检测到所述用户叩击牙齿的声音;否则判定未检测到所述用户叩击牙齿的声音。可选的,所述装置还包括:第一训练模块,用于在所述通过拾音器检测所述用户叩击牙齿的声音之前,通过所述拾音器采集所述用户牙齿振动的设定数量个声音模拟信号;对所有声音模拟信号分别依次进行放大和模拟数字A/D转换,得到对应的声音数字信号;对得到的所有声音数字信号中叩击牙齿振动对应的声音数字信号,及其它牙齿振动对应的声音数字信号进行分别标记;将标记后的所有声音数字信号输入基于深度学习算法生成的神经网络模型,以生成所述叩击牙齿声音信号特征。可选的,所述通过加速度传感器检测用户叩击牙齿的振动的方式,包括:通过加速度传感器检测用户牙齿振动,得到振动加速度信号;判断所述振动加速度信号是否符合预置的叩击牙齿加速度信号特征;若所述振动加速度信号符合所述叩击牙齿加速度信号特征,则判定检测到所述用户叩击牙齿的振动;否则判定未检测到所述用户叩击牙齿的振动。可选的,所述装置还包括:第二训练模块,用于在所述通过加速度传感器检测所述用户叩击牙齿的振动之前,通过所述加速度传感器采集所述用户牙齿振动的设定数量个振动加速度信号;对采集到的所有振动加速度信号中叩击牙齿振动对应的振动加速度信号,及其它牙齿振动对应的振动加速度信号分别进行标记;将标记后的所有振动加速度信号输入基于深度学习算法生成的神经网络模型,以生成所述叩击牙齿加速度信号特征。可选的,所述检测控制模块,具体用于:将所述控制指令发送至与所述电子设备连接的终端,以供所述终端基于所述控制指令执行对应的控制操作。本专利技术还提供一种电子设备,所述电子设备包括处理器和存储器;所述处理器用于执行存储器中存储的交互程序,以实上述的交互方法的步骤。本专利技术还提供一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现上述的交互方法的步骤。采用上述技术方案,本专利技术至少具有下列优点:本专利技术所述一种交互方法、装置、电子设备及计算机可读存储介质,实现了用户通过叩击牙齿与电子设备的交互,避免了用户在特殊环境下无法通过语音或动作与电子设备交互的弊端,提高了用户与电子设备交互的便利性,极大提高了用户与电子设备沟通的效率。附图说明图1为本专利技术第一实施例的智能眼镜示意图;图2为本专利技术第三实施例的交互方法流程图;图3为本专利技术第四实施例的交互方法流程图;图4为本专利技术第五实施例的交互方法流程图;图5为本专利技术第八实施例的交互装置组成结构示意图;图6为本专利技术第九实施例的交互装置组成结构示意图;图7为本专利技术第十实施例的交互装置组成结构示意图;图8为本专利技术第十一实施例的电子设备组成结构示意图。具体实施方式为更进一步阐述本专利技术为达成预定目的所采取的技术手段及功效,以下结合附图及较佳实施例,对本专利技术进行详细说明如后。本专利技术实施例提供的交互方法,应用于用户头部佩戴的电子设备,用于实现用户通过叩击牙齿与电子设备的交互,以解决现有技术在特定的环境下用户无法通过语音和/或手势与电子设备进行交互的问题。在专利技术实施例中,对用户头部佩戴的电子设备不做具体限定,可以是用户头部佩戴的AR设备,也可以是用户头部佩戴的VR设备,也可以是用户头部佩戴的智能眼镜设备,也可以是用户头部佩本文档来自技高网...

【技术保护点】
1.一种交互方法,其特征在于,应用于用户头部佩戴的电子设备,所述方法包括:当检测到所述用户叩击牙齿时,执行预置的控制指令。

【技术特征摘要】
1.一种交互方法,其特征在于,应用于用户头部佩戴的电子设备,所述方法包括:当检测到所述用户叩击牙齿时,执行预置的控制指令。2.根据权利要求1所述的方法,其特征在于,所述检测所述用户叩击牙齿的方式,包括以下方式中的一种或多种:通过拾音器检测所述用户叩击牙齿的声音;或者,通过加速度传感器检测所述用户叩击牙齿的振动。3.根据权利要求2所述的方法,其特征在于,所述通过拾音器检测所述用户叩击牙齿的声音的方式,包括:对通过拾音器检测到的所述用户牙齿振动的声音模拟信号进行放大;将放大后的声音模拟信号转换为声音数字信号;判断所述声音数字信号是否符合预置的叩击牙齿声音信号特征;若所述声音数字信号符合所述叩击牙齿声音信号特征,则判定检测到所述用户叩击牙齿的声音;否则判定未检测到所述用户叩击牙齿的声音。4.根据权利要求3所述的方法,其特征在于,在所述通过拾音器检测所述用户叩击牙齿的声音之前,所述方法还包括:通过所述拾音器采集所述用户牙齿振动的设定数量个声音模拟信号;对所有声音模拟信号分别依次进行放大和模拟数字A/D转换,得到对应的声音数字信号;对得到的所有声音数字信号中叩击牙齿振动对应的声音数字信号,及其它牙齿振动对应的声音数字信号进行分别标记;将标记后的所有声音数字信号输入基于深度学习算法生成的神经网络模型,以生成所述叩击牙齿声音信号特征。5.根据权利要求2所述的方法,其特征在于,所述通过加速度传感器检测用户叩击牙齿的振动的方式,包括:通过加速度传感器检测用户牙...

【专利技术属性】
技术研发人员:张沂梁征
申请(专利权)人:张沂北京触角科技有限公司
类型:发明
国别省市:北京,11

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1