虚拟现实眼镜制造技术

技术编号:37125900 阅读:19 留言:0更新日期:2023-04-01 05:22
本申请公开了一种虚拟现实眼镜,所述虚拟现实眼镜包括:将布局阵列光束投射至预设投影平面,根据反射波束的波束信息,对布局阵列光束的光线阻断的位置进行定位,得到阻断坐标位置;根据预设投影平面对应区域的当前图像帧,对用户在字符书写界面的触控点的位置进行识别,得到触点坐标位置,对阻断坐标位置进行动态追踪得到光线阻断运动轨迹,对光线阻断运动轨迹对应的字符进行识别;若识别出的字符为多个疑似的待确定字符,则依据时序性对触点坐标位置进行动态追踪,构建得到光线触点运动轨迹,将光线触点运动轨迹和各待确定字符输入字符识别神经网络模型,得到目标字符进行输入。本申请能提高虚拟现实眼镜的字符输入准确性。本申请能提高虚拟现实眼镜的字符输入准确性。本申请能提高虚拟现实眼镜的字符输入准确性。

【技术实现步骤摘要】
虚拟现实眼镜


[0001]本申请涉及虚拟现实
,尤其涉及一种虚拟现实眼镜。

技术介绍

[0002]目前,VR(VirtualReality,虚拟现实)眼镜是目前正在快速发展和普及的虚拟现实产品。而市面上很多虚拟现实眼镜通常不配备键盘或触摸屏等输入设备,所以在虚拟现实眼镜上的字符输入方式一般只能通过语音和手势来进行,这一局限给虚拟现实眼镜在文本信息的交互方面造成了不便。
[0003]相关技术中的字符输入方式是通过提供一种允许用户使用书写工具和书写平面进行手写笔迹的提取方法,即通过摄像头跟踪书写工具的笔尖,从跟踪得到的笔尖的运动轨迹,确定手写笔迹 (即字符信息)。但是,实际应用中,用户在书写时很难通过远距离的摄像头精确捕捉到笔尖的运动轨迹,导致提取出的手写笔迹的准确度不高,进而使得字符输入准确性较低。
[0004]因此,如何提高虚拟现实眼镜的字符输入准确性,成为亟待解决的技术问题。

技术实现思路

[0005]本申请的主要目的在于提供一种虚拟现实眼镜,旨在解决如何提高虚拟现实眼镜的字符输入准确性的技术问题。
[0006]为实现上述目的,本申请提供一种虚拟现实眼镜,所述虚拟现实眼镜包括激光收发模块、图像识别模块和处理模块,所述激光收发模块和所述图像识别模块分别与所述处理模块电连接,所述激光收发模块用于:在检测到输入的字符书写指令时,生成所述虚拟现实眼镜的字符书写界面对应的布局阵列光束,将所述布局阵列光束投射至预设投影平面,以在所述预设投影平面投影所述字符书写界面;接收所述布局阵列光束对应反射回的反射波束,根据所述反射波束的波束信息,对所述布局阵列光束的光线阻断的位置进行定位,得到阻断坐标位置;所述图像识别模块用于:采集所述预设投影平面对应区域的当前图像帧,根据所述当前图像帧,对用户在字符书写界面的触控点的位置进行识别,得到触点坐标位置;所述处理模块用于:依据时序性对所述阻断坐标位置进行动态追踪,根据动态追踪的所述阻断坐标位置,构建基于回波识别的光线阻断运动轨迹,将所述光线阻断运动轨迹转换为二维矢量图形,并对所述二维矢量图形对应的字符进行识别;依据时序性对所述触点坐标位置进行动态追踪,根据动态追踪的所述触点坐标位置,构建基于图像识别的光线触点运动轨迹;
若识别出的所述字符为多个疑似的待确定字符,则将所述光线触点运动轨迹和各所述待确定字符输入至训练好的字符识别神经网络模型,获取得到所述字符识别神经网络模型从各所述待确定字符中选择的目标字符,并输入所述目标字符,其中,所述待确定字符为识别准确的概率小于预设概率阈值的字符。
[0007]可选地,所述处理模块还用于:若识别出的所述字符为确定字符,则将所述确定字符作为目标字符进行输入,其中,所述确定字符为识别准确的概率大于或等于预设概率阈值的字符。
[0008]可选地,所述虚拟现实眼镜还包括手柄操控模块,所述处理模块包括生成单元和追踪单元,所述手柄操控模块、所述生成单元和所述追踪单元依次电连接,所述手柄操控模块,用于获取用户所触发的按钮键位信息;所述生成单元,用于根据所述按钮键位信息生成控制指令,其中,所述控制指令包括落笔指令、移笔指令或完全提笔指令;所述追踪单元,用于根据所述控制指令,依据时序性对所述阻断坐标位置进行动态追踪。
[0009]可选地,所述激光收发模块包括:比较单元,用于获取预存的所述布局阵列光束的标准回波信息,将所述反射波束的波束信息与所述标准回波信息进行比较,确定所述布局阵列光束的回波周期的变动值;定位单元,用于若所述回波周期的变动值大于预设时长阈值,则对所述变动值大于预设时长阈值的所述反射波束的坐标位置进行定位,得到回波异动坐标位置;将所述回波异动坐标位置,作为所述布局阵列光束的光线阻断的阻断坐标位置。
[0010]可选地,所述激光收发模块还包括校准单元,所述校准单元,用于:若帧测到输入的光束定位校准指令,则将预设的校准参考光束投射至所述预设投影平面上的预设坐标位置以在所述预设投影平面形成校准标识,其中,所述校准参考光束的波长与所述布局阵列光束的波长不同;接收所述校准参考光束对应反射回的校准反射光束;根据所述校准反射光束的波束信息,对所述激光收发模块中预存的光束定位识别算法进行校准;所述定位单元,还用于:若所述回波周期的变动值大于预设时长阈值,则通过校准后的所述光束定位识别算法,对所述变动值大于预设时长阈值的所述反射波束的坐标位置进行定位,得到回波异动坐标位置。
[0011]可选地,所述处理模块还包括:预测单元,用于将所述光线触点运动轨迹和所述待确定字符输入至预存的字符识别神经网络模型,通过所述字符识别神经网络模型预测得到所述光线触点运动轨迹对应的预测字符;匹配单元,用于通过所述字符识别神经网络模型将所述预测字符与各所述待确定字符进行相似度匹配,得到各所述待确定字符对应的字符匹配度;确定单元,用于将所述字符匹配度最高的所述待确定字符,作为各所述待确定字
符中选择的目标字符。
[0012]可选地,所述虚拟现实眼镜还包括触屏显示模块,所述触屏显示模块与所述确定单元电连接,所述确定单元,还用于:若判定所述字符匹配度最高的所述待确定字符为一个,则执行:所述将所述字符匹配度最高的所述待确定字符,作为各所述待确定字符中选择的目标字符的步骤;若判定所述字符匹配度最高的所述待确定字符为多个,则将所述字符匹配度最高的各所述待确定字符输入至所述触屏显示模块进行显示,其中,所述字符匹配度最高的各所述待确定字符分别显示于所述触屏显示模块的显示界面中不同的坐标位置;所述触屏显示模块,用于:若接收到用户在所述显示界面的触控选择指令,则确定所述触控选择指令对应的触控坐标位置;所述确定单元,还用于:将所述触控坐标位置对应显示的字符,作为各所述待确定字符中选择的目标字符。
[0013]可选地,所述图像识别模块还包括:获取单元,用于获取预存的书写物尖端对应的目标特征,其中,所述书写物尖端为手指指尖或工具笔笔尖,所述目标特征为所述书写物尖端对应的形状特征和/或颜色特征;轮询单元,用于将所述当前图像帧中的各图像特征,与所述目标特征进行相似度的轮询匹配,并将匹配度最高的所述图像特征,作为所述书写物尖端;判定单元,用于将所述书写物尖端的坐标位置,作为用户在字符书写界面的触控点的触点坐标位置。
[0014]可选地,所述图像识别模块还包括:采集单元,用于若检测到输入的书写物更新指令时,则控制所述图像识别模块对新的书写物进行图像采集,得到最新书写物图像;扫描单元,用于对所述最新书写物图像中的书写物进行轮廓扫描,扫描得到最新的书写物尖端对应的形状特征和/或颜色特征;预存单元,用于将最新的书写物尖端对应的形状特征和/或颜色特征,作为书写物尖端对应的目标特征进行预存。
[0015]可选地,所述处理模块还包括:通信单元,用于将所述光线触点运动轨迹和各所述待确定字符发送至字符分析服务器,其中,所述字符分析服务器中存储有训练好的字符识别神经网络模型;接收所述字符分析服务器响应于所述光线触点运动轨迹和各所述待确定字符,而返回的所述本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种虚拟现实眼镜,其特征在于,所述虚拟现实眼镜包括激光收发模块、图像识别模块和处理模块,所述激光收发模块和所述图像识别模块分别与所述处理模块电连接,所述激光收发模块用于:在检测到输入的字符书写指令时,生成所述虚拟现实眼镜的字符书写界面对应的布局阵列光束,将所述布局阵列光束投射至预设投影平面,以在所述预设投影平面投影所述字符书写界面;接收所述布局阵列光束对应反射回的反射波束,根据所述反射波束的波束信息,对所述布局阵列光束的光线阻断的位置进行定位,得到阻断坐标位置;所述图像识别模块用于:采集所述预设投影平面对应区域的当前图像帧,根据所述当前图像帧,对用户在字符书写界面的触控点的位置进行识别,得到触点坐标位置;所述处理模块用于:依据时序性对所述阻断坐标位置进行动态追踪,根据动态追踪的所述阻断坐标位置,构建基于回波识别的光线阻断运动轨迹,将所述光线阻断运动轨迹转换为二维矢量图形,并对所述二维矢量图形对应的字符进行识别;依据时序性对所述触点坐标位置进行动态追踪,根据动态追踪的所述触点坐标位置,构建基于图像识别的光线触点运动轨迹;若识别出的所述字符为多个疑似的待确定字符,则将所述光线触点运动轨迹和各所述待确定字符输入至训练好的字符识别神经网络模型,获取得到所述字符识别神经网络模型从各所述待确定字符中选择的目标字符,并输入所述目标字符,其中,所述待确定字符为识别准确的概率小于预设概率阈值的字符。2.如权利要求1所述的虚拟现实眼镜,其特征在于,所述处理模块还用于:若识别出的所述字符为确定字符,则将所述确定字符作为目标字符进行输入,其中,所述确定字符为识别准确的概率大于或等于预设概率阈值的字符。3.如权利要求1所述的虚拟现实眼镜,其特征在于,所述虚拟现实眼镜还包括手柄操控模块,所述处理模块包括生成单元和追踪单元,所述手柄操控模块、所述生成单元和所述追踪单元依次电连接,所述手柄操控模块,用于获取用户所触发的按钮键位信息;所述生成单元,用于根据所述按钮键位信息生成控制指令,其中,所述控制指令包括落笔指令、移笔指令或完全提笔指令;所述追踪单元,用于根据所述控制指令,依据时序性对所述阻断坐标位置进行动态追踪。4.如权利要求1所述的虚拟现实眼镜,其特征在于,所述激光收发模块包括:比较单元,用于获取预存的所述布局阵列光束的标准回波信息,将所述反射波束的波束信息与所述标准回波信息进行比较,确定所述布局阵列光束的回波周期的变动值;定位单元,用于若所述回波周期的变动值大于预设时长阈值,则对所述变动值大于预设时长阈值的所述反射波束的坐标位置进行定位,得到回波异动坐标位置;将所述回波异动坐标位置,作为所述布局阵列光束的光线阻断的阻断坐标位置。5.如权利要求4所述的虚拟现实眼镜,其特征在于,所述激光收发模块还包括校准单
元,所述校准单元,用于:若帧测到输入的光束定位校准指令,则将预设的校准参考光束投射至所述预设投影平面上的预设坐标位置以在所述预设投影平面形成校准标识,其中,所述校准参考光束的波长与所述布局阵列光束的波长不同;接收所述校准参考光束对应反射回的校准反射光...

【专利技术属性】
技术研发人员:尤文娟
申请(专利权)人:北京元隆雅图文化传播股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1