一种虚拟现实场景下的注视点语音交互装置及方法制造方法及图纸

本发明专利技术公开了一种虚拟现实场景下的注视点语音交互装置，包括注视点预测模块、交互意图决策模块、语音交互模块和第三方语音识别模块，所述注视点预测模块用于使用预测算法预测当前用户在使用虚拟现实头戴设备时视觉注视点所在位置及运动趋势；所述交互意图决策模块用于当前用户行为是否适合激活语音交互的意图，以及语音识别后的指令与行为输入的意图是否冲突，并按既定优先级策略与用户历史行为偏好进行执行指令的决策。所述语音交互模块接入第三方语音识别模块的方式执行语音交互。本发明专利技术增加适用于虚拟现实用户界面的语音交互方案，并使用注视点唤醒方式取代现有语音产品中主流的唤醒词唤醒及按键唤醒方式，提高虚拟现实多模交互的用户体验。

【技术实现步骤摘要】
一种虚拟现实场景下的注视点语音交互装置及方法
本专利技术属于虚拟现实交互技术、语音交互
，具体是一种虚拟现实场景下的注视点语音交互方法。
技术介绍
在相关
中，已存在基于注视点交互相关技术，但此类技术多基于手机、电脑等相对普及的设备终端实现，然而传统的注视点预测方式主要适用于手机、电脑等终端设备使用，并不适用于虚拟现实头戴设备终端。CN202010394171.2公开了一种注视点显示方法及相关装置，其是基于摄像头数据的注视点预测，而使用摄像头进行注视点预测需要耗费的运算资源相对较高，且不适用于虚拟现实的通用设备执行条件。CN201611027164.9公开了虚拟现实系统、语音交互方法及装置，该专利存在引发误操作的情况。基于虚拟现实设备的注视点交互研究仍处于初期阶段，现有虚拟现实交互采用手柄交互及头瞄交互，而语音交互作为一种简便的交互方式未实现。
技术实现思路
为了解决现有技术中存在的上述技术问题，本专利技术提供了一种虚拟现实场景下的注视点语音交互装置，包括注视点预测模块、交互意图决策模块、语音交互本文档来自技高网...

【技术保护点】
1.一种虚拟现实场景下的注视点语音交互装置，包括注视点预测模块、交互意图决策模块、语音交互模块和第三方语音识别模块，其特征在于：/n所述注视点预测模块用于使用预测算法预测当前用户在使用虚拟现实头戴设备时视觉注视点所在位置及运动趋势；/n所述交互意图决策模块用于当前用户行为是否适合激活语音交互的意图，以及语音识别后的指令与行为输入的意图是否冲突，并按既定优先级策略与用户历史行为偏好进行执行指令的决策。/n所述语音交互模块接入第三方语音识别模块的方式执行语音交互。/n

【技术特征摘要】
1.一种虚拟现实场景下的注视点语音交互装置，包括注视点预测模块、交互意图决策模块、语音交互模块和第三方语音识别模块，其特征在于：
所述注视点预测模块用于使用预测算法预测当前用户在使用虚拟现实头戴设备时视觉注视点所在位置及运动趋势；
所述交互意图决策模块用于当前用户行为是否适合激活语音交互的意图，以及语音识别后的指令与行为输入的意图是否冲突，并按既定优先级策略与用户历史行为偏好进行执行指令的决策。
所述语音交互模块接入第三方语音识别模块的方式执行语音交互。


2.如权利要求1所述的虚拟现实场景下的注视点语音交互装置，其特征在于：
所述注视点预测模块以当前用户的头部空间朝向作为基础数据依据，使用预测算法进行注视点所在位置及运动趋势预测。


3.如权利要求1或2所述的虚拟现实场景下的注视点语音交互装置，其特征在于：
该预测算法具体如下：
通过虚拟现实头戴硬件设备进行数据采样，用于采集用户当前头部在虚拟现实系统中的指向角度，即俯仰角pitch，偏航角yaw；设定预测周期为ams，采样周期为bms，该预测周期内共获得n个采样点角度，得出单一预测周期中的注视点为：





4.如权利要求3所述的虚拟现实场景下的注视点语音交互装置，其特征在于：
所述交互意图决策模块首先设定可用于触发语音交互的虚拟现实界面的区域范围，其次设定判断周期cms和采样周期dms，若预测注视点在判断周期内的c/d次采样中均满足设定区域范围的边界范围条件，则判断用户存在针对该区域的语音交互意图，并激活语音交互。


5.如权利要求4所述的虚拟现实场景下的注视点语音交互装置，其特征在于：
所述区域范围为有边界的平面区域，可为多边形、圆形或任意闭环边界图形。


6.如权利要求4或5所述的虚拟现实场景下的注视点语音交互装置，其特征在于：
所述区域范围为矩形边界范围，该边界范围满足注视点的俯仰角pitch，偏航角y...

【专利技术属性】
技术研发人员：张潇，
申请(专利权)人：天翼阅读文化传播有限公司，
类型：发明
国别省市：浙江;33