一种分体式AR眼镜系统的交互方法、系统及介质技术方案

本发明专利技术涉及增强现实技术领域，具体涉及一种分体式AR眼镜系统的交互方法、系统及介质，其中，AR眼镜系统包括眼镜终端和手持终端，眼镜终端用于渲染多个目标对象并将其叠加在真实物理场景中进行显示，交互方法包括采用手持终端在眼镜终端的显示视窗中构建一条指示线，手持终端用于通过自身的姿态控制指示线的终点位置，指示线的终点用于指示眼镜终端的显示视窗中的第一目标对象；调整眼镜终端使得其显示视窗中显示第二目标对象，调整手持终端使得指示线的终点指向眼镜终端的显示视窗中的第二目标对象。该交互方法不会受到环境噪音的影响，适用更加广泛，和现有的手势交互方法相比，也无需人手长时间举着，交互更加轻松，同时也不会受到强光影响。

An interactive method, system and medium of split ar glasses system

【技术实现步骤摘要】
一种分体式AR眼镜系统的交互方法、系统及介质
本专利技术涉及增强现实
，具体涉及一种分体式AR眼镜系统的交互方法、系统及介质。
技术介绍
随着科技的发展，AR和VR越来越受到人们的青睐。VR即虚拟现实，是利用计算机设备模拟出一个虚拟世界，包括人的视觉、听觉、触觉等信息，即VR看到听到的全是计算机模拟出来的，它骗过了人的感官系统，给人一种身临其境的感觉。而AR是将虚拟的信息叠加到真实的世界中去，从而达到一种超越现实的感官体验，即AR看到的场景有一部分是真的，一部分是假的，给人一种超越现实的感觉。这两种技术都是通过相关硬件和画面，给用户营造一个虚拟的场景，让用户置身其中，用户可以通过手势、语音、身体移动等方式和虚拟场景进行交互。现有的AR、VR设备，其交互方式主要有以下几种：1、触摸板交互一部分AR眼镜或VR头盔上集成有电容触摸板或触摸屏，用户通过在触摸屏上点击、双击、滑动等操作来控制AR眼镜或VR头盔上显示的内容。触摸板在手机、平板电脑等手持终端上应用比较多，适用于显示和触摸一比一重合的场景，对于ARVR不重合的场景交互不太自然。2、语音交互目前语音交互技术发展相对成熟，从简单的模板匹配到现在的自然语音交互，除了可以识别简单的命令词之外，也可以解析语义和上下文，这种方式交互更自然，但对于环境噪音比较大的情况往往容易误识别，对方言的识别率也比较低。3、手势交互一部分AR眼镜或VR头盔上采用手势交互，通过深度相机采集手势的动作序列，从而匹配不同的手势事件，这种方式也可以比较自然地反应真实的动作与虚拟画面之间的交互，但也存在一定的缺陷，比如手长时间举起会比较累，深度相机容易受太阳光干扰等。
技术实现思路
为了解决现有技术中采用触摸板交互不自然、采用语音交互容易受到环境噪音影响和采用手势交互也容易受到太阳光干扰的技术问题，本申请提出一种分体式AR眼镜系统的交互方法，该AR眼镜系统包括眼镜终端和手持终端，该交互方法具体包括：一种分体式AR眼镜系统的交互方法，所述AR眼镜系统包括眼镜终端和手持终端，所述眼镜终端用于渲染多个目标对象并将其叠加在真实物理场景中进行显示，使得虚拟目标对象与真实物理场景“锚定”，所述交互方法包括；采用所述手持终端在所述眼镜终端的显示视窗中构建一条指示线，所述指示线的终点用于指示所述眼镜终端的显示视窗中的第一目标对象；所述手持终端还用于通过自身的姿态控制指示线的终点位置；调整所述眼镜终端使得其显示视窗中显示第二目标对象，调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象。进一步的，还包括：保持所述眼镜终端不动，调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第三目标对象。进一步的，还包括：在调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象或第三目标对象之后还包括：通过所述手持终端上的多个交互按钮和/或触摸板控制所述指示线的终点指向的第二目标对象或第三目标对象进行相应的操作。其中，所述调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象包括；调整所述指示线使得其指向所述眼镜终端的显示视窗中的第二目标对象；计算所述眼镜终端从所述第一目标对象调整到第二目标对象时所述指示线的终点在所述显示视窗上待移动信息；根据所述待移动信息调整所述指示线的终点指向所述第二目标对象。其中，所述调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象包括：获取所述眼镜终端从所述第一目标对象调整到第二目标对象时眼镜终端的第一移动信息；获取所述手持终端的指示线从所述第一目标对象调整到第二目标对象时手持终端的第二移动信息；根据所述第一移动信息和第二移动信息计算所述指示线的终点在显示视窗上对应的第三移动信息；根据所述第三移动信息调整所述指示线的终点在显示视窗中移动到所述第二目标对象上。一种分体式AR眼镜交互系统，所述交互系统包括眼镜终端和手持终端；所述眼镜终端用于渲染多个虚拟目标对象并将其叠加在真实物理场景中并进行显示，使得虚拟目标对象与真实物理场景“锚定”；所述手持终端用于在所述眼镜终端的显示视窗中构建一条指示线，所述指示线的终点用于指示所述显示视窗中的第一目标对象；所述手持终端还用于通过自身的姿态控制指示线的终点位置；所述手持终端还用于在所述眼镜终端发生调整后其显示视窗中显示第二目标对象时，移动所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象。进一步的，所述手持终端还用于在所述眼镜终端保持不动时，调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第三目标对象。其中，所述手持终端上设有多个交互按钮和/或触摸板；通过所述手持终端还用于在调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象或第三目标对象之后，通过所述手持终端上的多个交互按钮和/或触摸板控制所述指示线的终点指向的第二目标对象或第三目标对象进行相应的操作。一种计算机可读存储介质，其特征在于，包括程序，所述程序能够被处理器执行以实现如上所述的方法。一种分体式AR眼镜系统，所述系统包括眼镜终端和手持终端，所述眼镜终端包括第一处理器以及与该第一处理器电连接的摄像头、显示模组、音频单元、第一传感器、第一通信模块；所述手持终端包括第二处理器以及与该第二处理器电连接的触摸板、第二传感器、多个交互按钮和第二通信模块；所述摄像头用于获取真实物理环境；所述第一处理器用于渲染多个目标对象并将其叠加在真实物理场景中并进行显示，使得虚拟目标对象与真实物理场景“锚定”；所述显示模组用于对所述虚拟目标对象进行显示；所述第一传感器用于获取所述眼镜终端从第一目标对象调整到第二目标对象时眼镜终端的第一移动信息；所述第一通信模块用于和所述手持终端的第二通信模块进行通信；所述第二传感器用于获取所述手持终端的指示线从所述第一目标对象调整到第二目标对象时的第二移动信息；所述第二处理器用于对所述第二移动信息进行处理后通过所述第二通信模块发送给所述第一通信模块；所述第一处理器用于根据第一移动信息和第二移动信息计算指示线的终点在显示视窗上对应的第三移动信息，并根据该第三移动信息调整指示线的终点在显示视窗中移动到第二目标对象上。依据上述实施例的交互方法和系统，采用手持终端在真实物理场景中虚拟出一条指示线，该指示线的终点用于指示眼镜终端的显示视窗中的第一目标对象；当调整眼镜终端和/或手持终端时，采集眼镜终端和手持终端的移动信息，根据该移动信息计算指示线的终点在显示视窗的显示屏上待移动信息，根据待移动信息调整指示线的终点指向眼镜终端的显示视窗中的第二目标对象，从而达到利用手持终端和眼镜终端的姿态来控制AR眼镜以达到指示虚拟的目本文档来自技高网...

【技术保护点】
1.一种分体式AR眼镜系统的交互方法，所述AR眼镜系统包括眼镜终端和手持终端，所述眼镜终端用于渲染多个虚拟目标对象并将其叠加在真实物理场景中并进行显示，使得虚拟目标对象与真实物理场景“锚定”；其特征在于，所述交互方法包括；/n采用所述手持终端在所述眼镜终端的显示视窗中构建一条指示线，所述指示线的终点用于指示所述眼镜终端的显示视窗中的第一目标对象；/n调整所述眼镜终端使得其显示视窗中显示第二目标对象，调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象。/n

【技术特征摘要】
1.一种分体式AR眼镜系统的交互方法，所述AR眼镜系统包括眼镜终端和手持终端，所述眼镜终端用于渲染多个虚拟目标对象并将其叠加在真实物理场景中并进行显示，使得虚拟目标对象与真实物理场景“锚定”；其特征在于，所述交互方法包括；
采用所述手持终端在所述眼镜终端的显示视窗中构建一条指示线，所述指示线的终点用于指示所述眼镜终端的显示视窗中的第一目标对象；
调整所述眼镜终端使得其显示视窗中显示第二目标对象，调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象。


2.如权利要求1所述的交互方法，其特征在于，还包括：
保持所述眼镜终端不动，调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第三目标对象。


3.如权利要求2或3所述的交互方法，其特征在于，还包括：在调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象或第三目标对象之后还包括：
通过所述手持终端上的多个交互按钮和/或触摸板控制所述指示线的终点指向的第二目标对象或第三目标对象进行相应的操作。


4.如权利要求2所述的交互方法，其特征在于，所述调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象包括；
调整所述指示线使得其指向所述眼镜终端的显示视窗中的第二目标对象；
计算所述眼镜终端从所述第一目标对象调整到第二目标对象时所述指示线的终点在所述显示视窗上待移动信息；
根据所述待移动信息调整所述指示线的终点指向所述第二目标对象。


5.如权利要求2所述的交互方法，其特征在于，所述调整所述手持终端使得所述指示线的终点指向所述眼镜终端的显示视窗中的第二目标对象包括：
获取所述眼镜终端从所述第一目标对象调整到第二目标对象时眼镜终端的第一移动信息；
获取所述手持终端的指示线从所述第一目标对象调整到第二目标对象时手持终端的第二移动信息；
根据所述第一移动信息和第二移动信息计算所述指示线的终点在显示视窗上对应的第三移动信息；
根据所述第三移动信息调整所述指示线的终点在显示视窗中移动到所述第二目标对象上。


6.一种分体式AR眼镜交互系统，其特征在于，所述交互系统包括眼镜终端和手持终端；
所述眼镜终端用于渲染多个虚拟目标对象并将其叠加在真实物理场景中并进行...

【专利技术属性】
技术研发人员：谢辉，
申请(专利权)人：西安维度视界科技有限公司，
类型：发明
国别省市：陕西;61