一种VR/AR系统与用户交互的方法及装置制造方法及图纸

本发明专利技术适用于虚拟现实VR或增强现实AR领域，提供了一种VR/AR系统与用户交互的方法及装置，所述VR/AR系统与用户交互的方法包括：在虚拟现实VR系统或增强现实AR系统中，嵌入手势指令传递通路；利用摄像头捕捉手势图形；将捕捉到的手势图形和预存储的字形特征进行匹配；当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器。本发明专利技术使用手势就能够满足VR/AR系统与用户之间的交互需求。有益效果在于以下两方面，一方面，通过减少交互步骤和数据，缩短了交互时间，提高了交互效率。另一方面，减少了添加外围输入设备的成本。

【技术实现步骤摘要】

本专利技术属于虚拟现实VR或增强现实AR领域，尤其涉及一种VR/AR系统与用户交互的方法及装置。
技术介绍
增强现实(英文：AugmentedReality，缩写：AR)，增强现实的技术是在虚拟现实(英文：VirtualReality，缩写：VR)的基础上发展起来的新技术，其可在人们接触到真实世界叠加虚拟电子信息，对真实世界信息进行增强或扩张，帮助人们从事各种活动。然而，目前VR/AR系统与用户的交互步骤繁琐，交互时间长，导致交互效率低。其原因在于，一般的VR/AR系统都是通过外围输入设备与用户完成交互，由于交互步骤和数据较多，因此交互过程中涉及的处理算法复杂程度高，处理数据需要的时间较长，无法快速完成交互，满足不了VR/AR系统在交互方面的处理需求。
技术实现思路
本专利技术实施例的目的在于提供一种VR/AR系统与用户交互的方法，旨在解决目前VR/AR系统与用户的交互步骤繁琐，交互时间长，导致交互效率低的问题。本专利技术实施例是这样实现的，一种VR/AR系统与用户交互的方法，包括：在虚拟现实VR系统或增强现实AR系统中，嵌入手势指令传递通路；利用摄像头捕捉手势图形；将捕捉到的手势图形和预存储的字形特征进行匹配；当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器。本专利技术实施例的另一目的在于提供一种交互装置，包括：手势指令传递通路嵌入模块，用于在虚拟现实VR系统或增强现实AR系统中，嵌入手势指令传递通路；手势图形捕捉模块，用于利用摄像头捕捉手势图形；匹配模块，用于将捕捉到的手势图形和预存储的字形特征进行匹配；手势指令传递模块，用于当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器。在本专利技术实施例中，当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器，解决目前VR/AR系统与用户的交互步骤繁琐，交互时间长，导致交互效率低的问题。使用手势就能够满足VR/AR系统与用户之间的交互需求。其有益效果在于以下两方面，一方面，减少了添加外围输入设备的成本，另一方面，通过减少交互步骤和数据，缩短了交互时间，提高了交互效率。附图说明图1是本专利技术实施例提供的VR/AR系统与用户交互的方法的实现流程图；图2是本专利技术实施例提供的配置字形特征对应的手势指令的实现流程图；图3为本专利技术实施例提供的第一手势较佳的样例图；图4为本专利技术实施例提供的第二手势较佳的样例图；图5为本专利技术实施例提供的第三手势较佳的样例图；图6为本专利技术实施例提供的第四手势较佳的样例图；图7为本专利技术实施例提供的第五手势较佳的样例图；图8为本专利技术实施例提供的第六手势较佳的样例图；图9是本专利技术实施例提供的交互装置的结构框图。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。实施例一图1是本专利技术实施例提供的VR/AR系统与用户交互的方法的实现流程图，详述如下：在步骤S101中，在虚拟现实VR系统或增强现实AR系统中，嵌入手势指令传递通路；在步骤S102中，利用摄像头捕捉手势图形；在步骤S103中，将捕捉到的手势图形和预存储的字形特征进行匹配；其中，步骤S103，具体为：解析捕捉到的手势图形，得到手势特征；将所述手势特征和预存储的字形特征进行匹配。在步骤S104中，当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器。其中，步骤S104，具体为：当匹配成功时，获取传递所述字形特征对应的手势指令；利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器。当匹配不成功时，生成返回值-1，以表示匹配错误。在屏幕上显示匹配错误信息或者重新匹配信息。在本专利技术实施例中，利用手势指令传递通路，向处理器输入手势指令，以处理器接收并执行所述手势指令。在正常使用的情况下，使用手势就能够满足VR/AR系统与用户之间的交互需求。其有益效果在于以下两方面，一方面，减少了添加外围输入设备的成本，另一方面，通过减少交互步骤和数据，缩短了交互时间，提高了交互效率。实施例二本专利技术实施例描述了字形特征的类型，详述如下：所述字形特征包括V字形特征、倒V字形特征、OVV字形、山字形特征、1字形特征、C字形特征中的至少一种。在本专利技术实施例中，设定字形特征的多个类型，便于后续匹配多个不同的手势指令。实施例三本专利技术实施例提供的VR/AR系统与用户交互的方法步骤S103的实现流程图，详述如下：将捕捉到的手势图形和预存储的V字形特征进行匹配；或，将捕捉到的手势图形和预存储的倒V字形特征进行匹配；或，将捕捉到的手势图形和预存储的OVV字形特征进行匹配；或，将捕捉到的手势图形和预存储的山字形特征进行匹配；或，将捕捉到的手势图形和预存储的1字形特征进行匹配；或，将捕捉到的手势图形和预存储的C字形特征进行匹配。在本专利技术实施例中，按预先设定的匹配顺序，将捕捉到的手势图形和预存储的字形特征进行匹配，以便于通过手势满足VR/AR系统与用户之间的交互需求。实施例四本专利技术实施例描述了配置手势指令的实现流程，详述如下：在所述当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器之前，所述VR/AR系统与用户交互的方法还包括：配置字形特征对应的手势指令。在本专利技术实施例中，配置字形特征对应的手势指令，以便于通过捕捉到的手势图形，匹配到自定义的手势指令。实施例五图2是本专利技术实施例提供的配置字形特征对应的手势指令的实现流程图，详述如下：在步骤S201中，配置V字形特征对应的手势指令为增加音量指令；在步骤S202中，配置倒V字形特征对应的手势指令为降低音量指令；在步骤S203中，配置OVV字形特征对应的手势指令为确认指令；在步骤S204中，配置山字形特征对应的手势指令为游标指令；在步骤S205中，配置1字形特征对应的手势指令为首页指令；在步骤S206中，配置C字形特征对应的手势指令为返回指令。步骤S201到步骤S206，这六个步骤可以同时执行，也可以分开按顺序或不按顺序执行。其中，首页指令为：返回首页的指令。其中，返回指令为：返回上一页的指令。在本专利技术实施例中，配置字形特征对应的手势指令，以便于通过捕捉到的手势图形与手势指令匹配的匹配结果，调用手势指令。实施例六本专利技术实施例描述了本申请在提供的配置字形特征对应的手势指令的实现流程图，详述如下：1.用户做出第一手势，传感器捕捉到手势图形并传送给手势识别平台进行图形解析。手势识别平台的内部处理图形算法将“V”字形特征通过图形算法匹对，并输出给传输单元，发送增加音量指令CodeValue：0x01；TimeDelay：1给VR/AR设备。同时也传递捕捉时间，如果捕捉的时间大于1ms，VR/AR设备将音量增加1级。2.用户做出第二手势，传感器捕捉到手势图形并传送给手势识别平台进行图形解析.手势识别平台的内部处理图形算法将“倒V”字形的图形特征通过图形匹对算法，输出给传输单位，发送降低音量指令CodeValue：0x02；TimeDelay：2给VR/AR设备。同时也传递捕捉时本文档来自技高网...

【技术保护点】
一种VR/AR系统与用户交互的方法，其特征在于，包括：在虚拟现实VR系统或增强现实AR系统中，嵌入手势指令传递通路；利用摄像头捕捉手势图形；将捕捉到的手势图形和预存储的字形特征进行匹配；当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器。

【技术特征摘要】
1.一种VR/AR系统与用户交互的方法，其特征在于，包括：在虚拟现实VR系统或增强现实AR系统中，嵌入手势指令传递通路；利用摄像头捕捉手势图形；将捕捉到的手势图形和预存储的字形特征进行匹配；当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器。2.如权利要求1所述的VR/AR系统与用户交互的方法，其特征在于，所述字形特征包括V字形特征、倒V字形特征、OVV字形、山字形特征、1字形特征、C字形特征中的至少一种。3.如权利要求1或2所述的VR/AR系统与用户交互的方法，其特征在于，所述将捕捉到的手势图形和预存储的字形特征进行匹配，具体为：将捕捉到的手势图形和预存储的V字形特征进行匹配；或，将捕捉到的手势图形和预存储的倒V字形特征进行匹配；或，将捕捉到的手势图形和预存储的OVV字形特征进行匹配；或，将捕捉到的手势图形和预存储的山字形特征进行匹配；或，将捕捉到的手势图形和预存储的1字形特征进行匹配；或，将捕捉到的手势图形和预存储的C字形特征进行匹配。4.如权利要求1或2所述的VR/AR系统与用户交互的方法，其特征在于，在所述当匹配成功时，利用所述手势指令传递通路，传递所述字形特征对应的手势指令至处理器之前，所述VR/AR系统与用户交互的方法还包括：配置字形特征对应的手势指令。5.如权利要求4所述的VR/AR系统与用户交互的方法，其特征在于，所述配置字形特征对应的手势指令具体为：配置V字形特征对应的手势指令为增加音量指令；配置倒V字形特征对应的手势指令为降低音量指令；配置OVV字形特征对应的手势指令为确认指令；配置山字形特征对应的手势指令为游标指令；配置1字形特征对应的手势指令为首页指令；配置C字形特征对应的手...

【专利技术属性】
技术研发人员：李兵，张元元，
申请(专利权)人：深圳市原点创新设计有限公司，
类型：发明
国别省市：广东;44