System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于VR的远程观看系统、方法及其VR设备技术方案_技高网

基于VR的远程观看系统、方法及其VR设备技术方案

技术编号:40901225 阅读:4 留言:0更新日期:2024-04-18 11:19
本发明专利技术公开了一种基于VR的远程观看系统、方法及其VR设备,系统包括VR设备和可转动的摄像机;VR设备和摄像机分别设置有网络模块并通过网络模块进行远程通信;VR设备用于追踪用户头部的转动角度并传输至摄像机,控制摄像机同步转动;摄像机在转动的同时拍摄现场实时画面并将实时画面和当前角度传输至VR设备;VR设备还设置有显示模块提供有第一屏幕和第二屏幕,所述第一屏幕用于显示所述摄像机拍摄的相同角度的所述实时画面,所述第二屏幕用于显示预设的虚拟画面。本发明专利技术实现了用户在VR设备上观看摄像机拍摄的实时画面,并且可以通过头部旋转控制摄像机的角度,从而实现类似于现场的观看体验。

【技术实现步骤摘要】

本专利技术涉及远程现场交互,尤其涉及一种基于vr的远程观看系统、方法及其vr设备。


技术介绍

1、随着vr(virtual reality,虚拟现实)技术的发展,越来越多的应用场景需要利用vr设备来观看远程的实时画面,如旅游、教育、娱乐、监控等。这些场景中,用户通常希望能够通过头部旋转来控制观看的角度,从而增强沉浸感和真实感。然而,现有的技术方案存在一些问题。

2、比如中国专利申请公开号为cn 107968915 a的专利技术专利申请中公开了一种水下机器人摄像机云台实时控制系统及其方法,其中,该控制系统包括跟踪头部运动的vr装置、摄像机云台和远程控制平台;摄像机云台安装于水下机器人机体上,且用于接收远程控制平台所发送的控制指令来实现摄像机云台的左右转动和俯仰转动;摄像机云台上还固定有图像采集装置,其用于在摄像机云台转动的同时采集水下作业现场视频图像并上传至远程控制平台;远程控制平台,用于将接收到的水下作业现场视频图像发送至跟踪头部运动的vr装置中,同时将跟踪头部运动的vr装置的实时头部位姿信息转换为相应控制指令来实时调整摄像机云台的角度和水下摄像机变焦镜头的焦距。该技术方案通过测量机械臂操作员的头部位姿信息,使摄像机云台的转动角度与操作员头部转动角度保持一致,解放操作员的双手以完成对两只机械臂主臂的操作,减轻了操作员的工作量,并实现了良好的人机交互。

3、但是,仍然存在以下问题:

4、虽然vr设备根据用户头部的角度发送指令给摄像机,摄像机根据指令调整自己的角度,从而实现同步旋转的效果。但是摄像机的转动角度往往受到物理限制,无法达到用户头部的旋转角度,造成画面的不一致,影响用户的观看体验。


技术实现思路

1、提供本
技术实现思路
是为了以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本
技术实现思路
不旨在确定所要求保护的主题的关键或重要特征,也不旨在用作确定所要求保护的主题的范围的辅助手段。

2、为了实现用户在vr设备上观看摄像机拍摄的实时画面,并且可以通过头部旋转控制摄像机的角度,从而实现类似于现场的观看体验。本专利技术提出了如下技术方案:

3、第一方面是一种基于vr的远程观看系统,所述系统包括vr设备和可转动的摄像机;所述vr设备和所述摄像机分别设置有网络模块并通过所述网络模块进行远程通信;

4、所述vr设备用于追踪用户头部的转动角度并传输至所述摄像机,控制所述摄像机同步转动;

5、所述摄像机在转动的同时拍摄现场实时画面并将实时画面和当前角度传输至所述vr设备;

6、所述vr设备还设置有显示模块,所述显示模块提供有第一屏幕和第二屏幕,所述第一屏幕用于显示所述摄像机拍摄的相同角度的所述实时画面,所述第二屏幕用于显示预设的虚拟画面。

7、可选地,所述vr设备为头戴式vr设备并设置有第一角度传感器,通过所述第一角度传感器实时采集用户头部的转动角度。

8、可选地,所述摄像机设置有第二角度传感器,并通过所述第二角度传感器实时采集所述摄像机的当前角度。

9、可选地,所述虚拟画面为单一色背景,或者虚拟场景,或者slam对现场的建模。

10、可选地,所述第二屏幕结合于所述第一屏幕的四周,且所述第一屏幕和所述第二屏幕的视野之和至少完全覆盖所述vr设备的视野范围。

11、可选地,所述第一屏幕的视野范围可调。

12、可选地,所述vr设备通过比较摄像机当前角度和用户头部角度判断所述摄像机和所述vr设备是否同步转动。

13、第二方面是一种vr设备,其包括:

14、第一角度传感器,用于实时采集用户头部的转动角度;

15、第一网络模块,用于与现场端摄像机远程通信,将采集的用户头部的转动角度实时传输至摄像机,以及接收摄像机拍摄的实时现场画面和摄像机的当前角度;

16、显示模块,用于提供第一屏幕和第二屏幕,所述第一屏幕用于显示所述摄像机拍摄的相同角度的所述实时画面,所述第二屏幕用于显示预设的虚拟画面。

17、第三方面是一种采用如上任一所述基于vr的远程观看系统的基于vr的远程观看方法,所述方法包括:

18、将vr设备和摄像机通过网络模块建立远程通信;

19、通过所述vr设备追踪用户头部的转动角度并传输至所述摄像机,控制所述摄像机同步转动;

20、所述摄像机在转动的同时拍摄现场实时画面并将实时画面和当前角度传输至所述vr设备;

21、所述vr设备的显示模块提供有第一屏幕和第二屏幕,所述第一屏幕显示所述摄像机拍摄的相同角度的所述实时画面,所述第二屏幕显示预设的虚拟画面。

22、可选地,在建立完成所述vr设备和所述摄像机的远程通信后,先进行校准步骤,再进行所述vr设备对所述摄像机的同步转动控制;所述校准步骤包括:

23、通过所述vr设备获取用户头部的初始角度,并通过网络模块对所述摄像机发送校准指令;

24、所述摄像机接收所述校准指令,将所述摄像机角度调整至初始角度,同时将当前角度发送至所述vr设备。

25、由于采用上述技术方案,使得本专利技术取得的有益效果是:

26、本专利技术系统主要采用vr设备和远程摄像机,vr设备设置在用户端,用于实时追踪用户头部的转动,摄像机设置在现场端,用于拍摄现场实时画面,vr设备与摄像机通过网络模块进行数据通信,实现头部转动和远程摄像机的转动控制同步,vr设备内的显示模块设置有第一屏幕和第二屏幕,第一屏幕可同步显示摄像机拍摄到的现场实时画面,第二屏幕是用于在vr视野超出第一屏幕视野范围时提供预设的虚拟画面,来填补实时画面无法覆盖的区域,来满足人类的视觉习惯。

本文档来自技高网...

【技术保护点】

1.一种基于VR的远程观看系统,其特征在于:所述系统包括VR设备和可转动的摄像机;所述VR设备和所述摄像机分别设置有网络模块并通过所述网络模块进行远程通信;

2.根据权利要求1所述的基于VR的远程观看系统,其特征在于,所述VR设备为头戴式VR设备并设置有第一角度传感器,通过所述第一角度传感器实时采集用户头部的转动角度。

3.根据权利要求1所述的基于VR的远程观看系统,其特征在于,所述摄像机设置有第二角度传感器,并通过所述第二角度传感器实时采集所述摄像机的当前角度。

4.根据权利要求1所述的基于VR的远程观看系统,其特征在于,所述虚拟画面为单一色背景,或者虚拟场景,或者SLAM对现场的建模。

5.根据权利要求1所述的基于VR的远程观看系统,其特征在于,所述第二屏幕结合于所述第一屏幕的四周,且所述第一屏幕和所述第二屏幕的视野之和至少完全覆盖所述VR设备的视野范围。

6.根据权利要求1所述的基于VR的远程观看系统,其特征在于,所述第一屏幕的视野范围可调。

7.根据权利要求1所述的基于VR的远程观看系统,其特征在于,所述VR设备通过比较摄像机当前角度和用户头部角度判断所述摄像机和所述VR设备是否同步转动。

8.一种VR设备,其特征在于,包括:

9.一种采用如权利要求1~7中任一所述基于VR的远程观看系统的基于VR的远程观看方法,其特征在于,所述方法包括:

10.根据权利要求9所述的基于VR的远程观看方法,其特征在于,在建立完成所述VR设备和所述摄像机的远程通信后,先进行校准步骤,再进行所述VR设备对所述摄像机的同步转动控制;所述校准步骤包括:

...

【技术特征摘要】

1.一种基于vr的远程观看系统,其特征在于:所述系统包括vr设备和可转动的摄像机;所述vr设备和所述摄像机分别设置有网络模块并通过所述网络模块进行远程通信;

2.根据权利要求1所述的基于vr的远程观看系统,其特征在于,所述vr设备为头戴式vr设备并设置有第一角度传感器,通过所述第一角度传感器实时采集用户头部的转动角度。

3.根据权利要求1所述的基于vr的远程观看系统,其特征在于,所述摄像机设置有第二角度传感器,并通过所述第二角度传感器实时采集所述摄像机的当前角度。

4.根据权利要求1所述的基于vr的远程观看系统,其特征在于,所述虚拟画面为单一色背景,或者虚拟场景,或者slam对现场的建模。

5.根据权利要求1所述的基于vr的远程观看系统,其特征在于,所述第二屏幕结合于所述第一...

【专利技术属性】
技术研发人员:何炜郭鹏飞李明李朋斌
申请(专利权)人:上海傅利叶智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1