虚拟现实项目的第三视角视频的合成和输出系统及方法技术方案

一种虚拟现实项目的第三视角视频的合成和输出系统及方法，包括：用于拍摄在蓝箱内、佩戴VR头盔、手持定位手柄且操作虚拟现实项目的操作人员的活动图像的摄像机；用于提取人物的活动图像的抠像模块；用于提取虚拟现实项目内背景画面的背景提取模块；用于提取虚拟现实项目内前景画面的前景提取模块；用于将活动图像、背景画面、前景画面合成第三视角视频的视频合成模块。利用Unity3D虚拟现实引擎带前景alpha通道图像输出的特性，利用图像的捕捉技术和视频抠像技术来合成基于Unity3D引擎开发的虚拟现实项目的第三视角的合成和输出，解决虚拟现实设备只可以提供第一视角的应用局限。

Third view video synthesis and output system and method for virtual reality project

Including the synthesis and output system and method, third view video a virtual reality project: for the camera in a moving image, wearing a helmet VR blue box, and handheld positioning handle operation virtual reality project operator; for the extraction of the activities of the characters image matting module; module extraction for the extraction of virtual reality project background picture in the background; for the extraction of virtual reality project prospects the foreground extraction module; for the video image, the background image synthesis module, foreground third view video synthesis. Based on the characteristics of Unity3D virtual reality engine with the prospect of alpha channel image output, like technology to synthesis and output third from the perspective of virtual reality project Unity3D engine based on the use of video capture technology and pull the image, to solve the virtual reality equipment can only provide limited application in the first perspective.

【技术实现步骤摘要】
虚拟现实项目的第三视角视频的合成和输出系统及方法
本专利技术涉及虚拟现实的
，尤其是一种虚拟现实项目的第三视角视频的合成和输出系统。
技术介绍
虚拟现实（VR）技术是多种技术的综合，包括实时三维计算机图形技术，广角（宽视野）立体显示技术，对观察者头、眼和手的跟踪技术，以及触觉/力觉反馈，通过计算机输出一个左右眼的第一视角3D立体画面，并且戴上头戴式显示器即可呈现融入其中。使用者戴上头盔后呈现的第一视角画面利用电子陀螺仪技术和头部的运动相结合，电子陀螺仪可以准确的感知到空间x、y、z三维信息，并且把这些信息回传到计算机中进行计算，使画面可以根据用户的头部运动呈现不同视角的画面，犹如真实环境中一样。佩戴者通过操作手柄可对虚拟环境中的物体进行操作，如更换虚拟环境的部件，汽车模型、机械模型的拆解安装。该种基于VR的实训只能提供第一视角的个人体验，而无法进行教学分享。
技术实现思路
本专利技术所要解决的技术问题之一是提供一种虚拟现实项目的第三视角视频的合成和输出方法，解决虚拟现实设备只可以提供第一视角的应用局限。本专利技术所要解决的技术问题之二是提供一种虚拟现实项目的第三视角视频的合成和输出本文档来自技高网...

【技术保护点】
一种虚拟现实项目的第三视角视频的合成和输出方法，其特征在于，包括以下步骤：（1）将佩戴VR头盔、手持定位手柄且操作虚拟现实项目的操作人员置于绿色的蓝箱内，利用摄像机拍摄人物的活动图像，用抠像技术提取人物图像；（2）提取虚拟现实项目的输出的背景画面放在最底层；（3）提取虚拟现实项目的前景画面，通过alpha遮罩得到前景画面放在最上层；（4）将步骤（1）~（3）生成的三路视频合成获得第三视角视频的生成和输出，并利用视频压缩技术进行图像录制和流媒体视频推送应用。

【技术特征摘要】
1.一种虚拟现实项目的第三视角视频的合成和输出方法，其特征在于，包括以下步骤：（1）将佩戴VR头盔、手持定位手柄且操作虚拟现实项目的操作人员置于绿色的蓝箱内，利用摄像机拍摄人物的活动图像，用抠像技术提取人物图像；（2）提取虚拟现实项目的输出的背景画面放在最底层；（3）提取虚拟现实项目的前景画面，通过alpha遮罩得到前景画面放在最上层；（4）将步骤（1）~（3）生成的三路视频合成获得第三视角视频的生成和输出，并利用视频压缩技术进行图像录制和流媒体视频推送应用。2.根据权利要求1所述的一种虚拟现实项目的第三视角视频的合成和输出方法，其特征在于：所述虚拟现实项目基于Unity3D开发引擎下开发。3.根据权利要求2所述的一种虚拟现实项目的第三视角视频的合成和输出方法，其特征在于：所述VR头盔和定位手柄采用HTCVive设备；在摄像机上安装定位手柄，此...

【专利技术属性】
技术研发人员：冯大治，
申请(专利权)人：广州市英途信息技术有限公司，
类型：发明
国别省市：广东,44