一种VR端端云结合的虚拟演唱会渲染方法及系统技术方案

本申请提供一种VR端端云结合的虚拟演唱会渲染方法及系统，该方法包括：在云端创建虚拟偶像和虚拟演唱会场景，并将虚拟偶像融合在虚拟演唱会场景中；实时采集本地VR设备的视觉角度数据和表演数据，并将采集的数据发送至云端服务器；利用表演数据驱动虚拟偶像；根据本地VR设备的视觉角度，实时采集被驱动后的虚拟偶像画面和虚拟演唱会场景画面；实时渲染采集的虚拟偶像画面和虚拟演唱会场景画面，并插入声音数据，获得云端360VR视频流；将云端360VR视频流与本地观众画面合成一个虚拟演唱会视频流；将合成的虚拟演唱会视频流发送给本地观看客户端。本申请渲染效率高、低延迟、高响应速度和低门槛。度和低门槛。度和低门槛。

【技术实现步骤摘要】
一种VR端端云结合的虚拟演唱会渲染方法及系统


[0001]本申请涉及VR
，尤其涉及一种VR端端云结合的虚拟演唱会渲染方法及系统。

技术介绍

[0002]虚拟现实技术（VR）是一种综合应用计算机图形学，人机接口技术，传感器技术以及人工智能等技术，制造出逼真的人工模拟环境，并能有效地模拟人在自然环境中的各种感知的高级的人机交互技术。
[0003]云渲染(cloudrender)的模式与常规的云计算类似，即将3D程序放在远程的服务器中渲染，用户终端通过Web软件或者直接在本地的3D程序中点击一个"云渲染"按钮并借助高速互联网接入访问资源，指令从用户终端中发出，服务器根据指令执行对应的渲染任务，而渲染结果画面则被传送回用户终端中加以显示。
[0004]通过VR技术，观众无需线下聚集也可以获得无限接近现场演出的真实感和沉浸感。VR画面越细腻写实，所需要的计算机图形算力就越高。这就意味着，观众想要获得极致演唱会体验，就需要在本地观看设备和运算设备上投入重金。如此高的门槛，阻碍了观众的体验，也不利于行业发展。/>[0005]本申本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种VR端端云结合的虚拟演唱会渲染方法，其特征在于，该方法包括：在云端创建虚拟偶像和虚拟演唱会场景，并将虚拟偶像融合在虚拟演唱会场景中；实时采集本地VR设备的视觉角度数据和表演数据；利用表演数据驱动虚拟偶像；根据本地VR设备的视觉角度，实时采集被驱动后的虚拟偶像画面和虚拟演唱会场景画面；实时渲染采集的虚拟偶像画面和虚拟演唱会场景画面，并插入声音数据，获得云端360VR视频流；将云端360VR视频流与本地观众画面合成一个虚拟演唱会视频流；将合成的虚拟演唱会视频流发送给本地观看客户端。2.根据权利要求1所述的VR端端云结合的虚拟演唱会渲染方法，其特征在于，本地观众画面为在本地计算设备对观众席的观众和观众的互动进行渲染获得。3.根据权利要求1所述的VR端端云结合的虚拟演唱会渲染方法，其特征在于，表演数据包括动捕演员的动作表情数据和声音数据；动捕演员的自身动作舞蹈、动捕演员的表情和舞美造型；声音数据包括动捕演员的演唱歌曲和背景音乐。4.根据权利要求3所述的VR端端云结合的虚拟演唱会渲染方法，其特征在于，根据动捕演员的动作表情数据驱动虚拟偶像，并根据本地VR设备的视觉角度，将虚拟摄像机调整为与本地VR设备视觉角度一致的角度，通过调整后的虚拟摄像机实时采集被驱动后的虚拟偶像画面和虚拟演唱会场景画面。5.根据权利要求2所述的VR端端云结合的虚拟演唱会渲染方法，其特征在于，本地计算设备获得观众的互动数据后，发送给其他观众的客户端，其他观众的客户端在其本地计算设备上渲染观众互动数据，所有的观众客户端都渲染出观众互动效果。6.根据权利要求1所述的VR端端云结合的虚拟演唱会渲染方法，其特征在于，在云端创建虚拟偶像和虚拟演唱会场景，并将虚拟偶像融合在虚拟演唱会场景中的方法包括：在云端根据所需直播的演唱会节目创建对应的数量的虚拟偶像模型及对应的...

【专利技术属性】
技术研发人员：匡昊，费元华，郭建君，
申请(专利权)人：北京蔚领时代科技有限公司，
类型：发明
国别省市：