System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于虚幻引擎的虚拟直播方法、系统、设备、芯片及介质技术方案_技高网

基于虚幻引擎的虚拟直播方法、系统、设备、芯片及介质技术方案

技术编号:40457984 阅读:5 留言:0更新日期:2024-02-22 23:14
基于虚幻引擎的虚拟直播方法、系统、设备、芯片及介质,方法包括:搭建绿幕场景,并采集绿幕场景中的采集画面;将采集画面输入虚拟引擎中进行虚实融合,形成直播画面;向客户端输出或录制视频。本发明专利技术通过虚幻引擎将现实中的采集画面与虚拟的3D场景有效融合,使得人物、场景等3D场景元素可以进行自由编辑和创作,能创造出更加多样化、独特的视觉效果,给观众带来全新的感受,提高了观众的体验。

【技术实现步骤摘要】

本专利技术涉及计算机图形,具体地说是一种基于虚幻引擎的虚拟直播方法、系统、设备、芯片及介质


技术介绍

1、虚拟直播(ar)是通过虚拟结合现实所实现的新型直播方式,例如虚拟人物设定和形象在网络平台上开展直播、或真实人物+虚拟场景/产品结合做虚拟发布会、虚拟活动等;通常通过绿幕实时抠像以实现虚拟直播。

2、传统直播中,通常需要搭建现实场地,费用和物流成本高昂。由于场地有限导致参与人数不足,并需要维护秩序,观众参与度较低。需要大量的人力和技术支持,如专业的摄像师、导播等,增加了成本。比起传统直播,虚拟直播搭建速度快,可切换不同空间、产品,让观众能更直观地、沉浸式地感受到品牌的调性和产品。

3、cn202211727943.5号专利申请公开了一种基于虚幻引擎的多机位渲染方法与装置,首先在虚幻引擎中搭建好直播场景,并将通过专业三维建模软件创建的三维虚拟人模型加载到虚幻引擎中,然后通过动作捕捉设备和面部捕捉设备实时采集真人数据并输出到虚幻引擎;虚幻引擎基于输入数据实时渲染虚拟人模型;同时通过虚拟摄像机多机位实时拍摄虚拟人并将各机位生成的即时视频数据分别输出到导播设备,实现了虚拟人多机位实时渲染。


技术实现思路

1、本专利技术为解决现有的问题,旨在提供一种基于虚幻引擎的虚拟直播方法、系统、设备、芯片及介质。

2、为了达到上述目的,本专利技术采用的技术方案包括一种基于虚幻引擎的虚拟直播方法,包括:

3、s1,搭建绿幕场景,并采集绿幕场景中的采集画面

4、s2,将采集画面输入虚拟引擎中进行虚实融合,形成直播画面;

5、s3,向客户端输出或录制视频。

6、在一些实施例中,s1中通过采集摄像头画面,和/或采集bmd采集卡的信号,和/或采集ndi软件画面,和/或采集电脑窗口画面,获得用于输入虚幻引擎的采集画面。

7、在一些实施例中,s1中还对采集画面进行绿幕抠像或效果调节。

8、在一些实施例中,s2中将采集画面输入3d场景中,拖拽画面、添加3d模块组件或选择运镜机位。

9、在一些实施例中,所述3d场景由虚幻引擎所制作的3d模块组件提供。

10、在一些实施例中,所述3d模块组件打包为apk文件上传至后台。

11、在一些实施例中,3d模块组件包括图表、特效、led大屏、道具中的一个或若干。

12、在一些实施例中,s3中,直播画面经虚拟摄像头输出至客户端或录制视频。

13、在一些实施例中,通过对应脚本注册mr stage camera来获得虚拟摄像头。本专利技术还提供一种虚拟直播系统,包括采集模块、虚幻引擎和客户端,其中:采集模块用于采集绿幕场景中的采集画面,并将其输入虚幻引擎;虚幻引擎包括场景模块、融合模块,场景模块存储有3d场景,融合模块用于将采集画面与3d场景进行虚实融合,形成直播画面,并输出至客户端或录制视频。

14、在一些实施例中,还包括调节模块,用于对采集画面进行绿幕抠像或效果调节。在一些实施例中,直播画面通过虚拟摄像头输出至客户端。

15、本专利技术还提供一种虚拟直播设备,包括绿幕场景、采集设备以及电脑,电脑包括存储器、处理器,以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现任一所述的虚拟直播方法。

16、本专利技术还提供一种芯片,包括一个或多个处理器,用于从存储器中调用并运行计算机程序,使得安装有所述芯片的设备执行任一项所述的虚拟直播方法。

17、本专利技术还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行任一所述的虚拟直播方法。

18、和现有技术相比,本专利技术通过虚幻引擎将现实中的采集画面与虚拟的3d场景有效融合,使得人物、场景等3d场景元素可以进行自由编辑和创作,能创造出更加多样化、独特的视觉效果,给观众带来全新的感受,提高了观众的体验;虚拟直播可以通过虚拟场景来实现,避免现实中场地、道具等问题,降低了制作成本。虚拟直播还可以通过数字化技术实现互动性,让观众参与到直播过程中,增强直播的参与感和互动性。

本文档来自技高网...

【技术保护点】

1.一种基于虚幻引擎的虚拟直播方法,其特征在于包括:

2.根据权利要求1所述的基于虚幻引擎的虚拟直播方法,其特征在于:S1中,通过采集摄像头画面,和/或采集BMD采集卡的信号,和/或采集NDI软件画面,和/或采集电脑窗口画面,获得采集画面。

3.根据权利要求1或2所述的基于虚幻引擎的虚拟直播方法,其特征在于:S1中,还对采集画面进行绿幕抠像或效果调节。

4.根据权利要求1任一所述的基于虚幻引擎的虚拟直播方法,其特征在于:S2中,将采集画面输入3D场景中,拖拽画面、添加3D模块组件或选择运镜机位。

5.根据权利要求4所述的基于虚幻引擎的虚拟直播方法,其特征在于:所述3D场景由虚幻引擎所制作的3D模块组件提供,和/或所述3D模块组件打包为APK文件上传至后台。

6.根据权利要求4或5所述的基于虚幻引擎的虚拟直播方法,其特征在于:3D模块组件包括图表、特效、LED大屏、道具中的一个或若干。

7.根据权利要求1所述的基于虚幻引擎的虚拟直播方法,其特征在于:S3中,直播画面经虚拟摄像头输出至客户端,和/或通过对应脚本注册MRstageCamera来获得所述的虚拟摄像头。

8.一种虚拟直播系统,其特征在于:包括采集模块、虚幻引擎和客户端,其中:采集模块用于采集绿幕场景中的采集画面,并将其输入虚幻引擎;

9.根据权利要求8所述的虚拟直播系统,其特征在于:还包括调节模块,用于对采集画面进行绿幕抠像或效果调节。

10.根据权利要求8所述的虚拟直播系统,其特征在于:直播画面通过虚拟摄像头输出至客户端或录制视频。

11.一种虚拟直播设备,其特征在于:包括绿幕场景、采集设备以及电脑,电脑包括存储器、处理器,以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现权利要求1-7中任一所述的虚拟直播方法。

12.一种芯片,其特征在于:包括一个或多个处理器,用于从存储器中调用并运行计算机程序,使得安装有所述芯片的设备执行如权利要求1-7中任一项所述的虚拟直播方法。

13.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一所述的虚拟直播方法。

...

【技术特征摘要】

1.一种基于虚幻引擎的虚拟直播方法,其特征在于包括:

2.根据权利要求1所述的基于虚幻引擎的虚拟直播方法,其特征在于:s1中,通过采集摄像头画面,和/或采集bmd采集卡的信号,和/或采集ndi软件画面,和/或采集电脑窗口画面,获得采集画面。

3.根据权利要求1或2所述的基于虚幻引擎的虚拟直播方法,其特征在于:s1中,还对采集画面进行绿幕抠像或效果调节。

4.根据权利要求1任一所述的基于虚幻引擎的虚拟直播方法,其特征在于:s2中,将采集画面输入3d场景中,拖拽画面、添加3d模块组件或选择运镜机位。

5.根据权利要求4所述的基于虚幻引擎的虚拟直播方法,其特征在于:所述3d场景由虚幻引擎所制作的3d模块组件提供,和/或所述3d模块组件打包为apk文件上传至后台。

6.根据权利要求4或5所述的基于虚幻引擎的虚拟直播方法,其特征在于:3d模块组件包括图表、特效、led大屏、道具中的一个或若干。

7.根据权利要求1所述的基于虚幻引擎的虚拟直播方法,其特征在于:s3中,直播画面经虚拟摄像头输出至客户端,和/或通过对应脚本注册...

【专利技术属性】
技术研发人员:洪煦吴锐施志明费凯敏
申请(专利权)人:上海随幻智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1