在XR虚实合成中实现LED区域外画面补偿的方法、装置制造方法及图纸

本发明专利技术提供了一种在XR虚实合成中实现LED区域外画面补偿的方法、装置、电子设备及存储介质。其中方法包括以下步骤：基于LED大屏，在虚拟场景中建立一个三维模型，设置其纹理材质为单色自发光贴图，并设置虚拟场景中除三维模型以外的元素均不可见，得到第一虚拟场景并渲染得到第一渲染画面，生成Mask图；在虚拟场景中，设置三维模型不可见，并设置虚拟场景中除三维模型以外的元素为可见，得到第二虚拟场景并渲染，得到第二渲染画面；对第二渲染画面进行遮罩处理，得到新虚拟画面；将新虚拟画面与摄像机采集的拍摄画面进行混合，可以实现对LED区域外画面的实时、自然的补偿，增强了镜头自由运动的空间区域，提高了XR影视拍摄合成系统的效果和质量。

【技术实现步骤摘要】

本专利技术涉及图像处理，尤其涉及一种在xr虚实合成中实现led区域外画面补偿的方法、装置、电子设备及存储介质。

技术介绍

1、随着led大屏的应用，目前已有用大屏取代蓝箱实现影视拍摄的虚实合成，即：由led大屏直接输出虚拟背景，主持人在大屏前进行拍摄，拍摄画面再进入虚拟前景植入系统进行最终的虚实合成。该技术整合了vr、ar并进行了扩展，所以被称为xr(extendedreality)，以此技术构建的产品被称为xr影视拍摄虚实合成系统。对于虚实合成而言，“虚”是指三维引擎渲染的虚拟画面，“实”是指包含摄像机拍摄画面(包含led大屏+演员或主持人)。

2、对于传统虚拟制片而言，一般采用定焦镜头或固定机位，即使有运镜也保证构图画面只包含led区域内的部分，而对于新的xr影视拍摄合成系统而言，需要对于超出大屏的部分做到实时、自然的画面填充，即采用画面补偿技术，以增强镜头自由运动的空间区域。

技术实现思路

1、本专利技术实施例提供一种在xr虚实合成中实现led区域外画面补偿的方法、装置、电子设备及存储介质，本文档来自技高网...

【技术保护点】

1.一种在XR虚实合成中实现LED区域外画面补偿的方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述使用所述Mask图对所述第二渲染画面进行遮罩处理，包括：

3.根据权利要求1所述的方法，其特征在于，所述新虚拟画面与所述摄像机采集的拍摄画面按照Alpha混合方式进行混合，包括：

4.根据权利要求1所述的方法，其特征在于，将所述三维模型设置为不可见包括：

5.根据权利要求1所述的方法，其特征在于，所述设置虚拟场景中除所述三维模型以外的元素均不可见，包括：

6.根据权利要求1所述的方法，其特征在于，所述基于所述...

【技术特征摘要】

1.一种在xr虚实合成中实现led区域外画面补偿的方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述使用所述mask图对所述第二渲染画面进行遮罩处理，包括：

3.根据权利要求1所述的方法，其特征在于，所述新虚拟画面与所述摄像机采集的拍摄画面按照alpha混合方式进行混合，包括：

4.根据权利要求1所述的方法，其特征在于，将所述三维模型设置为不可见包括：

5.根据权利要求1所述的方法，其特征在于，所述设置虚拟场景中除所述三维模型以外的元素均不可见，包括：

6.根据权利要求1所述的方法，其特征在于，所述基于所...

【专利技术属性】
技术研发人员：郑培枫，袁慧晶，陈子恒，
申请(专利权)人：新奥特北京视频技术有限公司，
类型：发明
国别省市：