一种虚实画面结合方法和装置制造方法及图纸

本发明专利技术提供了一种虚实画面结合方法和系统，其中方法包括以下步骤：获取演播室实景画面和虚拟画面，并根据画面获得纹理贴图；在虚拟场景中设置屏幕三维模型；确定屏幕三维模型中网格节点对应的纹理贴图坐标；根据屏幕三维模型中网格节点对应的纹理贴图坐标，对纹理贴图和三维模型进行合成，得到目标画面。本发明专利技术通过将拍摄画面作为纹理应用于虚拟场景中的三维模型，利用三维引擎自动深度排序进行虚实合成，方便调节实景画面与虚拟画面之间的位置关系，可以使电视导演摆脱空间和道具制作等方面的限制，在广泛的想象空间中进行自由的创作，提高电视台对节目的创作与制作能力，降低节目制作的成本，提高了虚拟演播室系统的制作质量。质量。质量。

【技术实现步骤摘要】
一种虚实画面结合方法和装置


[0001]本专利技术涉及电视节目制作
，特别是涉及一种虚实画面结合方法和装置。

技术介绍

[0002]虚拟演播室系统是近年来随着计算机技术的飞速发展和色键技术的不断改进而出现的一种新的电视节目制作系统，传统虚拟演播室产品中，主持人在蓝箱中进行拍摄，将画面进行抠像并与图形工作站渲染的三维背景进行合成，由于主持人在蓝箱中缺乏表演沉浸感、抠像合成方式无法为主持人提供灯光效果，随着演播室LED大屏的应用，目前已有用大屏取代蓝箱，将拍摄画面(实景)与前景虚拟植入画面(虚景)通过像素混叠的方法进行虚实合成的虚拟演播室技术方案，但是像素混叠的合成方法是将拍摄画面作为底层，将植入画面作为覆盖层，会导致虚实两层画面之间没有纵深关系，无法改变主持人与前景物体的前后混合关系。

技术实现思路

[0003]鉴于上述问题，提出了本专利技术实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种虚实画面结合方法、以及相应的一种虚实画面结合系统。
[0004]为了解决上述问题，一方面，本专利技术实施例公开了一种本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚实画面结合方法，应用于虚拟演播室，其特征在于，包括：获取实景摄像机拍摄的演播室实景画面，并根据所述实景画面获得第一纹理贴图；获取虚拟摄像机拍摄的演播室虚拟画面，并根据所述虚拟画面获得第二纹理贴图；在虚拟场景中设置屏幕三维模型，所述虚拟摄像机设置在所述虚拟场景中；确定所述屏幕三维模型中网格节点对应的纹理贴图坐标；根据所述屏幕三维模型中网格节点对应的纹理贴图坐标，对所述第一纹理贴图、所述第二纹理贴图和所述屏幕三维模型进行合成，得到目标画面。2.根据权利要求1所述的方法，其特征在于，所述确定所述屏幕三维模型中网格节点对应的纹理贴图坐标，包括:获取与所述实景摄像机拍摄画面对应的第一摄像机坐标系；根据所述第一摄像机坐标系对应的第一视矩阵与第一投影矩阵，计算所述屏幕三维模型对应的第一平面投影；获取与所述虚拟摄像机拍摄画面对应的第二摄像机坐标系；根据所述第二摄像机坐标系对应的第二视矩阵与第二投影矩阵，计算所述屏幕三维模型对应的第二平面投影；以所述屏幕三维模型左上角为原点，将所述第一平面投影和所述第二平面投影内各个像素的坐标进行归一化，并将归一化后的坐标作为被投影到所述像素的三维模型网格节点的纹理贴图坐标。3.根据权利要求2所述的方法，其特征在于，所述确定所述屏幕三维模型中网格节点对应的纹理贴图坐标，还包括:根据未定义纹理贴图坐标的第一网格节点，查找与所述第一网格节点相邻的已定义纹理贴图坐标的第二网格节点；根据所述第二网格节点对应的第二纹理贴图坐标，通过坐标插值进行计算，得到所述第一网格节点对应的第一纹理贴图坐标。4.根据权利要求1所述的方法，其特征在于，所述根据所述实景画面获得第一纹理贴图包括：根据所述纹理贴图坐标对实景画面进行纹理源采样；根据所述纹理贴图坐标对实景画面进行颜色采样；将所述纹理源和颜色填充至所述纹理贴图坐标对应的网格节点。5.根据权利要求1所述的方法，其特征在于，所述根据所述虚拟画面获得第二纹理贴图包括：根据所述纹理贴图坐标对虚拟画面进行纹理源采样；根据所述纹理贴图坐标对虚拟画面进行颜色采样；将所述纹理源和颜色填充至所述纹理贴图坐标对应的网格节点。6.根据权利要求1所述的方法，其特征在于，所述在虚拟场景中设置屏幕三维模型包括：根据所述演播室...

【专利技术属性】
技术研发人员：郑培枫，丁于成，江帆，
申请(专利权)人：北京新奥特图腾科技有限公司，
类型：发明
国别省市：