图像背景确定方法及装置、计算机可读存储介质制造方法及图纸

本申请公开了一种图像背景确定方法及装置、计算机可读存储介质，属于图像处理技术领域。图像处理设备根据部署在目标场景中的目标相机对目标场景拍摄得到的第一图像，确定目标相机的拍摄位置，然后根据目标相机的拍摄位置，从广角图片集合中获取目标广角图片。图像处理设备根据目标相机的拍摄姿态以及目标广角图片的视角信息，确定目标广角图片中的可视区域，并将可视区域作为目标相机对应的图像背景。该图像背景与目标相机采集的真实图像的视角和可视区域都是一致的。因此，采用该图像背景更换目标相机采集的真实图像中的背景后得到的合成图像中，前景与背景始终都是匹配的，合成图像的成像效果较好。合成图像的成像效果较好。合成图像的成像效果较好。

【技术实现步骤摘要】
图像背景确定方法及装置、计算机可读存储介质


[0001]本申请涉及图像处理
，特别涉及一种图像背景确定方法及装置、计算机可读存储介质。

技术介绍

[0002]在现代会议系统中，随着跨地域的协作越来越多以及成本的要求，对视频会议的需求日益增加。出于对用户所处环境隐私的保护，通常需要将视频会议图像中的真实背景替换为虚拟背景。
[0003]在一些研究中，通过提取视频会议图像中的人体成像，然后将人体成像融合至预先配置的虚拟背景中，以得到合成图像。
[0004]但是，合成图像中可能会出现人体成像与虚拟背景不匹配的问题，导致合成图像的成像效果较差。

技术实现思路

[0005]本申请提供了一种图像背景确定方法及装置、计算机可读存储介质，可以解决目前由于人体成像与虚拟背景不匹配导致的合成图像的成像效果较差的问题。
[0006]第一方面，提供了一种图像背景确定方法。该方法包括：图像处理设备根据部署在目标场景中的目标相机对目标场景拍摄得到的第一图像，确定目标相机的拍摄位置。图像处理设备根据目标相机的拍摄位置，从广角图片集合中获取目标广角图片，该广角图片集合包括目标场景中的多个拍摄位置对应的多个广角图片，广角图片配置有视角信息，目标广角图片为广角图片集合中与目标相机的拍摄位置对应的广角图片。图像处理设备根据目标相机的拍摄姿态以及目标广角图片的视角信息，确定目标广角图片中的可视区域，并将可视区域作为目标相机对应的图像背景。
[0007]其中，目标场景中的每个拍摄位置对应的广角图片都是根据相机在该拍摄位置对目标场景的取景范围预先配置的。不同拍摄位置对应的广角图片可以不同。或者，部分拍摄位置对应的广角图片也可以相同。
[0008]本申请中，通过预先配置目标场景中的多个拍摄位置对应的多个广角图片，在目标场景中部署目标相机之后，图像处理设备可以根据目标相机对目标场景拍摄得到的图像确定目标相机的拍摄位置，然后从多个广角图片中获取与目标相机的拍摄位置对应的目标广角图片，并根据目标相机的拍摄姿态以及目标广角图片的视角信息，确定目标广角图片中的可视区域，进而得到目标相机视角下的图像背景，该图像背景与目标相机采集的真实图像的视角和可视区域都是一致的。因此，采用该图像背景更换目标相机采集的真实图像中的背景后得到的合成图像中，前景与背景始终都是匹配的，合成图像的成像效果较好。
[0009]可选地，目标广角图片的视角信息包括水平视角信息，目标广角图片的水平视角大于目标相机的水平拍摄视角。图像处理设备根据目标相机的拍摄姿态以及目标广角图片的视角信息，确定目标广角图片中的可视区域的实现过程，包括：图像处理设备根据目标相
机的拍摄偏转角以及目标广角图片的水平视角信息，确定目标广角图片中的可视区域。
[0010]可选地，目标广角图片的视角信息包括高度视角信息，目标广角图片的高度视角大于目标相机的垂直拍摄视角。图像处理设备根据目标相机的拍摄姿态以及目标广角图片的视角信息，确定目标广角图片中的可视区域的实现过程，包括：图像处理设备根据目标相机的拍摄俯仰角以及目标广角图片的高度视角信息，确定目标广角图片中的可视区域。
[0011]可选地，图像处理设备根据部署在目标场景中的目标相机对目标场景拍摄得到的第一图像，确定目标相机的拍摄位置的实现方式，包括：图像处理设备向第一模型输入第一图像，以得到第一模型输出的目标相机的拍摄位置。其中，第一模型基于第一训练样本集训练得到，第一训练样本集包括相机在第一场景中的多个拍摄位置对第一场景拍摄得到的多个图像，第一训练样本集中的图像标注有位置标签，第一场景与目标场景的场景类型相同，第一场景中的多个拍摄位置与目标场景中的多个拍摄位置对应。
[0012]可选地，图像处理设备确定目标相机的拍摄姿态的一种实现方式，包括：图像处理设备向第二模型输入第一图像，以得到第二模型输出的目标相机的拍摄姿态。其中，第二模型基于第二训练样本集训练得到，第二训练样本集包括相机在第二场景中的多个拍摄位置分别采用多种拍摄姿态对第二场景拍摄得到的多个图像，第二训练样本集中的图像标注有姿态标签，第二场景与目标场景的场景类型相同，第二场景中的多个拍摄位置与目标场景中的多个拍摄位置对应。
[0013]可选地，图像处理设备确定目标相机的拍摄姿态的另一种实现方式，包括：图像处理设备根据目标相机的相机姿态，确定目标相机的拍摄姿态。这种实现方式下，图像处理设备直接从目标相机的相机姿态中获取目标相机的拍摄姿态，实现复杂度较低。
[0014]可选地，图像处理设备还可以基于第一图像，确定桌子在第一图像中的成像位置和成像形状。图像处理设备根据桌子在第一图像中的成像位置和成像形状，在图像背景上叠加桌子图像。图像处理设备显示叠加有桌子图像的图像背景以及桌子调节控件，桌子调节控件用于调节桌子图像的位置和/或大小。响应于对桌子调节控件的第一操控指令，图像处理设备根据第一操控指令调节桌子图像。
[0015]或者，目标场景中设置有桌子，目标广角图片包括广角背景图像和桌子图像，桌子图像叠加在广角背景图像上。图像处理设备显示图像背景以及桌子调节控件，桌子调节控件用于调节桌子图像的位置和/或大小。响应于对桌子调节控件的第一操控指令，图像处理设备根据第一操控指令调节桌子图像。
[0016]本申请中，图像处理设备显示图像背景以及桌子调节控件，通过UI交互的方式实现桌子图像的可调节，提高了对图像背景的调整灵活性。
[0017]可选地，图像处理设备显示图像背景以及背景调节控件，背景调节控件用于调节图像背景。响应于对背景调节控件的第二操控指令，图像处理设备根据第二操控指令调节图像背景。
[0018]本申请中，图像处理设备显示图像背景以及背景调节控件，通过UI交互的方式实现对图像背景的整体调节，以使调整后的图像背景能够更好地匹配相机视角。
[0019]可选地，图像处理设备获取第二图像中的前景成像，第二图像由目标相机采集得到。图像处理设备对前景成像以及图像背景进行融合，得到第三图像。
[0020]第二方面，提供了一种图像处理设备。所述图像处理设备包括多个功能模块，所述
多个功能模块相互作用，实现上述第一方面及其各实施方式中的方法。所述多个功能模块可以基于软件、硬件或软件和硬件的结合实现，且所述多个功能模块可以基于具体实现进行任意组合或分割。
[0021]第三方面，提供了一种图像处理设备，包括：处理器和存储器；
[0022]所述存储器，用于存储计算机程序，所述计算机程序包括程序指令；
[0023]所述处理器，用于调用所述计算机程序，实现上述第一方面及其各实施方式中的方法。
[0024]第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，当所述指令被处理器执行时，实现上述第一方面及其各实施方式中的方法。
[0025]第五方面，提供了一种芯片，芯片包括可编程逻辑电路和/或程序指令，当芯片运行时，实现上述第一方面及其各实施方式中的方法。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像背景确定方法，其特征在于，所述方法包括：图像处理设备根据部署在目标场景中的目标相机对所述目标场景拍摄得到的第一图像，确定所述目标相机的拍摄位置；所述图像处理设备根据所述目标相机的拍摄位置，从广角图片集合中获取目标广角图片，所述广角图片集合包括所述目标场景中的多个拍摄位置对应的多个广角图片，所述广角图片配置有视角信息，所述目标广角图片为所述广角图片集合中与所述目标相机的拍摄位置对应的广角图片；所述图像处理设备根据所述目标相机的拍摄姿态以及所述目标广角图片的视角信息，确定所述目标广角图片中的可视区域，并将所述可视区域作为所述目标相机对应的图像背景。2.根据权利要求1所述的方法，其特征在于，所述目标广角图片的视角信息包括水平视角信息，所述目标广角图片的水平视角大于所述目标相机的水平拍摄视角，所述图像处理设备根据所述目标相机的拍摄姿态以及所述目标广角图片的视角信息，确定所述目标广角图片中的可视区域，包括：所述图像处理设备根据所述目标相机的拍摄偏转角以及所述目标广角图片的水平视角信息，确定所述目标广角图片中的可视区域。3.根据权利要求1或2所述的方法，其特征在于，所述目标广角图片的视角信息包括高度视角信息，所述目标广角图片的高度视角大于所述目标相机的垂直拍摄视角，所述图像处理设备根据所述目标相机的拍摄姿态以及所述目标广角图片的视角信息，确定所述目标广角图片中的可视区域，包括：所述图像处理设备根据所述目标相机的拍摄俯仰角以及所述目标广角图片的高度视角信息，确定所述目标广角图片中的可视区域。4.根据权利要求1至3任一所述的方法，其特征在于，所述图像处理设备根据部署在目标场景中的目标相机对所述目标场景拍摄得到的第一图像，确定所述目标相机的拍摄位置，包括：所述图像处理设备向第一模型输入所述第一图像，以得到所述第一模型输出的所述目标相机的拍摄位置；其中，所述第一模型基于第一训练样本集训练得到，所述第一训练样本集包括相机在第一场景中的多个拍摄位置对所述第一场景拍摄得到的多个图像，所述第一训练样本集中的图像标注有位置标签，所述第一场景与所述目标场景的场景类型相同，所述第一场景中的多个拍摄位置与所述目标场景中的多个拍摄位置对应。5.根据权利要求1至4任一所述的方法，其特征在于，所述方法还包括：所述图像处理设备向第二模型输入所述第一图像，以得到所述第二模型输出的所述目标相机的拍摄姿态；其中，所述第二模型基于第二训练样本集训练得到，所述第二训练样本集包括相机在第二场景中的多个拍摄位置分别采用多种拍摄姿态对所述第二场景拍摄得到的多个图像，所述第二训练样本集中的图像标注有姿态标签，所述第二场景与所述目标场景的场景类型相同，所述第二场景中的多个拍摄位置与所述目标场景中的多个拍摄位置对应。6.根据权利要求1至4任一所述的方法，其特征在于，所述方法还包括：
所述图像处理设备根据所述目标相机的相机姿态，确定所述目标相机的拍摄姿态。7.根据权利要求1至6任一所述的方法，其特征在于，所述目标场景中设置有桌子，所述方法还包括：所述图像处理设备基于所述第一图像，确定所述桌子在所述第一图像中的成像位置和成像形状；所述图像处理设备根据所述桌子在所述第一图像中的成像位置和成像形状，在所述图像背景上叠加桌子图像；所述图像处理设备显示叠加有所述桌子图像的图像背景以及桌子调节控件，所述桌子调节控件用于调节所述桌子图像的位置和/或大小；响应于对所述桌子调节控件的第一操控指令，所述图像处理设备根据所述第一操控指令调节所述桌子图像。8.根据权利要求1至6任一所述的方法，其特征在于，所述目标场景中设置有桌子，所述目标广角图片包括广角背景图像和桌子图像，所述桌子图像叠加在所述广角背景图像上，所述方法还包括：所述图像处理设备显示所述图像背景以及桌子调节控件，所述桌子调节控件用于调节所述桌子图像的位置和/或大小；响应于对所述桌子调节控件的第一操控指令，所述图像处理设备根据所述第一操控指令调节所述桌子图像。9.根据权利要求1至8任一所述的方法，其特征在于，所述方法还包括：所述图像处理设备显示所述图像背景以及背景调节控件，所述背景调节控件用于调节所述图像背景；响应于对所述背景调节控件的第二操控指令，所述图像处理设备根据所述第二操控指令调节所述图像背景。10.根据权利要求1至9任一所述的方法，其特征在于，所述方法还包括：所述图像处理设备获取第二图像中的前景成像，所述第二图像由所述目标相机采集得到；所述图像处理设备对所述前景成像以及所述图像背景进行融合，得到第三图像。11.一种图像处理设备，其特征在于，包括：第一确定模块，用于根据部署在目标场景中的目标相机对所述目标场景拍摄得到的第一图像，确定...

【专利技术属性】
技术研发人员：王敏波，陈显义，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：