一种全景图像的处理方法及装置制造方法及图纸

本发明专利技术提供了一种全景图像的处理方法及装置，用以解决现有技术中通过360度全景摄像机获取的全景图像中存在拍摄者的问题。所述方法包括：确定包括至少两张待处理的全景图像的输入集合；待处理的全景图像中均包含目标对象；从输入集合中确定目标图像和与该目标图像对应的源图像；根据目标对象在目标图像中的相对位置，从源图像中提取该相对位置对应的图像，并利用提取得到的图像替换目标图像中的目标对象，以生成处理后的目标图像；根据处理后的目标图像，确定输出集合。

【技术实现步骤摘要】
一种全景图像的处理方法及装置
本专利技术涉及图像处理
，尤其涉及一种全景图像的处理方法及装置。
技术介绍
虚拟现实(VirtualReality，VR)技术是一种可以创建和体验虚拟世界的计算机仿真系统，其中，虚拟现实中的虚拟场景主要通过头戴式显示设备中显示全景视频或全景图像来实现，从而实现用户与虚拟场景之间的交互。其中，所谓的全景图像为水平360度，垂直180度即全视角360*180的图像。在观察全景图像时，观察者位于球的中心，通过移动鼠标、键盘或者头戴式显示设备，可以观察到任一角度的图像，从而使得观察者完全融入到全景图像所营造的虚拟场景中。现阶段的用于营造虚拟场景的全景图像为，通过设置有多个不同朝向的镜头的360度全景摄像机拍摄得到的。一般情况下，拍摄者手持该摄像机，触动快门，再将不同朝向的镜头拍摄得到的图像进行拼接，得到最终的全景图像。但这种拍摄方式拼接得到的全景图像中必然存在有拍摄者，将给体验虚拟场景的用户带来困惑，特别是在观看全景视频时，在某一方位总会有拍摄者在虚拟场景中。综上所述，如何得到不存在目标对象(如拍摄者)的全景图像，成为全景图像处理领域亟待解决的问题。专利技本文档来自技高网...

【技术保护点】
1.一种全景图像的处理方法，其特征在于，该方法包括：确定包括至少两张待处理的全景图像的输入集合；其中，所述待处理的全景图像中均包含目标对象；从所述输入集合中确定目标图像和与所述目标图像对应的源图像；根据所述目标对象在所述目标图像中的相对位置，从所述源图像中提取所述相对位置对应的图像，并利用提取得到的图像替换所述目标图像中的目标对象，以生成处理后的全景图像；根据处理后的全景图像，确定输出集合。

【技术特征摘要】
1.一种全景图像的处理方法，其特征在于，该方法包括：确定包括至少两张待处理的全景图像的输入集合；其中，所述待处理的全景图像中均包含目标对象；从所述输入集合中确定目标图像和与所述目标图像对应的源图像；根据所述目标对象在所述目标图像中的相对位置，从所述源图像中提取所述相对位置对应的图像，并利用提取得到的图像替换所述目标图像中的目标对象，以生成处理后的全景图像；根据处理后的全景图像，确定输出集合。2.根据权利要求1所述的处理方法，其特征在于，从所述输入集合中确定目标图像和与所述目标图像对应的源图像，包括：检测所述待处理的全景图像中目标对象所处的区域；根据所述输入集合中任一全景图像的背景区域与另一全景图像的背景区域的相似度和所述全景图像中目标对象所处的区域，确定目标图像和与所述目标图像对应的源图像，所述背景区域为所述全景图像中目标对象所处的区域以外的其他区域。3.根据权利要求2所述的处理方法，其特征在于，若所述目标对象为拍摄所述全景图像的拍摄者，则检测所述待处理的全景图像中目标对象所处的区域，包括：检测所述待处理的全景图像中人体所处的区域；判断检测到的人体所处的区域的占比是否满足拍摄者占比阈值；若是，则确定所述全景图像中的拍摄者区域。4.根据权利要求2所述的处理方法，其特征在于，确定目标图像和与所述目标图像对应的源图像，包括：根据用户触发的指令，从所述输入集合中选取该指令对应的全景图像为目标图像；从所述输入集合中选取与所述目标图像中目标对象所处的区域不重叠，且与所述目标图像的背景区域的相似度满足相似度阈值的全景图像；并确定选取的全景图像为源图像。5.根据权利要求2所述的处理方法，其特征在于，确定目标图像和与所述目标图像对应的源图像，包括：选取所述全景图像中目标对象所处的区域的占比最小的全景图像为目标图像；若所述输入集合存在与所述目标图像中目标对象所处的区域不重叠，且与所述目标图像的背景区域的相似度满足相似度阈值的全景图像，则确定符合条件的全景图像为源图像；否则，从所述输入集合中，重新选取目标图像，直到从所述输入集合中找到与重新选取的目标图像对应的源图像为止。6.根据权利要求4或5所述的处理方法，其特征在于，若所述输入集合中包括多个与所述目标图像中目标对象所处的区域不重叠的且与所述目标图像的背景区域的相似度满足相似度阈值的全景图像，则确定选取的全景图像为源图像，包括：确定与所述目标图像的背景区域的相似度最高的全景图像为源图像。7.根据权利要求1所述的处理方法，其特征在于，利用提取得到的图像替换所述目标图像中的目标对象，包括：提取所述目标图像的背景区域内的特征点，并与所述源图像中的特征点进行匹配，根据匹配结果确定变换矩阵；根据所述变换矩阵对提取得到的图像进行处理，并利用处理后的图像替换所述目标图像中的目标对象。8.一种全景图像的处理装置，其特征在于，该装置包括：输入模块，用于确定包括至少两张待处理的全景图像的输入集合；其中，所述待处理的全景图像中均包含目标对象；选择模块，用于从所述输入集合中确定目标图像和与所述目标图像对应的...

【专利技术属性】
技术研发人员：路光明，
申请(专利权)人：微幻科技北京有限公司，
类型：发明
国别省市：北京,11