一种全景图像的处理方法、装置、电子设备及存储介质制造方法及图纸

本公开提出了一种全景图像的处理方法、装置、电子设备及存储介质，其中，所述方法包括：获取第一图像采集装置拍摄的第一图像和第二图像采集装置拍摄的第二图像，并将所述第一图像和所述第二图像分别转换为第一全景图像和第二全景图像；确定所述第一全景图像和所述第二全景图像之间的视差信息，并生成所述视差信息对应的深度信息；基于所述深度信息，将所述第一图像和所述第二图像映射至同一设备空间中，并根据所述同一设备空间中的映射结果，生成所述第一图像和所述第二图像拼接后的全景图像。本公开一个或者多个实施方式提供的技术方案，能够在不丢失图像的情况下，还能够消除图像重影。图像重影。图像重影。

【技术实现步骤摘要】
一种全景图像的处理方法、装置、电子设备及存储介质


[0001]本公开涉及图像处理
，具体涉及一种全景图像的处理方法、装置、电子设备及存储介质。

技术介绍

[0002]目前在制作范围较广的全景图像时，可以采用多个图像采集装置分别拍摄各自视场范围内的图像，然后再将各个视场范围内的图像拼接为范围较广的全景图像。
[0003]由于图像采集装置的视场范围通常会有重叠，在拼接得到全景图像中，在视场范围的交界处往往会存在图像的重影。为了解决该问题，相关技术可以从图像中裁剪出部分图像，然后再将部分图像进行拼接。这种方法虽然可以消除图像的重影，但也会导致部分视角的图像丢失。
[0004]鉴于此，目前需要一种更加完善的全景图像的拼接方法，在不丢失图像的情况下，还能够消除图像重影。

技术实现思路

[0005]有鉴于此，本公开一个或者多个实施方式提供了一种全景图像的处理方法、装置、电子设备及存储介质，能够在不丢失图像的情况下，还能够消除图像重影。
[0006]本公开一方面提供了一种全景图像的处理方法，所述方法包括：获取第一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种全景图像的处理方法，其特征在于，所述方法包括：获取第一图像采集装置拍摄的第一图像和第二图像采集装置拍摄的第二图像，并将所述第一图像和所述第二图像分别转换为第一全景图像和第二全景图像；确定所述第一全景图像和所述第二全景图像之间的视差信息，并生成所述视差信息对应的深度信息；基于所述深度信息，将所述第一图像和所述第二图像映射至同一设备空间中，并根据所述同一设备空间中的映射结果，生成所述第一图像和所述第二图像拼接后的全景图像。2.根据权利要求1所述的方法，其特征在于，确定所述第一全景图像和所述第二全景图像之间的视差信息包括：对所述第一全景图像和所述第二全景图像进行极线校正，针对极线校正后的两幅全景图像，利用预设立体匹配网络估算所述两幅全景图像之间的视差，以生成所述第一全景图像和所述第二全景图像之间的视差信息。3.根据权利要求1所述的方法，其特征在于，将所述第一图像和所述第二图像映射至同一设备空间中包括：将所述第一图像中的像素点逆投影至所述第一图像采集装置的第一相机坐标系中，以及将所述第二图像中的像素点逆投影至所述第二图像采集装置的第二相机坐标系中；确定所述第一相机坐标系与所述第二相机坐标系之间的旋转平移信息，并基于所述深度信息和所述旋转平移信息，生成所述第一相机坐标系与所述第二相机坐标系之间的坐标变换矩阵；通过所述坐标变换矩阵，将所述第一相机坐标系和所述第二相机坐标系中的逆投影结果映射至同一相机坐标系下。4.根据权利要求1或3所述的方法，其特征在于，生成所述第一图像和所述第二图像拼接后的全景图像包括：将所述同一设备空间中的映射结果投影至虚拟单位球的表面上，并将所述虚拟单位球的表面沿指定经线展开得到的图像作为拼接后的全景图像。5.根据权利要求1所述的方法，其特征在于，在生成所述视差信息对应的深度信息之后，所述方法还包括：统计相邻多帧图像的深度信息，并基于统计结果判断是否生成平滑处理后的深度信息；若生成平滑处理后的深度信息，利用所述平滑处理后的深度信息替换原始的深度信息。6.根据权利要求5所述的方法，其特征在于，基于统计结果判断是否生成平滑处理后的深度信息包括：针对所述相邻多帧图像中的指定位置处的像素点，从...

【专利技术属性】
技术研发人员：张东波，田明哲，焦少慧，
申请(专利权)人：抖音视界有限公司，
类型：发明
国别省市：