一种数据处理方法及相关设备技术

本申请实施例公开了一种数据处理方法及相关设备。涉及人工智能领域，具体涉及计算机视觉领域。该方法包括：获取第一图像以及第二图像；获取第一图像与第二图像之间的相对位姿；基于第一图像、第二图像以及相对位姿，生成第三图像，第三图像的视角在第一视角与第二视角之间。本申请能够通过已有的两个视角图像以及相对位姿合成中间视角的图像，提升输出效果的精细程度。的精细程度。的精细程度。

【技术实现步骤摘要】
一种数据处理方法及相关设备


[0001]本申请实施例涉及通信领域，尤其涉及一种数据处理方法及相关设备。

技术介绍

[0002]全景精彩瞬间是一种利用计算机视觉技术来实现强化的慢镜头、时间暂停的特效，该技术被应用于电影电视(如：黑客帝国中的子弹时间)、体育赛事直播(如：Intel TrueView)等领域。
[0003]目前，获取全景精彩瞬间的方式是：提前挑选好场地(如：篮球场)，并在场地周围的固定位置设置多个高清摄像机，利用大量昂贵的多个高清摄像机来同步聚焦一个场景。再利用3D建模的方法重新创建等体积的3D人物图像(如：篮球运动员)。对场景以及3D人物图像进行渲染，得到全景精彩瞬间。使得观众体验到了传统直播无法带来的震撼及身临其境的感觉。
[0004]然而，上述方式中还存在一定问题，在观众体验全景精彩瞬间时，如何使得观众在图像与图像之间过渡的地方感觉平缓。

技术实现思路

[0005]本申请实施例提供了一种数据处理方法及相关设备。可以用于生成中间视角的图像。
[0006]本申请实施例第一方面提供了一种数据处本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，包括：获取第一图像以及第二图像，所述第一图像为第一视角下采集的图像，所述第二图像为第二视角下采集的图像，所述第一图像的采集时刻与所述第二图像的采集时刻相同；获取所述第一图像与所述第二图像之间的相对位姿；基于所述第一图像、所述第二图像以及所述相对位姿，生成第三图像，所述第三图像的视角在所述第一视角与所述第二视角之间。2.根据权利要求1所述的方法，其特征在于，所述相对位姿包括第一相对位姿以及第二相对位姿，所述第一相对位姿为所述第一图像相对于所述第二图像的位姿，所述第二相对位姿为所述第二图像相对于所述第一图像的位姿；所述基于所述第一图像、所述第二图像以及所述相对位姿，生成第三图像，包括：将所述第一图像以及所述第二图像输入训练好的光流计算网络进行光流计算，得到初始光流图；通过前置图像扭曲forwad warping方法处理所述第一图像以及所述初始光流图得到第一目标光流图像；通过forwad warping方法处理所述第二图像以及所述初始光流图得到第二目标光流图像；通过图片图像扭曲image warping方法处理所述第一图像以及所述第一相对位姿得到第一扭曲图像；通过image warping方法处理所述第二图像以及所述第二相对位姿得到第二扭曲图像；将所述第一目标光流图像、所述第一扭曲图像、所述第二目标光流图像、所述第二扭曲图像输入训练好的图像修复网络进行图像修复，得到所述第三图像。3.根据权利要求2所述的方法，其特征在于，所述训练好的光流计算网络以及所述训练好的图像修复网络是通过以第一训练图像以及第二训练图像作为所述光流计算网络的输入，以损失函数的值小于第二阈值为目标对光流计算网络以及图像修复网络进行联合训练得到；所述损失函数用于指示图像修复网络输出的图像与第三目标图像之间的差异，所述第三目标图像为在第一目标图像对应第一目标视角和第二目标图像对应第二目标视角之间的视角下采集的图像。4.根据权利要求1至3中任一项所述的方法，所述相对位姿包括变换矩阵，所述变换矩阵用于描述所述第一图像与所述第二图像之间像素点的关联关系，所述第一相对位姿包括第一变换矩阵，所述第一变换矩阵为所述第一图像相对于所述第二图像的矩阵，所述第二相对位姿包括第二变换矩阵，所述第二变换矩阵为所述第二图像相对于所述第一图像的矩阵。5.根据权利要求1至4中任一项所述的方法，其特征在于，所述第一图像包括目标人物与第一背景图像，所述第二图像包括所述目标人物与第二背景图像。6.根据权利要求5所述的方法，其特征在于，所述方法还包括：拼接所述第一背景图像以及所述第二背景图像，得到目标背景图像；融合所述第三图像以及所述目标背景图像，得到目标图像。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：融合所述第一图像以及所述目标背景图像，得到第一目标图像；融合所述第二图像以及所述目标背景图像，得到第二目标图像；压缩所述第一目标图像、所述目标图像以及所述第二目标图像得到目标视频。8.根据权利要求7所述的方法，其特征在于，所述方法还包括：向第一拍摄设备发送所述目标视频，所述第一拍摄设备为采集所述第一图像的设备。9.一种数据处理装置，其特征在于，包括：获取单元，用于获取第一图像以及第二图像，所述第一图像为第一视角下采集的图像，所述第二图像为第二视角下采集的图像，所述第一图像的采集时刻与所述第二图像的采集时刻相同；所述获取单元，还用于获取所述第一图像与所述第二图像之间的相对位姿；生成单元，用于基于所述第一图像、所述第二图像以及所述相对位姿，生成第三图像，...

【专利技术属性】
技术研发人员：王波，张梦晗，王海涛，李江，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：