一种图像校正方法、装置、电子设备及存储介质制造方法及图纸

本公开实施例公开了一种图像校正方法、装置、电子设备及存储介质。该方法可包括：针对多台拍摄设备中的每台拍摄设备，获取拍摄设备拍摄的目标图像；基于与拍摄设备对应的校正参数，对目标图像进行校正；其中，将包含虚拟中心的旋转轴上的至少两个轴点投影到目标图像上后得到投影轴的情况下，校正后的各目标图像上的投影轴相一致，虚拟中心位于多台拍摄设备对应的虚拟平面上，并且与多台拍摄设备的物理光心对应。本公开实施例的技术方案，可以消除相邻视角变换带来的图像抖动现象。邻视角变换带来的图像抖动现象。邻视角变换带来的图像抖动现象。

【技术实现步骤摘要】
一种图像校正方法、装置、电子设备及存储介质


[0001]本公开实施例涉及图像处理
，尤其涉及一种图像校正方法、装置、电子设备及存储介质。

技术介绍

[0002]自由视角视频是时下热门的一种视频形式，其是通过向用户提供交互选择观看角度的功能，赋予了固定二维(two dimensional，2D)视频“移步换景”的观看体验，从而给用户带来了强烈的立体冲击。
[0003]自由视角视频的制作过程需要多角度多相机拍摄的环境，考虑到视角转动时图像(如视频帧)的顺滑连续性，这对相机部署(如相机的摆放位置和俯仰朝向等)提出了较高的要求。目前，主要是通过人工部署相机来满足上述要求。
[0004]但是，人工部署耗时耗力且精度较低(即无法真正满足上述要求)，这使得相邻视角变换时，图像会出现明显抖动现象，如上下视差、左右视差以及图像缩放等，从而影响了用户的视频观看体验。

技术实现思路

[0005]本公开实施例提供了一种图像校正方法、装置、电子设备及存储介质，以消除相邻视角变换带来的图像抖动现象。
[0006]第一方面，本公开实施例提供了一种图像校正方法，可以包括：
[0007]针对多台拍摄设备中的每台拍摄设备，获取拍摄设备拍摄的目标图像；
[0008]基于与拍摄设备对应的校正参数，对目标图像进行校正；
[0009]其中，在将包含虚拟中心的旋转轴上的至少两个轴点投影到目标图像上后得到投影轴的情况下，校正后的各目标图像上的投影轴相一致，虚拟中心位于多台拍摄设备对应的虚拟平面上，并且与多台拍摄设备的物理光心对应。
[0010]第二方面，本公开实施例还提供了一种图像校正装置，可以包括：
[0011]目标图像获取模块，用于针对多台拍摄设备中的每台拍摄设备，获取拍摄设备拍摄的目标图像；
[0012]目标图像校正模块，用于基于与拍摄设备相对应的校正参数，对目标图像进行校正；
[0013]其中，在将包含虚拟中心的旋转轴上的至少两个轴点投影到目标图像上后得到投影轴的情况下，校正后的各目标图像上的投影轴相一致，虚拟中心位于多台拍摄设备对应的虚拟平面上，并且与多台拍摄设备的物理光心对应。
[0014]第三方面，本公开实施例还提供了一种电子设备，可以包括：
[0015]一个或多个处理器；
[0016]存储器，用于存储一个或多个程序，
[0017]当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现本公开
任意实施例所提供的图像校正方法。
[0018]第四方面，本公开实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时可实现本公开任意实施例所提供的图像校正方法。
[0019]本公开实施例的技术方案，针对多台拍摄设备中的每台拍摄设备，通过该拍摄设备对应的校正参数，对该拍摄设备拍摄的目标图像进行校正。上述技术方案，针对多台拍摄设备对应的虚拟平面上的与多台拍摄设备的物理光心对应的虚拟中心，在将包含虚拟中心的旋转轴上的至少两个轴点投影到目标图像上后得到投影轴的情况下，校正后的各目标图像上的投影轴相一致，这说明校正后的各目标图像对应于同一旋转轴，即它们上的空间点均已由各自的拍摄设备坐标系转换到定轴坐标系下，因此校正后的各目标图像不会再因为视角变换而存在抖动现象，从而消除了相邻视角变换带来的图像抖动现象，并且因为可在正常拍摄过程中同步校正图像，降低了对于多台拍摄设备的搭建精度的要求。
附图说明
[0020]结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。
[0021]图1是本公开实施例中的一种图像校正方法的流程图；
[0022]图2是本公开实施例中的另一种图像校正方法的流程图；
[0023]图3是本公开实施例中的另一种图像校正方法中可选示例的示意图；
[0024]图4是本公开实施例中的再一种图像校正方法的流程图；
[0025]图5是本公开实施例中的再一种图像校正方法中可选示例的示意图；
[0026]图6是本公开实施例中的一种图像校正装置的结构框图；
[0027]图7是本公开实施例中的一种电子设备的结构示意图。
具体实施方式
[0028]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0029]应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0030]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0031]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0032]需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域
技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0033]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0034]图1是本公开实施例中所提供的一种图像校正方法的流程图。本实施例可适用于图像校正的情况，尤其适用于对多台拍摄设备拍摄的目标图像进行校正的情况。该方法可以由本公开实施例提供的图像校正装置来执行，该装置可以由软件和/或硬件的方式实现，该装置可以集成在电子设备上，该电子设备可以是各种终端设备或服务器。
[0035]参见图1，本公开实施例的方法具体包括如下步骤：
[0036]S110、针对于多台拍摄设备中的每台拍摄设备，获取拍摄设备拍摄的目标图像。
[0037]其中，多台拍摄设备可以是多台具有拍摄功能的电子设备，如相机、摄像机或摄像头等。在实际应用中，可选的，这些拍摄设备可被用于自由视角拍摄或是光场拍摄等，在此未做具体限定；再可选的，这些拍摄设备可以呈圆环形环绕部署在被拍摄对象的周围，以便对该被拍摄对象进行视频或是图像的同步采集，从而给用户带来平滑的空间视频或空间图像的观看体验。目标图像可以是多台拍摄设备中的任一台拍摄设备拍摄(即采集)的图像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像校正方法，其特征在于，包括：针对多台拍摄设备中的每台所述拍摄设备，获取所述拍摄设备拍摄的目标图像；基于与所述拍摄设备对应的校正参数，对所述目标图像进行校正；其中，在将包含虚拟中心的旋转轴上的至少两个轴点投影到所述目标图像上后得到投影轴的情况下，校正后的各所述目标图像上的所述投影轴相一致，所述虚拟中心位于所述多台拍摄设备对应的虚拟平面上，并且与所述多台拍摄设备的物理光心对应。2.根据权利要求1所述的方法，其特征在于，所述校正参数通过如下步骤预先确定：确定所述虚拟平面，并得到所述虚拟平面上的所述虚拟中心；确定包含所述虚拟中心的旋转轴，并将所述旋转轴上的所述至少两个轴点投影到每台所述拍摄设备分别拍摄的样本图像上，得到样本轴；将各所述样本图像中由所述多台拍摄设备中的主拍摄设备拍摄的所述样本图像作为主样本图像、以及辅拍摄设备拍摄的所述样本图像作为辅样本图像；针对每个所述辅样本图像，对所述辅样本图像进行校正，以使校正后的所述辅样本图像上的所述样本轴与所述主样本图像上的所述样本轴相一致；根据校正结果得到各所述拍摄设备的所述校正参数。3.根据权利要求2所述的方法，其特征在于，还包括：分别确定各所述拍摄设备的位姿参数；所述确定所述虚拟平面，并得到所述虚拟平面上的所述虚拟中心，包括：根据各所述物理光心的光心位置拟合得到平面方程，并基于所述平面方程得到所述虚拟平面；针对每个所述拍摄设备，根据所述平面方程和所述拍摄设备的位姿参数，将与所述拍摄设备对应的所述光心位置投影到所述虚拟平面上，得到投影位置，以在得到各所述投影位置后，通过对各所述投影位置进行拟合得到虚拟位置，并基于所述虚拟位置得到所述虚拟中心。4.根据权利要求3所述的方法，其特征在于，所述分别确定各所述拍摄设备的位姿参数，包括：分别获取各所述拍摄设备拍摄的样本图像序列，确定各所述样本图像序列之间的特征匹配关系；根据所述特征匹配关系分别得到各所述拍摄设备的位姿参数。5.根据权利要求2所述的方法，其特征在于，所述确定包含所述虚拟中心的旋转轴，包括：获取所述虚拟平面的平面方程，并对所述平面方程进行归一化处理，得到所述虚拟平面的平面法向量；将包含所述虚拟中心的所述平面法向量所在的轴，作为旋转轴。6.根据权利要求2所述的方法，其特征在于，所述样本轴是通过样本线段进行表示的，所述对所述辅样本图像进行校正，以使校正后的所述辅样本图像上的所述样本轴与所述主样本图像上的所述样本轴相一致，包括：对所述辅样本图像执行校正操作，以使校正后的所述辅样本图像上的所述样本线段与所述主样本图像上的所述样本线段相平行并且长度相同，而且所述校正后的所述辅样本图
像上的所述样本线段在所述校正后的所述辅样本图像上的相对位置、与所述主样本图像上的所述样本线段在所述主样本图像上的相对位置相同，其中，所述校正操作包括旋转操作、缩放操作和平移...

【专利技术属性】
技术研发人员：陈誉中，焦少慧，吴垚垚，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：