视频图像矫正方法及装置、计算机可读介质和电子设备制造方法及图纸

本公开提供一种视频图像矫正方法及装置、计算机可读介质和电子设备，涉及视频防抖技术领域。该方法包括：获取以当前相机姿态拍摄的当前视频图像，并获取所述当前相机姿态对应的当前重力向量；基于所述当前重力向量确定水平相机姿态对应的水平重力向量；根据所述当前重力向量和所述水平重力向量确定从所述当前相机姿态转换到所述水平相机姿态的旋转轴角关系；通过所述旋转轴角关系对所述当前视频图像进行水平矫正，得到水平矫正后的当前视频图像。本公开能够实现图像内容的水平线矫正，提高水平线矫正结果的准确性，适用范围广，计算量小，能够适用于实时处理系统。能够适用于实时处理系统。能够适用于实时处理系统。

【技术实现步骤摘要】
视频图像矫正方法及装置、计算机可读介质和电子设备


[0001]本公开涉及视频防抖
，具体涉及一种视频图像矫正方法、视频图像矫正装置、计算机可读介质和电子设备。

技术介绍

[0002]随着科学技术的飞速发展，人们越来越喜欢通过智能手机上的相机记录生活，视频防抖技术也越来越得到重视，如电子防抖技术(Electric Image Stabilization，EIS)、光学防抖技术(Optical image stabilization，OIS)已经是比较成熟的视频防抖技术。但是，视频防抖虽然可以一定程度的减少视频画面的抖动现象，但却无法解决视频画面倾斜的问题。
[0003]目前，相关技术方案中，要么无法实现视频图像的水平线矫正，要么只能对车牌图像等具有较明显的关键特征点的图像进行水平矫正，应用场景较为单一，适用范围小，并且这种通过图像内容来估算水平方向的方式，较依赖图像内容的质量，不同的光照强度、光照颜色、图像清晰度都会对最终的估算结果有影响，水平矫正结果的准确度低且鲁棒性差。

技术实现思路

[0004]本公开的目的在于提供一种视频图像矫正方法、视频图像矫正装置、计算机可读介质和电子设备，进而至少在一定程度上实现对任意场景下的视频图像的水平线矫正，适用范围广，提高水平矫正结果的准确性以及鲁棒性。
[0005]根据本公开的第一方面，提供一种视频图像矫正方法，包括：
[0006]获取以当前相机姿态拍摄的当前视频图像，并获取所述当前相机姿态对应的当前重力向量；
[0007]基于所述当前重力向量确定水平相机姿态对应的水平重力向量；
[0008]根据所述当前重力向量和所述水平重力向量确定从所述当前相机姿态转换到所述水平相机姿态的旋转轴角关系；
[0009]通过所述旋转轴角关系对所述当前视频图像进行水平矫正，得到水平矫正后的当前视频图像。
[0010]根据本公开的第二方面，提供一种视频图像矫正装置，包括：
[0011]视频图像获取模块，用于获取以当前相机姿态拍摄的当前视频图像，并获取所述当前相机姿态对应的当前重力向量；
[0012]重力向量确定模块，用于基于所述当前重力向量确定水平相机姿态对应的水平重力向量；
[0013]旋转轴角关系确定模块，用于根据所述当前重力向量和所述水平重力向量确定从所述当前相机姿态转换到所述水平相机姿态的旋转轴角关系；
[0014]水平矫正模块，用于通过所述旋转轴角关系对所述当前视频图像进行水平矫正，得到水平矫正后的当前视频图像。
[0015]根据本公开的第三方面，提供一种计算机可读介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述的方法。
[0016]根据本公开的第四方面，提供一种电子设备，其特征在于，包括：
[0017]处理器；以及
[0018]存储器，用于存储一个或多个程序，当一个或多个程序被一个或多个处理器执行时，使得一个或多个处理器实现上述的方法。
[0019]本公开的一种实施例所提供的视频图像矫正方法，可以获取以当前相机姿态拍摄的当前视频图像，并获取当前相机姿态对应的当前重力向量，然后基于当前重力向量确定水平相机姿态对应的水平重力向量，进而可以根据当前重力向量和水平重力向量确定从当前相机姿态转换到水平相机姿态的旋转轴角关系，通过旋转轴角关系对当前视频图像进行水平线矫正，得到水平矫正后的当前视频图像。一方面，根据当前相机姿态对应的当前重力向量以及水平重力向量确定旋转轴角关系，通过旋转轴角关系对当前视频图像进行水平线矫正，相比于通过图像内容中的关键点确定水平方向并水平矫正的方案，重力传感器检测到的当前重力向量的精度较高，有效提升水平线矫正结果的准确性，同时，水平线矫正结果仅与当前重力向量相关联，没有其他误差数据的干扰，保证水平线矫正结果的鲁棒性；另一方面，通过检测到的当前重力向量实现对当前视频图像的水平线矫正，能够应用于各种类型的场景中，适用范围广，并且相比于根据图像内容计算水平方向的方式，时间复杂度低，可以较好地适配实时处理系统。
[0020]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
[0021]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
[0022]图1示出了可以应用本公开实施例的一种示例性系统架构的示意图；
[0023]图2示出了可以应用本公开实施例的一种电子设备的示意图；
[0024]图3示意性示出本公开示例性实施例中一种相机运动坐标轴的示意图；
[0025]图4示意性示出本公开示例性实施例中一种视频图像矫正方法的流程示意图；
[0026]图5示意性示出本公开示例性实施例中一种确定最大可矫正角度的流程示意图；
[0027]图6示意性示出本公开示例性实施例中一种确定最大可矫正角度的原理示意图；
[0028]图7示意性示出本公开示例性实施例中一种确定旋转轴角关系的流程示意图；
[0029]图8示意性示出本公开示例性实施例中另一种确定旋转轴角关系的流程示意图；
[0030]图9示意性示出本公开示例性实施例中一种对当前视频图像进行水平线矫正的流程示意图；
[0031]图10示意性示出本公开示例性实施例中一种需要水平线矫正的视频图像的示意图；
[0032]图11示意性示出本公开示例性实施例中一种实现当前视频图像进行水平线矫正
的原理示意图；
[0033]图12示意性示出本公开示例性实施例中一种对当前视频图像进行水平矫正输出的流程示意图；
[0034]图13示意性示出本公开示例性实施例中视频图像矫正装置的组成示意图。
具体实施方式
[0035]现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。
[0036]此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
[0037]图1示出了可以应用本公开实施例的一种视频图像矫正方法及装置的示例性应用环境的系统架构的示意图。
[0038]如图1所示，系统架构100可以包本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频图像矫正方法，其特征在于，包括：获取以当前相机姿态拍摄的当前视频图像，并获取所述当前相机姿态对应的当前重力向量；基于所述当前重力向量确定水平相机姿态对应的水平重力向量；根据所述当前重力向量和所述水平重力向量确定从所述当前相机姿态转换到所述水平相机姿态的旋转轴角关系；通过所述旋转轴角关系对所述当前视频图像进行水平矫正，得到水平矫正后的当前视频图像。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：根据所述当前视频图像的图像尺寸以及预设的裁切比例确定输出图像尺寸；基于所述输出图像尺寸对所述水平矫正后的当前视频图像进行中心裁切并输出。3.根据权利要求2所述的方法，其特征在于，所述方法还包括：根据所述当前视频图像的图像尺寸以及所述输出图像尺寸计算所述当前视频图像对应的最大可矫正角度。4.根据权利要求3所述的方法，其特征在于，根据所述当前视频图像的图像尺寸以及所述输出图像尺寸计算所述当前视频图像对应的最大可矫正角度，包括：根据所述当前视频图像的图像尺寸以及所述输出图像尺寸，计算无水平矫正的状态下，所述当前视频图像的下边界与所述当前视频图像中待裁切区域的对角线构成的第一夹角；根据所述当前视频图像的图像尺寸以及所述输出图像尺寸，计算水平矫正处于最大矫正角度的状态下，所述当前视频图像的下边界与所述当前视频图像中待裁切区域的对角线构成的第二夹角；将所述第一夹角与所述第二夹角的差值作为所述当前视频图像对应的最大可矫正角度。5.根据权利要求1所述的方法，其特征在于，所述旋转轴角关系包括旋转角度和旋转轴，所述根据所述当前重力向量和所述水平重力向量确定从所述当前相机姿态转换到所述水平相机姿态的旋转轴角关系，包括：根据所述当前重力向量以及所述水平重力向量计算倾斜角度；若所述倾斜角度小于或者等于最大可矫正角度，则将所述倾斜角度作为从所述当前相机姿态转换到所述水平相机姿态的旋转角度。对所述当前重力向量以及所述水平重力向量进行叉乘计算，得到从所...

【专利技术属性】
技术研发人员：胡大为，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：