本公开提供一种风格化对象的驱动方法、风格化对象的驱动装置、计算机可读介质和电子设备，涉及图像处理技术领域。该方法包括：在包含目标对象的视频中截取目标对象为中性表情的中性目标对象，并基于中性目标对象计算特征形变参数；基于中性预设对象、特征形变参数和第一形变参数重建风格化中性目标对象；基于中性预设对象、特征形变参数和第二形变参数生成风格化目标表情基；基于视频和风格化目标表情基对风格化中性目标对象进行驱动。本公开可以避免需要对不同风格化对象进行驱动时，需要设计师专门进行表情基设计的步骤，降低了设计成本；同时，可以实现“千人千面”的风格化对象的驱动，提升了驱动效果，增强了可拓展性和可移植性。植性。植性。
【技术实现步骤摘要】
风格化对象的驱动方法及装置、介质和电子设备
[0001]本公开涉及图像处理
，具体涉及一种风格化对象的驱动方法、风格化对象的驱动装置、计算机可读介质和电子设备。
技术介绍
[0002]人脸的三维建模是一项十分重要的技术，在电影、游戏、虚拟现实、网络社交、人脸识别和追踪等场景中有着广泛应用。表情驱动是三维人脸重建的一个应用方向，通过设计参数化人脸模型、融合变形表情基和人脸重建等技术建立三维人脸模型。在完成三维人脸模型重建后，通常需要通过解算每帧图像的标签参数和位姿参数，以实时驱动人脸模型，使得三维人脸模型的形状、表情和位姿与输入图像一致。
[0003]然而，在相关驱动技术中，仅能进行真人人脸的表情驱动，或者固定卡通人脸等风格化人脸的驱动。如果需要对不同的风格化人脸进行驱动，则需要设计师专门针对每个风格化人脸进行融合变形表情基的设计，提高了设计成本；同时，若需新增风格化人脸，还行重新设计融合变形表情基，可拓展性和可移植性差。
技术实现思路
[0004]本公开的目的在于提供一种风格化对象方法、风格化对象装置、计算机可读介质和电子设备，进而至少在一定程度上降低设计成本，提高可拓展性和可移植性。
[0005]根据本公开的第一方面，提供一种风格化对象的驱动方法，包括：在包含目标对象的视频中截取目标对象为中性表情的中性目标对象，并基于中性目标对象计算特征形变参数；其中，特征形变参数包括将中性预设对象转换为中性目标对象的形变参数；基于中性预设对象、特征形变参数和第一形变参数重建风格化中性目标对象；其中，第一形变参数包括将中性预设对象转换为风格化中性预设对象的形变参数；基于中性预设对象、特征形变参数和第二形变参数生成风格化目标表情基；其中，第二形变参数包括将中性预设对象转换为风格化预设表情基的形变参数；基于视频和风格化目标表情基对风格化中性目标对象进行驱动。
[0006]根据本公开的第二方面，提供一种风格化对象的驱动装置，包括：参数确定模块，用于在包含目标对象的视频中截取目标对象为中性表情的中性目标对象，并基于中性目标对象计算特征形变参数；其中，特征形变参数包括将中性预设对象转换为中性目标对象的形变参数；风格化重建模块，用于基于中性预设对象、特征形变参数和第一形变参数重建风格化中性目标对象；其中，第一形变参数包括将中性预设对象转换为风格化中性预设对象的形变参数；表情基生成模块，用于基于中性预设对象、特征形变参数和第二形变参数生成风格化目标表情基；其中，第二形变参数包括将中性预设对象转换为风格化预设表情基的形变参数；对象驱动模块，用于基于视频和风格化目标表情基对风格化中性目标对象进行驱动。
[0007]根据本公开的第三方面，提供一种计算机可读介质，其上存储有计算机程序，计算
机程序被处理器执行时实现上述的方法。
[0008]根据本公开的第四方面，提供一种电子设备，其特征在于，包括：处理器；以及存储器，用于存储一个或多个程序，当一个或多个程序被一个或多个处理器执行时，使得一个或多个处理器实现上述的方法。
[0009]本公开的一种实施例所提供的风格化对象的驱动方法，通过在视频中截取的中性目标对象计算特征形变参数，然后基于中性预设对象、特征形变参数和第一形变参数重建风格化中性对象目标，基于中性预设对象、特征形变参数和第二形变参数生成风格化目标表情基，之后基于视频和风格化目标表情基对风格化中性目标对象进行驱动。本公开实施例可以基于视频中的中性目标对象，自动重建与视频中的目标对象对应的风格化中性目标对象，并自动生成与视频中的目标对象对应的风格化目标表情基，避免了需要对不同风格化对象进行驱动时，需要设计师专门进行表情基设计的步骤，降低了设计成本；同时，在与视频中的目标对象对应的风格化中性目标对象和风格化目标表情基的基础上进行驱动，可以实现“千人千面”的风格化对象的驱动，提升了驱动效果，也增强了风格化对象驱动的可拓展性和可移植性。
[0010]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
[0011]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
[0012]图1示出了可以应用本公开实施例的一种示例性系统架构的示意图；
[0013]图2示意性示出本公开示例性实施例中一种风格化对象的驱动方法的流程图；
[0014]图3示意性示出本公开示例性实施例中一种获取中性目标对象的方法的流程图；
[0015]图4示意性示出本公开示例性实施例中一种提醒用户保持中性表情的图形用户界面示意图；
[0016]图5示意性示出本公开示例性实施例中一种特征参数模型的结构示意图；
[0017]图6示意性示出本公开示例性实施例中一种计算第一形变参数的原理示意图；
[0018]图7示意性示出本公开示例性实施例中一种重建风格化中性目标对象的方法的流程图；
[0019]图8示意性示出本公开示例性实施例中一种确定第一风格化参数的原理示意图；
[0020]图9示意性示出本公开示例性实施例中的两个表情基的示意图；
[0021]图10示意性示出本公开示例性实施例中一种计算N组第二形变参数的原理示意图；
[0022]图11示意性示出本公开示例性实施例中一种生成风格化目标表情基的方法的流程图；
[0023]图12示意性示出本公开示例性实施例中一种确定第二风格化参数的原理示意图；
[0024]图13示意性示出本公开示例性实施例中一种基于视频和风格化目标表情基对风
格化中性目标对象进行驱动的方法的流程图；
[0025]图14示意性示出本公开示例性实施例中另一种风格化对象的驱动方法的流程图；
[0026]图15示意性示出本公开示例性实施例中一种重建风格化中性目标人脸方法的流程图；
[0027]图16示意性示出本公开示例性实施例中另一种生成风格化目标表情基方法的流程图；
[0028]图17示意性示出本公开示例性实施例中一种风格化中性目标人脸进行驱动方法的流程图；
[0029]图18示意性示出本公开示例性实施例中风格化对象的驱动装置的组成示意图；
[0030]图19示出了可以应用本公开实施例的一种电子设备的示意图。
具体实施方式
[0031]现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。
[0032]此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种风格化对象的驱动方法，其特征在于，包括：在包含目标对象的视频中截取所述目标对象为中性表情的中性目标对象，并基于所述中性目标对象计算特征形变参数；其中，所述特征形变参数包括将中性预设对象转换为中性目标对象的形变参数；基于所述中性预设对象、所述特征形变参数和第一形变参数重建风格化中性目标对象；其中，所述第一形变参数包括将所述中性预设对象转换为风格化中性预设对象的形变参数；基于所述中性预设对象、所述特征形变参数和第二形变参数生成风格化目标表情基；其中，所述第二形变参数包括将所述中性预设对象转换为风格化预设表情基的形变参数；基于所述视频和所述风格化目标表情基对所述风格化中性目标对象进行驱动。2.根据权利要求1所述的方法，其特征在于，所述基于所述视频和所述风格化目标表情基对所述风格化中性目标对象进行驱动，包括：对所述视频中的当前视频帧进行关键点检测，以确定所述目标对象在所述当前视频帧中的表情参数和位姿参数；根据所述表情参数、所述风格化目标表情基对所述风格化中性目标对象进行表情变换，得到所述当前视频帧对应的表情驱动结果；基于所述位姿参数对所述表情驱动结果进行位姿变换，得到所述当前视频帧对应的驱动结果。3.根据权利要求2所述的方法，其特征在于，所述根据所述表情参数、所述风格化目标表情基对所述风格化中性目标对象进行表情变换，得到所述当前视频帧对应的表情驱动结果，包括：以所述表情参数为权重，对所述风格化目标表情基和风格化中性目标对象进行加权组合，得到所述当前视频帧对应的表情驱动结果。4.根据权利要求1所述的方法，其特征在于，所述基于所述中性预设对象、所述特征形变参数和第一形变参数重建风格化中性目标对象，包括：对所述特征形变参数和所述第一形变参数进行参数组合，得到第一风格化参数；基于所述第一风格化参数对所述中性预设对象进行形变变换，得到风格化中性目标对象。5.根据权利要求1所述的方法，其特征在于，所述基于所述中性预设对象、所述特征形变参数和第二形变参数...
【专利技术属性】
技术研发人员：王顺飞，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。