用于插入图像的方法和装置制造方法及图纸

本申请实施例公开了用于插入图像的方法和装置。该方法的一具体实施方式包括：获取目标人眼图像，以及确定目标人眼图像的人眼关键点数据；基于人眼关键点数据，确定目标人眼图像的辅助关键点数据；对辅助关键点数据进行坐标变换，得到变换后辅助关键点数据；获取待插入图像，以及将待插入图像插入目标人眼图像中的、变换后辅助关键点数据和人眼关键点数据表征的位置处。该实施方式提高了向人眼图像中插入预设图像的灵活性，有助于丰富插入到人眼图像的预设图像的显示形式。

【技术实现步骤摘要】
用于插入图像的方法和装置
本申请实施例涉及计算机
，具体涉及用于插入图像的方法和装置。
技术介绍
随着图像处理技术的发展，人眼关键点检测技术也得到了广泛应用。例如人眼关键点检测技术可以应用于人眼图像的特效添加、人眼形状的判断等领域。人眼关键点指的是人眼图像中表征特定位置的点，例如表征眼角的位置的点、表征眼皮边缘的位置的点等。目前，可以利用人眼关键点在人眼图像中的位置，向人眼图像中插入一些素材图像(例如睫毛图像、眼妆图像等)。
技术实现思路
本申请实施例提出了用于插入图像的方法和装置。第一方面，本申请实施例提供了一种用于插入图像的方法，该方法包括：获取目标人眼图像，以及确定目标人眼图像的人眼关键点数据，其中，人眼关键点数据用于表征目标人眼图像中的人眼关键点在目标人眼图像中的位置；基于人眼关键点数据，确定目标人眼图像的辅助关键点数据，其中，辅助关键点数据用于表征目标人眼图像中的辅助关键点在目标人眼图像中的位置；对辅助关键点数据进行坐标变换，得到变换后辅助关键点数据；获取待插入图像，以及将待插入图像插入目标人眼图像中的、变换后辅助关键点数据和人眼关键点数据表征的位置处。在一些实施例中，在基于人眼关键点数据，确定目标人眼图像的辅助关键点数据之前，该方法还包括：获取预设的参考人眼关键点数据和参考辅助关键点数据，其中，参考人眼关键点数据用于表征预设的参考人眼图像中的人眼关键点在参考人眼图像中的位置，参考辅助关键点数据用于表征预先在参考人眼图像中设置的参考辅助关键点的位置。在一些实施例中，基于人眼关键点数据，确定目标人眼图像的辅助关键点数据，包括：基于参考辅助关键点数据和参考人眼关键点数据构建第一三角剖分网格；基于第一三角剖分网格包括的三角形的边长和内角，以及参考人眼关键点数据与目标人眼图像的人眼关键点数据之间的对应关系，确定在目标人眼图像上形成的第二三角剖分网格；从第二三角剖分网格包括的三角形的顶点中确定目标顶点，以及基于目标顶点在目标人眼图像中的位置，确定目标人眼图像的辅助关键点数据。在一些实施例中，对辅助关键点数据进行坐标变换，得到变换后辅助关键点数据，包括：对参考辅助关键点数据进行坐标变换，得到变换后参考辅助关键点数据；将参考辅助关键点数据、变换后参考辅助关键点数据和目标人眼图像的辅助关键点数据输入预设的坐标映射模型，得到目标人眼图像的变换后辅助关键点数据。在一些实施例中，对参考辅助关键点数据进行坐标变换，得到变换后参考辅助关键点数据，包括：根据目标人眼图像的人眼关键点数据确定表征目标人眼图像指示的人眼的张开程度的张开程度值；根据预设的弧度计算公式和参考辅助关键点数据包括的横坐标，确定用于表征参考辅助关键点数据的坐标的变化程度的弧度值；基于弧度值和张开程度值，确定变换后参考辅助关键点数据。在一些实施例中，坐标映射模型为基于移动最小二乘法MLS构建的模型。在一些实施例中，获取待插入图像，包括：获取预设图像；基于人眼关键点数据和变换后辅助关键点数据，对预设图像进行变形，以及将变形后的预设图像确定为待插入图像。第二方面，本申请实施例提供了一种用于插入图像的装置，该装置包括：第一获取单元，被配置成获取目标人眼图像，以及确定目标人眼图像的人眼关键点数据，其中，人眼关键点数据用于表征目标人眼图像中的人眼关键点在目标人眼图像中的位置；确定单元，被配置成基于人眼关键点数据，确定目标人眼图像的辅助关键点数据，其中，辅助关键点数据用于表征目标人眼图像中的辅助关键点在目标人眼图像中的位置；变换单元，被配置成对辅助关键点数据进行坐标变换，得到变换后辅助关键点数据；插入单元，被配置成获取待插入图像，以及将待插入图像插入目标人眼图像中的、变换后辅助关键点数据和人眼关键点数据表征的位置处。在一些实施例中，该装置还包括：第二获取单元，被配置成获取预设的参考人眼关键点数据和参考辅助关键点数据，其中，参考人眼关键点数据用于表征预设的参考人眼图像中的人眼关键点在参考人眼图像中的位置，参考辅助关键点数据用于表征预先在参考人眼图像中设置的参考辅助关键点的位置。在一些实施例中，确定单元包括：构建模块，被配置成基于参考辅助关键点数据和参考人眼关键点数据构建第一三角剖分网格；第一确定模块，被配置成基于第一三角剖分网格包括的三角形的边长和内角，以及参考人眼关键点数据与目标人眼图像的人眼关键点数据之间的对应关系，确定在目标人眼图像上形成的第二三角剖分网格；第二确定模块，被配置成从第二三角剖分网格包括的三角形的顶点中确定目标顶点，以及基于目标顶点在目标人眼图像中的位置，确定目标人眼图像的辅助关键点数据。在一些实施例中，变换单元包括：变换模块，被配置成对参考辅助关键点数据进行坐标变换，得到变换后参考辅助关键点数据；生成模块，被配置成将参考辅助关键点数据、变换后参考辅助关键点数据和目标人眼图像的辅助关键点数据输入预设的坐标映射模型，得到目标人眼图像的变换后辅助关键点数据。在一些实施例中，变换模块包括：第一确定子模块，被配置成根据目标人眼图像的人眼关键点数据确定表征目标人眼图像指示的人眼的张开程度的张开程度值；第二确定子模块，被配置成根据预设的弧度计算公式和参考辅助关键点数据包括的横坐标，确定用于表征参考辅助关键点数据的坐标的变化程度的弧度值；第三确定子模块，被配置成基于弧度值和张开程度值，确定变换后参考辅助关键点数据。在一些实施例中，坐标映射模型为基于移动最小二乘法MLS构建的模型。在一些实施例中，插入单元包括：获取模块，被配置成获取预设图像；变形模块，被配置成基于人眼关键点数据和变换后辅助关键点数据，对预设图像进行变形，以及将变形后的预设图像确定为待插入图像。第三方面，本申请实施例提供了一种电子设备，该电子设备包括：一个或多个处理器；存储装置，其上存储有一个或多个程序；当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如第一方面中任一实现方式描述的方法。第四方面，本申请实施例提供了一种计算机可读介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如第一方面中任一实现方式描述的方法。本申请实施例提供的用于插入图像的方法和装置，通过确定获取的目标人眼图像的人眼关键点数据，再基于人眼关键点数据，确定目标人眼图像的辅助关键点数据，然后对辅助关键点数据进行坐标变换，得到变换后辅助关键点数据，最后基于变换后辅助关键点数据，对预设图像进行变形，以及将变形后的预设图像插入目标人眼图像中相应位置处，从而提高了向人眼图像中插入预设图像的灵活性，有助于丰富插入到人眼图像的预设图像的显示形式。附图说明通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：图1是本申请的一个实施例可以应用于其中的示例性系统架构图；图2是根据本申请实施例的用于插入图像的方法的一个实施例的流程图；图3A是根据本申请实施例的用于插入图像的方法的第一三角剖分网格的示例性示意图；图3B是根据本申请实施例的用于插入图像的方法的第二三角剖分网格的示例性示意图；图4是根据本申请实施例的用于插入图像的方法的一个应用场景的示意图；图5是根据本申请实施例的用于插入图像的方法的又一个实施例的流程图；图6是根据本申请实施例的用于插入图像的方法的根据本文档来自技高网...

【技术保护点】
1.一种用于插入图像的方法，包括：获取目标人眼图像，以及确定所述目标人眼图像的人眼关键点数据，其中，所述人眼关键点数据用于表征所述目标人眼图像中的人眼关键点在所述目标人眼图像中的位置；基于所述人眼关键点数据，确定所述目标人眼图像的辅助关键点数据，其中，所述辅助关键点数据用于表征所述目标人眼图像中的辅助关键点在所述目标人眼图像中的位置；对所述辅助关键点数据进行坐标变换，得到变换后辅助关键点数据；获取待插入图像，以及将所述待插入图像插入所述目标人眼图像中的、所述变换后辅助关键点数据和所述人眼关键点数据表征的位置处。

【技术特征摘要】
1.一种用于插入图像的方法，包括：获取目标人眼图像，以及确定所述目标人眼图像的人眼关键点数据，其中，所述人眼关键点数据用于表征所述目标人眼图像中的人眼关键点在所述目标人眼图像中的位置；基于所述人眼关键点数据，确定所述目标人眼图像的辅助关键点数据，其中，所述辅助关键点数据用于表征所述目标人眼图像中的辅助关键点在所述目标人眼图像中的位置；对所述辅助关键点数据进行坐标变换，得到变换后辅助关键点数据；获取待插入图像，以及将所述待插入图像插入所述目标人眼图像中的、所述变换后辅助关键点数据和所述人眼关键点数据表征的位置处。2.根据权利要求1所述的方法，其中，在所述基于所述人眼关键点数据，确定所述目标人眼图像的辅助关键点数据之前，所述方法还包括：获取预设的参考人眼关键点数据和参考辅助关键点数据，其中，所述参考人眼关键点数据用于表征预设的参考人眼图像中的人眼关键点在所述参考人眼图像中的位置，所述参考辅助关键点数据用于表征预先在所述参考人眼图像中设置的参考辅助关键点的位置。3.根据权利要求2所述的方法，其中，所述基于所述人眼关键点数据，确定所述目标人眼图像的辅助关键点数据，包括：基于所述参考辅助关键点数据和所述参考人眼关键点数据构建第一三角剖分网格；基于所述第一三角剖分网格包括的三角形的边长和内角，以及所述参考人眼关键点数据与所述目标人眼图像的人眼关键点数据之间的对应关系，确定在所述目标人眼图像上形成的第二三角剖分网格；从所述第二三角剖分网格包括的三角形的顶点中确定目标顶点，以及基于所述目标顶点在所述目标人眼图像中的位置，确定所述目标人眼图像的辅助关键点数据。4.根据权利要求2所述的方法，其中，所述对所述辅助关键点数据进行坐标变换，得到变换后辅助关键点数据，包括：对所述参考辅助关键点数据进行坐标变换，得到变换后参考辅助关键点数据；将所述参考辅助关键点数据、所述变换后参考辅助关键点数据和所述目标人眼图像的辅助关键点数据输入预设的坐标映射模型，得到所述目标人眼图像的变换后辅助关键点数据。5.根据权利要求4所述的方法，其中，所述对所述参考辅助关键点数据进行坐标变换，得到变换后参考辅助关键点数据，包括：根据所述目标人眼图像的人眼关键点数据确定表征所述目标人眼图像指示的人眼的张开程度的张开程度值；根据预设的弧度计算公式和所述参考辅助关键点数据包括的横坐标，确定用于表征所述参考辅助关键点数据的坐标的变化程度的弧度值；基于所述弧度值和所述张开程度值，确定变换后参考辅助关键点数据。6.根据权利要求4所述的方法，其中，所述坐标映射模型为基于移动最小二乘法MLS构建的模型。7.根据权利要求1-6之一所述的方法，其中，所述获取待插入图像，包括：获取预设图像；基于所述人眼关键点数据和所述变换后辅助关键点数据，对所述预设图像进行变形，以及将变形后的预设图像确定为待插入图像。8.一种用于插入图像的装置，包括：第一获取单元，被配置成获取目标人眼图像，以及确定所述目标人眼图像的人眼关键点数据，其中，所述人眼关键点数据用于表征所述目标人眼图像中的人眼关键点在所述目标...

【专利技术属性】
技术研发人员：邓涵，刘志超，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：北京,11