一种修正人像视线的方法和设备技术

本申请公开了一种修正人像视线的方法，用于对照片中的人像视线进行修正，该方法包括：调整照片中人像的头部状态，使人像的双眼直视前方；对进行头部状态调整后的人像采用特征点进行视线修正，得到视线修正后的照片。本申请还公开了一种修正人像视线的设备。应用本申请公开的技术方案，能够修正人像的头部姿态和眼睛视线，从而美化照片，使得成像更加自然，提高相机的用户体验。

Method and equipment for correcting portrait line of sight

The invention discloses a method for correcting portrait sight, for photo portrait sight correction, the method includes: adjust the photo portrait in the head of state, the portrait of the eyes straight ahead; as the head of state correction line adjusted by portrait feature points, get the sight corrected photo. The present invention also discloses a device for correcting the portrait line of sight. The technical scheme disclosed by the application can modify the head posture and the eye line of the portrait, thereby beautifying the photograph, making the imaging more natural, and improving the user experience of the camera.

【技术实现步骤摘要】
一种修正人像视线的方法和设备
本申请涉及智能终端
，特别涉及一种修正人像视线的方法和设备。
技术介绍
随着智能终端和拍照摄像头的发展，自拍分享已经越来越流行。我们在自拍时，期待手机能将我们拍的更美更自然。但是在用前置摄像头拍照时，因为用户习惯于看着手机屏幕实时预览自己当前的姿势，而不是朝向前置摄像头，再加上手机和眼睛相距较近，故成像时，造成了自拍照片中头部以及眼睛视线朝下这一普遍现象。这无疑影响了自拍照片的整体效果和我们的自拍体验。
技术实现思路
本申请提供了一种修正人像视线的方法，旨在通过修正头部姿态和眼睛视线，来美化照片，使得成像更加自然，提高相机的用户体验。本申请公开了一种修正人像视线的方法，用于对照片中的人像视线进行修正，包括：调整照片中人像的头部状态，使人像的双眼直视前方；对进行头部状态调整后的人像采用特征点进行视线修正，得到视线修正后的照片。较佳的，所述调整照片中人像的头部状态包括：检测头部姿态，如果头部姿态不正立，则使用图割技术将照片中的头部区域与背景进行分离；将头部区域按照上下方向进行调整，直至人像的双眼直视前方；将调整后的头部区域与背景进行融合。较佳的，所述对进行头部状态调整后的人像采用特征点进行视线修正包括：预先进行人像特征点的标定和训练；根据训练出的样本模型，对所述照片进行特征点获取，得到双眼的特征点位置信息；根据得到的双眼的特征点位置信息，对所述照片进行双眼的逼近模拟和视线判定；如果视线判定的结果为视线不正，则对双眼进行视线修正。较佳的，所述根据得到的双眼的特征点位置信息，对所述照片进行双眼的逼近模拟和视线判定包括：根据双眼的特征点位置信息，分别对左右眼的外轮廓的N个位置点进行无限逼近，并模拟成椭圆形；对所述椭圆形的上半部分或下半部分的斜率α进行计算，如果斜率α小于设定阈值，则判定视线不正，如果斜率α大于或者等于设定阈值，则判定视线是正常的。较佳的，该方法还包括：在相机设置中进行视线修正功能的配置，或者，在照片预览的选项中进行视线修正功能的配置。本申请还公开了一种修正人像视线的设备，用于对照片中的人像视线进行修正，包括：智能处理模块和显示保存模块，其中：所述智能处理模块，用于调整照片中人像的头部状态，使人像的双眼直视前方；并用于对进行头部状态调整后的人像采用特征点进行视线修正，得到视线修正后的照片；所述显示保存模块，用于对视线修正后的照片进行显示和保存。较佳的，所述智能处理模块在调整照片中人像的头部状态时用于执行以下处理：检测头部姿态，如果头部姿态不正立，则使用图割技术将照片中的头部区域与背景进行分离；将头部区域按照上下方向进行调整，直至人像的双眼直视前方；将调整后的头部区域与背景进行融合。较佳的，所述智能处理模块在对进行头部状态调整后的人像采用特征点进行视线修正时用于执行以下处理：预先进行人像特征点的标定和训练；根据训练出的样本模型，对所述照片进行特征点获取，得到双眼的特征点位置信息；根据得到的双眼的特征点位置信息，对所述照片进行双眼的逼近模拟和视线判定；如果视线判定的结果为视线不正，则对双眼进行视线修正。较佳的，所述根据得到的双眼的特征点位置信息，对所述照片进行双眼的逼近模拟和视线判定包括：根据双眼的特征点位置信息，分别对左右眼的外轮廓的N个位置点进行无限逼近，并模拟成椭圆形；对所述椭圆形的上半部分或下半部分的斜率α进行计算，如果斜率α小于设定阈值，则判定视线不正，如果斜率α大于或者等于设定阈值，则判定视线是正常的。较佳的，该设备还包括：修正配置模块；所述修正配置模块，用于在相机设置中进行视线修正功能的配置，或者，在照片预览的选项中进行视线修正功能的配置。由上述技术方案可见，本申请修正人像视线的方法首先通过调整照片中人像的头部状态，使人像的双眼直视前方；然后通过对进行头部状态调整后的人像采用特征点进行视线修正，从而能够得到视线修正后的照片，使得成像更加自然，提高了相机的用户体验。附图说明图1为视线朝下的照片；图2为采用本专利技术处理后视线正常的照片；图3为自拍照时双眼看屏幕导致视线向下的示意图；图4为本专利技术整体移动头部调整头部姿态的示意图；图5为本专利技术调整头部姿态的流程图图；图6为本专利技术人脸转动的三个方向示意图；图7为本专利技术特征点修正的步骤示意图；图8为本专利技术双眼特征点标定示意图；图9为本专利技术根据特征点位置，模拟椭圆示意图；图10为本专利技术修正上眼睑弧线的弧度示意图；图11为本专利技术上移瞳孔和虹膜位置示意图；图12为本专利技术视线向下的双眼修正前后对比示意图；图13为本专利技术打开菜单选项，选择“视线修正”示意图；图14为本专利技术视线修正后的终端显示示意图。具体实施方式为使本申请的目的、技术方案及优点更加清楚明白，以下参照附图并举实施例，对本申请作进一步详细说明。本专利技术提出了一种修正人像视线的方法，该方法较常见的应用场景是用于修正自拍照中视线不正的问题，也可用于其他视线不正的照片。并且，本专利技术视线修正不仅限于对视线朝下的情况进行修正，对于其他视线不正的情况亦可进行修正处理。在本专利技术实施例的描述中，主要以自拍照和视线朝下为例进行说明。该方法可用软件系统实现，所述软件系统可包括三个模块：修正设置模块、智能处理模块和显示保存模块。下面对各个功能模块进行详细说明。一、修正配置模块一种修正配置模块，是在相机自拍设置中，增加对视线修正功能的打开或者关闭的选项，如果视线修正功能是打开的状态，本专利技术将对自拍照片进行视线修正处理。准许终端用户对这个功能进行选择并记录，下次相机的启动继续维持以前的配置选择。另一种修正配置模块，是允许设置在预览图片的选项中。终端用户没有在相机自拍选项中选择视线修正打开功能(即第一种配置方式)，在自拍后预览图片时，在图片选项中增加视线修正功能按钮，以打开该功能选项并进行修正。二、智能处理模块本专利技术智能处理模块的处理分为两部分：第一部分是调整头部姿态，采用的是整体仰抬头部的方法。针对自拍时视线向下等情况，对头部区域进行检测并与其他区域进行分割，然后对头部进行整体抬起，让视线自然正对，再对头部区域和背景区域进行融合。第二部分是采用特征点进行视线修正。采集大量人脸图片进行特征点标注，并形成数据训练集。自拍后，对自拍照进行特征点提取，对眼睛的轮廓进行逼近模拟，得到轮廓的形状并计算视线。如若判断视线向下，则向上调节上眼睑，并相应向上移动瞳孔和虹膜的位置，再相应调节下眼睑的位置，最后对整体做平滑自然处理。智能处理模块对自拍照进行视线修正采取的方法是：先进行头部姿态的调整，然后再采用特征点相关方法对视线进行修正。下面就这两大部分进行详细说明。本专利技术智能处理模块对自拍照进行视线修正的前后对比如图1和图2所示。图1是视线朝下的照片，图2是经过本专利技术智能处理修正后的视线正常的照片。上述第一部分调整头部姿态的前后对比如图3和图4所示。图3为自拍照时双眼看屏幕导致视线向下的示意图，图4为本专利技术整体移动头部调整头部姿态的示意图。图5为本专利技术调整头部姿态的流程示意图，包括以下步骤：第1步：使用相机的自拍功能进行自拍。如前所述，本专利技术也可用于非自拍场景，因此，本步骤也可以是使用相机的后置摄像头进行拍摄。第2步：判断视线修正是否开启，如果开启，进入第3步，否则，判定不需要进行视线校正，结束本流程。本文档来自技高网...

【技术保护点】
一种修正人像视线的方法，用于对照片中的人像视线进行修正，其特征在于，包括：调整照片中人像的头部状态，使人像的双眼直视前方；对进行头部状态调整后的人像采用特征点进行视线修正，得到视线修正后的照片。

【技术特征摘要】
1.一种修正人像视线的方法，用于对照片中的人像视线进行修正，其特征在于，包括：调整照片中人像的头部状态，使人像的双眼直视前方；对进行头部状态调整后的人像采用特征点进行视线修正，得到视线修正后的照片。2.根据权利要求1所述的方法，其特征在于，所述调整照片中人像的头部状态包括：检测头部姿态，如果头部姿态不正立，则使用图割技术将照片中的头部区域与背景进行分离；将头部区域按照上下方向进行调整，直至人像的双眼直视前方；将调整后的头部区域与背景进行融合。3.根据权利要求1所述的方法，其特征在于，所述对进行头部状态调整后的人像采用特征点进行视线修正包括：预先进行人像特征点的标定和训练；根据训练出的样本模型，对所述照片进行特征点获取，得到双眼的特征点位置信息；根据得到的双眼的特征点位置信息，对所述照片进行双眼的逼近模拟和视线判定；如果视线判定的结果为视线不正，则对双眼进行视线修正。4.根据权利要求3所述的方法，其特征在于，所述根据得到的双眼的特征点位置信息，对所述照片进行双眼的逼近模拟和视线判定包括：根据双眼的特征点位置信息，分别对左右眼的外轮廓的N个位置点进行无限逼近，并模拟成椭圆形；对所述椭圆形的上半部分或下半部分的斜率α进行计算，如果斜率α小于设定阈值，则判定视线不正，如果斜率α大于或者等于设定阈值，则判定视线是正常的。5.根据权利要求1至4任一项所述的方法，其特征在于，该方法还包括：在相机设置中进行视线修正功能的配置，或者，在照片预览的选项中进行视线修正功能的配置。6.一种修正人像视线的设备，用于对照片中的人像视线进行修正，其特征在于，包括：智能处理模块和显示保存模块，...

【专利技术属性】
技术研发人员：陆沿青，崔秀芬，崔计平，
申请(专利权)人：三星电子中国研发中心，三星电子株式会社，
类型：发明
国别省市：江苏,32