一种直播过程中人脸图像处理方法及系统技术方案

本发明专利技术公开了一种直播过程中人脸图像处理方法及系统。该方法包括：获取直播视频，基于直播视频逐帧提取视频帧；将视频帧的第一颜色空间转换为第二颜色空间，并对第二颜色空间的视频帧进行检索，以获得人脸面部坐标及对应的颜色分量；根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理。该系统包括提取模块、检索模块和处理模块。本发明专利技术通过定位人脸坐标，并以改变颜色分量或者贴图的方式对眼睛、鼻子、脸部轮廓、嘴唇等部位进行处理，使主播即使素颜出镜也可以在直播中呈现化妆后的人脸图像。

A face image processing method and system in direct seeding process

The invention discloses a face image processing method and system in the direct seeding process. The method includes: obtaining live video, extracting video frames based on live video frame by frame, converting the first color space of video frame into second color space, and retrieving video frames of second color space to obtain face coordinates and corresponding color components, according to face and face coordinates and corresponding color components. The image of the face coordinates is processed. The system includes extraction module, retrieval module and processing module. The present invention processes the eyes, nose, face contour, lips and other parts by changing the face coordinates and changing the color component or map, so that the main seeding can also show the face image of the face in the direct live, even in the plain appearance.

【技术实现步骤摘要】
一种直播过程中人脸图像处理方法及系统
本专利技术涉及图像处理
，尤其涉及一种直播过程中人脸图像处理方法及系统。
技术介绍
随着网络技术和直播领域的快速发展，越来越多的人选择进行网络直播。许多网络直播选择室外拍摄节目，受限于时间和场地，主播在开播前常常来不及化妆。
技术实现思路
本专利技术的目的在于，解决现有的图像处理
中的上述问题，提供了一种直播过程中人脸图像处理方法及系统，通过定位人脸坐标，并以改变颜色分量或者贴图的方式对眼睛、鼻子、脸部轮廓、嘴唇等部位进行处理，使主播即使素颜出镜也可以在直播中呈现化妆后的人脸图像。为了实现上述目的，一方面，本专利技术提供一种直播过程中人脸图像处理方法。该方法包括步骤：获取直播视频，基于直播视频逐帧提取视频帧；将视频帧的第一颜色空间转换为第二颜色空间，并对第二颜色空间的视频帧进行检索，以获得人脸面部坐标及对应的颜色分量；人脸面部坐标包括嘴唇轮廓坐标、鼻子轮廓坐标和脸庞轮廓坐标；根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理，具体包括：修改人脸面部坐标中的嘴唇轮廓坐标范围的图像的颜色分量，使嘴唇更加红润；和/或修改人脸面部坐标中的鼻子轮廓坐标范围的图像的颜色分量，使鼻子更加白皙；和/或修改人脸面部坐标中的脸庞轮廓坐标范围的图像的颜色分量，使脸庞更加粉嫩。优选地，人脸面部坐标还包括眼睛轮廓坐标；根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理还包括：根据眼睛轮廓坐标，通过贴图的方式给眼睛加上假睫毛。优选地，在根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理步骤之后，还包括：将根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理后的视频帧转换为第一颜色空间的视频帧，并将第一颜色空间的视频帧进行压缩，以实时推送到网络，使观众可见。优选地，将第一颜色空间的视频帧进行压缩步骤，包括：将第一颜色空间的视频帧按照H264格式进行压缩。优选地，第一颜色空间为YUV颜色空间，第二颜色空间为RGB颜色空间。另一方面，本专利技术提供一种直播过程中人脸图像处理系统。该系统包括：提取模块，用于获取直播视频，基于直播视频逐帧提取视频帧；检索模块，将视频帧的第一颜色空间转换为第二颜色空间，并对第二颜色空间的视频帧进行检索，以获得人脸面部坐标及对应的颜色分量；人脸面部坐标包括嘴唇轮廓坐标、鼻子轮廓坐标、脸庞轮廓坐标；处理模块，用于根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理，具体包括：修改人脸面部坐标中的嘴唇轮廓坐标范围的图像的颜色分量，使嘴唇更加红润；和/或修改人脸面部坐标中的鼻子轮廓坐标范围的图像的颜色分量，使鼻子更加白皙；和/或修改人脸面部坐标中的脸庞轮廓坐标范围的图像的颜色分量，使脸庞更加粉嫩。优选地，人脸面部坐标还包括眼睛轮廓坐标；处理模块还用于：根据眼睛轮廓坐标，通过贴图的方式给眼睛加上假睫毛。优选地，还包括推送模块，用于将根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理后的视频帧转换为第一颜色空间的视频帧，并将第一颜色空间的视频帧进行压缩，以实时推送到网络，使观众可见。优选地，将推送模块具体用于将根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理后的视频帧转换为第一颜色空间的视频帧，并将第一颜色空间的视频帧按照H264格式进行压缩，以实时推送到网络，使观众可见。优选地，第一颜色空间为YUV颜色空间，第二颜色空间为RGB颜色空间。本专利技术提供的一种直播过程中人脸图像处理方法及系统，通过定位人脸坐标，并以改变颜色分量或者贴图的方式对眼睛、鼻子、脸部轮廓、嘴唇等部位进行处理，使主播即使素颜出镜也可以在直播中呈现化妆后的人脸图像。附图说明为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例。图1为本专利技术实施例提供的一种直播过程中人脸图像处理方法的流程示意图；图2为本专利技术实施例提供的另一种直播过程中人脸图像处理方法的流程示意图；图3为图1和图2所示步骤102中人脸面部坐标的关键点示意图；图4为本专利技术实施例提供的一种直播过程中人脸图像处理系统的结构示意图；图5为本专利技术实施例提供的另一种直播过程中人脸图像处理系统的结构示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。为便于对本专利技术实施例的理解，下面将结合附图以具体实施例做进一步的解释说明，实施例并不构成对本专利技术实施例的限定。图1为本专利技术实施例提供的一种直播过程中人脸图像处理方法的流程示意图。如图1所示，该方法包括：步骤101，获取直播视频，基于直播视频逐帧提取视频帧。步骤102，将视频帧的第一颜色空间转换为第二颜色空间，并对第二颜色空间的视频帧进行检索，以获得人脸面部坐标及对应的颜色分量。具体地，上述第一颜色空间可以为YUV颜色空间，所述第二颜色空间可以为RGB颜色空间。YUV主要用于优化彩色视频信号的传输，使其向后相容老式黑白电视。与RGB视频信号传输相比，它最大的优点在于只需占用极少的频宽(RGB要求三个独立的视频信号同时传输)。其中“Y”表示明亮度(Luminance或Luma)，也就是灰阶值；而“U”和“V”表示的则是色度(Chrominance或Chroma)，作用是描述影像色彩及饱和度，用于指定像素的颜色。采用RGB颜色空间，每种颜色都可用三个变量来表示-红色绿色以及蓝色的强度。记录及显示彩色图像时，RGB是最常见的一种方案。但是，它缺乏与早期黑白显示系统的良好兼容性。因此，许多电子电器厂商普遍采用的做法是，将RGB转换成YUV颜色空间，以维持兼容，再根据需要换回RGB格式，以便在电脑显示器上显示彩色图形。如图3所示，通过106个关键点的坐标对人脸面部进行定位。关键点的坐标表示为(x,y)，以图片左上角的关键点0为坐标原点。眼睛、眉毛、鼻子、嘴唇和脸庞分别用不同的关键点描述，如脸庞轮廓坐标范围的图像为关键点0-32的坐标范围内的图像。通过关键点定位人脸面部坐标后，获取相应的坐标范围内的颜色分量，如脸庞轮廓坐标范围内图像的颜色分量为(R100，G100，B100)。步骤103，根据人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理。具体地，修改人脸面部坐标中的嘴唇轮廓坐标范围的图像的颜色分量，使嘴唇更加红润；修改人脸面部坐标中的鼻子轮廓坐标范围的图像的颜色分量，使鼻子更加白皙；修改人脸面部坐标中的脸庞轮廓坐标范围的图像的颜色分量，使脸庞更加粉嫩。根据眼睛轮廓坐标，通过贴图的方式给眼睛加上假睫毛。例如，根据脸庞轮廓坐标，即关键点0-32的坐标，及其范围内图像的颜色分量(R100，G100，B100)，调整脸庞轮廓坐标范围的图像中红色分量，将R100调整为R130，即将红色分量提高了30％，调整后的脸庞轮廓坐标范围的图像的颜色分量为(R130，G100，B10本文档来自技高网...

【技术保护点】
1.一种直播过程中人脸图像处理方法，其特征在于，包括以下步骤：获取直播视频，基于所述直播视频逐帧提取视频帧；将所述视频帧的第一颜色空间转换为第二颜色空间，并对所述第二颜色空间的视频帧进行检索，以获得人脸面部坐标及对应的颜色分量；所述人脸面部坐标包括嘴唇轮廓坐标、鼻子轮廓坐标和脸庞轮廓坐标；根据所述人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理，具体包括：修改所述人脸面部坐标中的嘴唇轮廓坐标范围的图像的颜色分量，使嘴唇更加红润；和/或修改所述人脸面部坐标中的鼻子轮廓坐标范围的图像的颜色分量，使鼻子更加白皙；和/或修改所述人脸面部坐标中的脸庞轮廓坐标范围的图像的颜色分量，使脸庞更加粉嫩。

【技术特征摘要】
1.一种直播过程中人脸图像处理方法，其特征在于，包括以下步骤：获取直播视频，基于所述直播视频逐帧提取视频帧；将所述视频帧的第一颜色空间转换为第二颜色空间，并对所述第二颜色空间的视频帧进行检索，以获得人脸面部坐标及对应的颜色分量；所述人脸面部坐标包括嘴唇轮廓坐标、鼻子轮廓坐标和脸庞轮廓坐标；根据所述人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理，具体包括：修改所述人脸面部坐标中的嘴唇轮廓坐标范围的图像的颜色分量，使嘴唇更加红润；和/或修改所述人脸面部坐标中的鼻子轮廓坐标范围的图像的颜色分量，使鼻子更加白皙；和/或修改所述人脸面部坐标中的脸庞轮廓坐标范围的图像的颜色分量，使脸庞更加粉嫩。2.根据权利要求1所述的方法，其特征在于，所述人脸面部坐标还包括眼睛轮廓坐标；所述根据所述人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理还包括：根据所述眼睛轮廓坐标，通过贴图的方式给眼睛加上假睫毛。3.根据权利要求1或2所述的方法，其特征在于，在所述根据所述人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理步骤之后，还包括：将所述根据所述人脸面部坐标及对应的颜色分量对人脸面部坐标范围的图像进行处理后的视频帧转换为第一颜色空间的视频帧，并将所述第一颜色空间的视频帧进行压缩，以实时推送到网络，使观众可见。4.根据权利要求3所述的方法，其特征在于，所述将所述第一颜色空间的视频帧进行压缩步骤，包括：将第一颜色空间的视频帧按照H264格式进行压缩。5.根据权利要求1、2、4中任一权利要求所述的方法，其特征在于，所述第一颜色空间为YUV颜色空间，所述第二颜色空间为RGB颜色空间。6.一种直播...

【专利技术属性】
技术研发人员：姚树沛，
申请(专利权)人：北京酷我科技有限公司，
类型：发明
国别省市：北京,11