一种微笑动作检测方法和装置及活体识别方法和系统制造方法及图纸

本发明专利技术公开了一种微笑动作检测方法，包括：从待测人脸视频中抽取若干视频帧；其中，所述抽取的若干视频帧包括待测人脸视频的第一帧视频帧；获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角和右嘴角的关键点位置；以第一帧视频帧的左嘴角和右嘴角的关键点位置为基准，获取每一抽取的所述视频帧的左嘴角和右嘴角分别移动距离；判定左嘴角和右嘴角的移动距离均大于预设距离阈值的所述视频帧的待测人脸为微笑状态；若抽取的若干所述视频帧中包括预设帧数的所述待测人脸为微笑状态的所述视频帧，判定待测人脸有微笑动作。相应的，本发明专利技术还公开了一种微笑动作检测装置。本发明专利技术计算简单效率高。

Method and device for detecting smile action and method and system for recognizing living body

The invention discloses a smile action detection method, including: the extraction from the face video several video frames to be measured; the number of video frames from the video frame includes a first frame to be measured face video; key points obtained from the measured extraction face video in each of the video frequency the left and right frame mouth mouth; with the key point position of the first frames left and right corners of the mouth as a benchmark, to obtain the video frame of each selected left and right moving distance respectively mouth mouth; determine the moving distance of the left and right corners of the mouth are larger than the preset distance video frame the threshold for the test face smile; if the number of the video frame extraction includes the preset frames to be measured for the video frame smiling face state, judging whether the detected face with smile action. Correspondingly, the invention also discloses a smile action detecting device. The invention is simple in calculation and high in efficiency.

【技术实现步骤摘要】
一种微笑动作检测方法和装置及活体识别方法和系统
本专利技术涉及人脸识别领域，尤其涉及一种微笑动作检测方法和装置及活体识别方法和系统。
技术介绍
随着人脸识别技术的发展，越来越多的场景需要用到人脸检测去快速的识别一个人的身份。但是有不法份子会利用图片或者视频代替真人去进行人脸识别，这样整个人脸识别系统的安全性就得不到保证。而人脸活体识别可以检测出当前待测人脸是活体人脸而非照片或者视频中的人脸，从而保证了人脸识别系统的安全性。在进行人脸识别时，可以通过对待测人脸的微笑动作的检测有助于识别人脸是否为活体，为实现在人体识别时，能实现高效简单地识别人脸是否活体，因而需要一种高效简单的微笑动作检测技术方案。
技术实现思路
本专利技术实施例的目的是提供一种微笑动作检测方法，计算简单，效率高。为实现上述目的，本专利技术提供了一种微笑动作检测方法，包括步骤：从待测人脸视频中抽取若干视频帧；其中，所述抽取的若干视频帧包括待测人脸视频的第一帧视频帧；获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角关键点位置和右嘴角关键点位置；以第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角移动距离和右嘴角移动距离；若判定抽取的每一所述视频帧中的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值，则判定对应的所述视频帧的待测人脸为微笑状态；若抽取的若干所述视频帧中的存在预设帧数的待测人脸为微笑状态的视频帧，判定所述待测人脸视频的待测人脸有微笑动作。与现有技术相比，本专利技术公开的一种微笑动作检测装置，首先从待测人脸视频中抽取若干视频帧，然后获取抽取的每一视频帧的左嘴角关键点位置和右嘴角关键点位置；并获取左嘴角移动距离和右嘴角移动距离；通过微笑状态判断单元左嘴角移动距离和右嘴角移动距离均大于预设距离阈值的视频帧的待测人脸为微笑状态；最后若抽取的若干所述视频帧中包括预设帧数的待测人脸为微笑状态的视频帧，判定待测人脸视频的待测人脸有微笑动作；该方案获取的嘴角的关键点位置、以及嘴角移动距离的计算过程简单高效，任何普通摄像头或者移动端手机的摄像头均可作为待测人脸视频的输入硬件，设备硬件要求简单。进一步的，所述判定抽取的每一所述视频帧中的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值包括：基于第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置计算嘴部长度；通过所述左嘴角移动距离与嘴部长度的比值计算所述左嘴角移动比例，通过所述右嘴角移动距离与嘴部长度的比值计算所述右嘴角移动比例；当判定抽取的每一所述视频帧中的所述左嘴角移动比例和所述右嘴角移动比例均大于预设比例阈值，判定对应的所述视频帧的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值。进一步的，所述获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角关键点位置和右嘴角关键点位置包括：对从所述待测人脸视频中抽取的每一所述视频帧用dlib库做人脸检测和人脸关键点位置检测，获取待测人脸的若干关键点位置；从每一抽取的所述视频帧的所述待测人脸的若干关键点位置中获取左嘴角关键点位置和右嘴角关键点位置。进一步的，所述以第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角移动距离和右嘴角移动距离包括：以第一帧视频帧的左嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角关键点位置向左移动的距离为左嘴角移动距离；以第一帧视频帧的右嘴角关键点位置为基准，获取每一抽取的所述视频帧的右嘴角关键点位置向右移动的距离为右嘴角移动距离。相应地，本专利技术还提供一种微笑动作检测装置，包括：视频帧抽取单元，用于从待测人脸视频中抽取若干视频帧；其中，所述抽取的若干视频帧包括待测人脸视频的第一帧视频帧；嘴角关键点位置获取单元，用于获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角关键点位置和右嘴角关键点位置；嘴角移动距离获取单元，用于以第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角移动距离和右嘴角移动距离；微笑状态判断单元，用于若判定抽取的每一所述视频帧中的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值，则判定对应的所述视频帧的待测人脸为微笑状态；微笑动作判断单元，用于若抽取的若干所述视频帧中包括预设帧数的所述待测人脸为微笑状态的所述视频帧，判定所述待测人脸视频的待测人脸有微笑动作。与现有技术相比，本专利技术公开的一种微笑动作检测装置，首先通过视频帧抽取单元从待测人脸视频中抽取若干视频帧，然后通过嘴角关键点位置获取单元获取抽取的每一视频帧的左嘴角关键点位置和右嘴角关键点位置；并通过嘴角移动距离获取单元获取左嘴角移动距离和右嘴角移动距离；通过微笑状态判断单元所述左嘴角移动距离和右嘴角移动距离均大于预设距离阈值的视频帧的待测人脸为微笑状态；最后通过微笑动作判断单元判定若抽取的若干所述视频帧中包括预设帧数的待测人脸为微笑状态的视频帧，则待测人脸视频的待测人脸有微笑动作。该方案获取的嘴角的关键点位置、以及嘴角移动距离的计算过程简单高效，任何普通摄像头或者移动端手机的摄像头均可作为待测人脸视频的输入硬件，设备硬件要求简单。进一步的，所述微笑状态判断单元包括：嘴部长度计算模块，用于基于第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置计算嘴部长度；嘴角移动比例模块，用于通过所述左嘴角移动距离与嘴部长度的比值计算所述左嘴角移动比例，通过所述右嘴角移动距离与嘴部长度的比值计算所述右嘴角移动比例；微笑状态判断模块，用于当判定抽取的每一所述视频帧中的所述左嘴角移动比例和所述右嘴角移动比例均大于预设比例阈值，判定对应的所述视频帧的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值，且对应的所述视频帧的待测人脸为微笑状态。进一步的，嘴角关键点位置获取单元包括：人脸关键点检测模块，用于对对从所述待测人脸视频中抽取的每一所述视频帧用dlib库做人脸检测和人脸关键点位置检测，获取待测人脸的若干关键点位置；嘴角关键点检测模块，用于对从每一抽取的所述视频帧的所述待测人脸的若干关键点位置中获取左嘴角关键点位置和右嘴角关键点位置。进一步的，所述嘴角移动距离获取单元包括：左嘴角移动距离模块，用于以第一帧视频帧的左嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角关键点位置向左移动的距离为左嘴角移动距离；右嘴角移动距离模块，用于以第一帧视频帧的右嘴角关键点位置为基准，获取每一抽取的所述视频帧的右嘴角关键点位置向右移动的距离为右嘴角移动距离。相应地，本专利技术还提供一种活体识别方法，其特征在于，所述活体识别方法包括步骤：检测待测人脸视频中的待测人脸的微笑动作的情况和其它至少一个部位运动的情况，其中，采用本专利技术提供的一种微笑动作检测方法检测待测人脸视频中的待测人脸的微笑动作的情况；基于部位运动的情况获取所述待测人脸的每一部位运动对应的运动分值；计算每一所述部位运动对应的运动分值加权后的总和，并将计算得到的所述总和作为活体识别分值；其中，每一所述部位运动已预设相应的权值；判定所述活体识别分值不小于预设阈值的所述待测人脸为活体。与现有技术相比，本专利技术公开的一种活体识别方法，采用本专利技术公开的微笑动作检测方法检测待测人脸视频的待测人脸的微笑动作的本文档来自技高网...

【技术保护点】
一种微笑动作检测方法，其特征在于，所述微笑检测方法包括步骤：从待测人脸视频中抽取若干视频帧；其中，所述抽取的若干视频帧包括待测人脸视频的第一帧视频帧；获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角关键点位置和右嘴角关键点位置；以第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角移动距离和右嘴角移动距离；若判定抽取的每一所述视频帧中的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值，则判定对应的所述视频帧的待测人脸为微笑状态；若抽取的若干所述视频帧中包括预设帧数的所述待测人脸为微笑状态的所述视频帧，判定所述待测人脸视频的待测人脸有微笑动作。

【技术特征摘要】
1.一种微笑动作检测方法，其特征在于，所述微笑检测方法包括步骤：从待测人脸视频中抽取若干视频帧；其中，所述抽取的若干视频帧包括待测人脸视频的第一帧视频帧；获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角关键点位置和右嘴角关键点位置；以第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角移动距离和右嘴角移动距离；若判定抽取的每一所述视频帧中的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值，则判定对应的所述视频帧的待测人脸为微笑状态；若抽取的若干所述视频帧中包括预设帧数的所述待测人脸为微笑状态的所述视频帧，判定所述待测人脸视频的待测人脸有微笑动作。2.如权利要求1所述的一种微笑动作检测方法，其特征在于，所述判定抽取的每一所述视频帧中的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值包括：基于第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置计算嘴部长度；通过所述左嘴角移动距离与嘴部长度的比值计算所述左嘴角移动比例，通过所述右嘴角移动距离与嘴部长度的比值计算所述右嘴角移动比例；当判定抽取的每一所述视频帧中的所述左嘴角移动比例和所述右嘴角移动比例均大于预设比例阈值，判定对应的所述视频帧的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值。3.如权利要求1所述的一种微笑动作检测方法，其特征在于，所述获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角关键点位置和右嘴角关键点位置包括：对从所述待测人脸视频中抽取的每一所述视频帧用dlib库做人脸检测和人脸关键点位置检测，获取待测人脸的若干关键点位置；从每一抽取的所述视频帧的所述待测人脸的若干关键点位置中获取左嘴角关键点位置和右嘴角关键点位置。4.如权利要求3所述的一种微笑动作检测方法，其特征在于，所述以第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角移动距离和右嘴角移动距离包括：以第一帧视频帧的左嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角关键点位置向左移动的距离为左嘴角移动距离；以第一帧视频帧的右嘴角关键点位置为基准，获取每一抽取的所述视频帧的右嘴角关键点位置向右移动的距离为右嘴角移动距离。5.一种微笑动作检测装置，其特征在于，包括：视频帧抽取单元，用于从待测人脸视频中抽取若干视频帧；其中，所述抽取的若干视频帧包括待测人脸视频的第一帧视频帧；嘴角关键点位置获取单元，用于获取从所述待测人脸视频中抽取的每一所述视频帧的左嘴角关键点位置和右嘴角关键点位置；嘴角移动距离获取单元，用于以第一帧视频帧的左嘴角关键点位置和右嘴角关键点位置为基准，获取每一抽取的所述视频帧的左嘴角移动距离和右嘴角移动距离；微笑状态判断单元，用于若判定抽取的每一所述视频帧中的所述左嘴角移动距离和所述右嘴角移动距离均大于预设距离阈值，则判定对应的所述视频帧的待测人脸为微笑状态；微笑动作判断...

【专利技术属性】
技术研发人员：陈全，
申请(专利权)人：广州视源电子科技股份有限公司，
类型：发明
国别省市：广东,44