一种非面部ROI识别方法及装置制造方法及图纸

本发明专利技术提供了一种非面部ROI识别的方法及装置，该方法包括：从待处理的图像中确定至少一个面部关键点；根据所述至少一个面部关键点，确定至少一个颜色样本区域；通过所述至少一个颜色样本区域，从所述待处理的图像中提取面部图像；对所述面部图像进行掩膜消除，获得非面部感兴趣区域ROI对应的目标图像；根据所述至少一个面部关键点及所述目标图像，对所述待处理的图像中的所述非面部ROI进行识别。该装置包括：提取单元、消除单元及识别单元。本方案能够提高对非面部ROI进行识别的速率。

Non facial ROI recognition method and device

The present invention provides a method and device for non ROI face recognition, the method includes: from the image to be processed in determining at least one face key point; according to the at least one face point, determining at least one color sample region; through the at least one kind of color in the region, face extraction the image from the image to be processed; on the facial image of the mask to eliminate target image to obtain non face regions of interest corresponding to ROI; according to the at least one facial key points and the target image, the image to be processed in the non face recognition ROI. The device comprises an extraction unit, a cancellation unit and an identification unit. This scheme can increase the rate of recognition of non facial ROI.

【技术实现步骤摘要】
一种非面部ROI识别方法及装置
本专利技术涉及图像处理
，特别涉及一种非面部ROI识别的方法及装置。
技术介绍
随着计算机技术和图像处理技术的不断发展与进步，面部表情识别技术被应用于各个领域，比如动画制作、影视制作、视频聊天等，通过对用户的面部表情进行识别，创建用户面部表情与动画人物面部表情的映射关系，以进行动画片、科幻电影的制作，趣味视频聊天或趣味照片拍摄。在面部表情识别过程中，识别舌头、牙齿、眼球等非面部ROI(RegionOfInterest，感兴趣区域)是面部表情识别的重点和难点。目前，识别非面部ROI主要通过SVM(SupportVectorMachine，支持向量机分类器)和神经元网络算法的方法进行。针对于目前通过SVM和神经元网络算法对非面部ROI进行识别的方法，SVM需要将直方图数据提升至较高的维度进行计算，而神经元网络算法需要对图像进行多次卷积卷和池化处理。因此，无论SVM还是神经元网络算法，都需要耗费较长的时间处理大量数据，造成对非面部ROI进行识别的速率较慢。
技术实现思路
本专利技术实施例提供了一种非面部ROI识别的方法及装置，能够提高对非面部ROI进行识别的速率。第一方面，本专利技术实施例提供了一种非面部ROI识别的方法，包括：从待处理的图像中确定至少一个面部关键点；根据所述至少一个面部关键点，确定至少一个颜色样本区域；通过所述至少一个颜色样本区域，从所述待处理的图像中提取面部图像；对所述面部图像进行掩膜消除，获得非面部感兴趣区域ROI对应的目标图像；根据所述至少一个面部关键点及所述目标图像，对所述待处理的图像中的所述非面部ROI进行识别。优选地，所述通过所述至少一个颜色样本区域，从所述待处理的图像中提取面部图像，包括：针对于每一个所述颜色样本区域，对该颜色样本区域进行颜色统计，获取该颜色样本区域对应的样本颜色，确定所述样本颜色在与该颜色样本区域相邻区域内的归一化出现频率，并将所述归一化出现频率大于预设阈值的所述相邻区域确定为该颜色样本区域对应的面部区域；将各个所述颜色样本区域及对应的面部区域进行组合，形成组合面部区域；从所述待处理的图像中提取位于所述组合面部区域内的图像作为所述面部图像。优选地，所述对所述面部图像进行掩膜消除，获得非面部ROI对应的目标图像，包括：对所述面部图像进行掩膜消除；根据所述至少一个面部关键点，从消除所述面部图像的待处理的图像上获得所述非面部ROI对应的目标图像。优选地，所述根据所述至少一个面部关键点及所述目标图像，对所述待处理的图像中的所述非面部ROI进行识别，包括：根据所述至少一个面部关键点，确定所述目标图像上干扰图像所在的区域，并将所述干扰图像消除；根据所述目标图像上剩余图像相对于各个所述面部关键点所处位置、形状及尺寸，识别所述剩余图像是否为所述非面部ROI。优选地，所述非面部ROI包括：舌头、牙齿、眼球及胡须中的任意一个。第二方面，本专利技术实施例还一种非面部ROI识别的装置，包括：提取单元、消除单元及识别单元；所述提取单元，用于从待处理的图像中确定至少一个面部关键点，根据所述至少一个面部关键点确定至少一个颜色样本区域，通过所述至少一个颜色样本区域从所述待处理的图像中提取面部图像；所述消除单元，用于对所述提取单元提取出的面部图像进行掩膜消除，获得所述面部图像上非面部ROI对应的目标图像；所述识别单元，用于根据所述提取单元确定的所述至少一个面部关键点及所述消除单元获取的所述目标图像，对所述待处理的图像中的所述非面部ROI进行识别。优选地，所述提取单元包括：获取子单元；所述获取子单元，用于针对于每一个所述颜色样本区域，对该颜色样本区域进行颜色统计，获取该颜色样本区域对应的样本颜色，确定所述样本颜色在与该颜色样本区域相邻区域内的归一化出现频率，并将所述归一化出现频率大于预设阈值的所述相邻区域确定为该颜色样本区域对应的面部区域；并将各个所述颜色样本区域及对应的面部区域进行组合，形成组合面部区域；以及从所述待处理的图像中提取位于所述组合面部区域内的图像作为所述面部图像。优选地，所述消除单元，用于对所述面部图像进行掩膜消除，并根据所述至少一个面部关键点，从消除所述面部图像的待处理的图像上获得所述非面部ROI相对应的目标区域。优选地，所述识别单元，用于根据所述至少一个面部关键点，确定所述目标图像上干扰图像所在的区域，并将所述干扰图像消除；并根据所述目标图像上剩余图像相对于各个所述面部关键点所处位置、形状及尺寸，识别所述剩余图像是否为所述非面部ROI。第三方面，本专利技术实施例还提供了一种可读介质，包括执行指令，当存储控制器的处理器执行所述执行指令时，所述存储控制器执行权上述实施例提供的非面部ROI识别的方法。第四方面，本专利技术实施例还提供了一种存储控制器，包括：处理器、存储器和总线；所述存储器用于存储执行指令，所述处理器与所述存储器通过所述总线连接，当所述存储控制器运行时，所述处理器执行所述存储器存储的所述执行指令，以使所述存储控制器执行上述实施例提供的非面部ROI识别的方法。本专利技术实施例提供了一种非面部ROI识别的方法、装置及可读介质和存储控制器，在待处理的图像中确定至少一个面部关键点后，根据确定出的面部关键点确定至少一个颜色样本区域，通过各个颜色样本区域从待处理图像上提取面部图像，通过对面部图像进行掩膜消除后获得非面部ROI可能出现的目标图像，进而根据各个面部关键点及目标图像对待处理的图像中的非面部ROI进行识别。由此可见，在对非面部ROI进行识别时，仅需要对面部图像进行掩膜消除后获得可能出现非面部ROI的目标图像，进而根据各个面部关键点识别目标图像中是否包括非面部ROI，所需处理的数据量较少，从而可以提高对非面部ROI进行识别的速率。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本专利技术一个实施例提供的一种非面部ROI识别的方法流程图；图2是本专利技术另一个实施例提供的一种非面部ROI识别的方法流程图；图3是本专利技术一个实施例提供的一种非面部ROI识别的装置所在设备的示意图；图4是本专利技术一个实施例提供的一种非面部ROI识别的装置示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例，基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本专利技术保护的范围。如图1所示，本专利技术实施例提供了一种非面部ROI识别的方法，该方法可以包括以下步骤：步骤101：从待处理的图像中确定至少一个面部关键点；步骤102：根据所述至少一个面部关键点，确定至少一个颜色样本区域；步骤103：通过所述至少一个颜色样本区域，从所述待处理的图像中提取面部图像；步骤104：对所述面部图像进行掩膜消除，获得非面部感兴趣区域ROI对应的目标图像；步骤105：根据所述至少一个面部关键点及所述目标图本文档来自技高网...

【技术保护点】
一种非面部ROI识别的方法，其特征在于，包括：从待处理的图像中确定至少一个面部关键点；根据所述至少一个面部关键点，确定至少一个颜色样本区域；通过所述至少一个颜色样本区域，从所述待处理的图像中提取面部图像；对所述面部图像进行掩膜消除，获得非面部感兴趣区域ROI对应的目标图像；根据所述至少一个面部关键点及所述目标图像，对所述待处理的图像中的所述非面部ROI进行识别。

【技术特征摘要】
1.一种非面部ROI识别的方法，其特征在于，包括：从待处理的图像中确定至少一个面部关键点；根据所述至少一个面部关键点，确定至少一个颜色样本区域；通过所述至少一个颜色样本区域，从所述待处理的图像中提取面部图像；对所述面部图像进行掩膜消除，获得非面部感兴趣区域ROI对应的目标图像；根据所述至少一个面部关键点及所述目标图像，对所述待处理的图像中的所述非面部ROI进行识别。2.根据权利要求1所述的方法，其特征在于，所述通过所述至少一个颜色样本区域，从所述待处理的图像中提取面部图像，包括：针对于每一个所述颜色样本区域，对该颜色样本区域进行颜色统计，获取该颜色样本区域对应的样本颜色，确定所述样本颜色在与该颜色样本区域相邻区域内的归一化出现频率，并将所述归一化出现频率大于预设阈值的所述相邻区域确定为该颜色样本区域对应的面部区域；将各个所述颜色样本区域及对应的面部区域进行组合，形成组合面部区域；从所述待处理的图像中提取位于所述组合面部区域内的图像作为所述面部图像。3.根据权利要求1所述的方法，其特征在于，所述对所述面部图像进行掩膜消除，获得非面部ROI对应的目标图像，包括：对所述面部图像进行掩膜消除；根据所述至少一个面部关键点，从消除所述面部图像的待处理的图像上获得所述非面部ROI对应的目标图像。4.根据权利要求1所述的方法，其特征在于，所述根据所述至少一个面部关键点及所述目标图像，对所述待处理的图像中的所述非面部ROI进行识别，包括：根据所述至少一个面部关键点，确定所述目标图像上干扰图像所在的区域，并将所述干扰图像消除；根据所述目标图像上剩余图像相对于各个所述面部关键点所处位置、形状及尺寸，识别所述剩余图像是否为所述非面部ROI。5.根据权利要求1至4中任一所述的方法，其特征在于，所述非面部ROI包括：舌头、牙齿、眼球及胡须中的任意一个。6.一种非面部ROI识别的装置，其特征在于，包括：提取单元、消除单元及识别单元；所述提取单元，用于从待处理的图像中确...

【专利技术属性】
技术研发人员：雷宇，金宇林，伏英娜，
申请(专利权)人：迈吉客科技北京有限公司，
类型：发明
国别省市：北京,11