对象被关注的识别方法、装置、设备及存储介质制造方法及图纸

本申请涉及一种对象被关注的识别方法、装置、设备和存储介质，通过检测待识别图像中人脸偏航角和人脸俯仰角，以及检测待识别图像中人眼的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角，综合人脸偏航角、人脸俯仰角、左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角，分别判断人脸、左眼和右眼是否为有效关注，基于判断人脸、左眼和右眼是否为有效关注的结果，确定对象是否被关注，实现了人脸与眼部的特征结合判断对象是否被关注的目的，解决了仅通过人脸角度判断行人关注度过程中存在的误判或漏检的问题，从而能够更准确的确定对象是否真正被关注，有效的提高了对象被关注的识别准确性。

【技术实现步骤摘要】
对象被关注的识别方法、装置、设备及存储介质
本申请涉及人工智能
，尤其涉及一种对象被关注的识别方法、装置、设备及存储介质。
技术介绍
随着社会信息化的不断深化，人们在生活中随处可以看到投放各种信息(广告、通知等)的信息投放装置，例如电子广告屏，这些信息投放装置会统计行人对投放信息的关注度。对行人关注度的计算方法很多，目前大多是以人脸识别技为主。通过在广告屏一侧设置拍摄装置，比如摄像头，利用摄像头采集的图像进行人脸检测，将获得人脸角度信息与阈值比较进行判断，确定行人对广告屏的关注状态，根据行人的关注状态对投放信息是否有效进行标定。但将人脸角度信息与设置的阈值的比较结果作为是否关注的判断依据，会对行人关注度产生误判或漏检的情况，造成行人关注度统计不准确的问题，进而影响对投放信息是否有效的标定。
技术实现思路
本申请提供了一种对象被关注的识别方法、装置、设备及存储介质，用以解决行人关注度统计过程中存在的误判或漏检的问题，提高对象被关注的识别准确性。第一方面，本申请实施例提供了一种对象被关注的识别方法，包括：一种对象被关注的识别方法，包括：获取从对象的方向拍摄得到的包含人脸的待识别图像；检测所述待识别图像中人脸偏航角和人脸俯仰角，以及检测所述待识别图像中人眼的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角；根据所述人脸偏航角和所述人脸俯仰角判断所述人脸是否为有效关注，获得第一判断结果；根据所述左眼偏航角和所述左眼俯仰角判断所述左眼是否为有效关注，获得第二判断结果；根据所述右眼偏航角和所述右眼俯仰角判断所述右眼是否为有效关注，获得第三判断结果；根据所述第一判断结果、所述第二判断结果和所述第三判断结果，获得所述对象是否被关注的检测结果。可选的，根据所述人脸偏航角和所述人脸俯仰角判断所述人脸是否为有效关注，获得第一判断结果之前，还包括：检测所述待识别图像中的瞳孔像距；计算所述瞳孔像距、预设瞳距、所述人脸偏航角和拍摄参数，得到所述人脸与所述对象的距离；确定所述人脸与所述对象的距离小于预设距离。可选的，所述根据所述第一判断结果、所述第二判断结果和所述第三判断结果，获得所述对象是否被关注的检测结果，包括：若所述第一判断结果为所述人脸为有效关注，所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼为有效关注，根据人脸置信度确定人脸投票分数，根据左眼置信度确定左眼投票分数，根据右眼置信度确定右眼投票分数，根据所述人脸投票分数、所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述人脸为有效关注、所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼不是有效关注，根据所述人脸置信度确定人脸投票分数，根据所述左眼置信度确定左眼投票分数，根据所述人脸投票分数和所述左眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述人脸为有效关注、所述第三判断结果为右眼为有效关注，所述第二判断结果为所述左眼不是有效关注，根据所述人脸置信度确定人脸投票分数，根据所述右眼置信度确定右眼投票分数，根据所述人脸投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述人脸不是有效关注，所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼为有效关注，根据所述左眼置信度确定左眼投票分数，根据所述右眼置信度确定右眼投票分数，根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述人脸为有效关注、所述第二判断结果为所述左眼不是有效关注，所述第三判断结果为所述右眼不是有效关注，根据所述人脸置信度确定人脸投票分数，根据所述人脸投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述人脸不是有效关注、所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼不是有效关注，根据所述左眼置信度确定左眼投票分数，根据所述左眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述人脸不是有效关注、所述第二判断结果为所述左眼不是有效关注，所述第三判断结果为所述右眼为有效关注，根据所述右眼置信度确定右眼投票分数，根据所述右眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述人脸不是有效关注，所述第二判断结果为所述左眼不是有效关注，所述第三判断结果为所述右眼不是有效关注，获得所述对象没有被关注的检测结果。可选的，所述根据所述人脸投票分数、所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果包括：判断是否满足所述人脸投票分数大于第一预设分数，所述左眼投票分数大于第一预设分数，且所述右眼投票分数大于所述第一预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；根据所述人脸投票分数和所述左眼投票分数，获得所述对象是否被关注的检测结果，包括：判断是否满足所述人脸投票分数大于第二预设分数，且所述左眼投票分数大于第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；所述根据所述人脸投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果包括：判断是否满足所述人脸投票分数大于第二预设分数，所述右眼投票分数大于第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；所述根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果，包括：判断是否满足所述左眼投票分数大于第二预设分数，且所述右眼投票分数大于所述第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；所述根据所述人脸投票分数，获得所述对象是否被关注的检测结果包括：判断是否满足所述人脸投票分数大于第三预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；所述根据所述左眼投票分数，获得所述对象是否被关注的检测结果，包括：判断是否满足所述左眼投票分数大于第三预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；所述根据所述右眼投票分数，获得所述对象是否被关注的检测结果，包括：判断是否满足所述右眼投票分数大于所述第三预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；其中，所述第三预设分数不小于所述第二预设分数，所述第二预设分数不小于所述第一预设分数。可选的，所述检测所述待识别图像中人眼的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角，包括：识别所述待识别图像中的人眼图像；对所述人眼图像进行视线检测，获得左眼虹膜特征点、左眼眼球特征点、右眼虹膜特征点和右眼眼球特征点；根据所述本文档来自技高网...

【技术保护点】
1.一种对象被关注的识别方法，其特征在于，包括：/n获取从对象的方向拍摄得到的包含人脸的待识别图像；/n检测所述待识别图像中人脸偏航角和人脸俯仰角，以及检测所述待识别图像中人眼的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角；/n根据所述人脸偏航角和所述人脸俯仰角判断所述人脸是否为有效关注，获得第一判断结果；/n根据所述左眼偏航角和所述左眼俯仰角判断所述左眼是否为有效关注，获得第二判断结果；/n根据所述右眼偏航角和所述右眼俯仰角判断所述右眼是否为有效关注，获得第三判断结果；/n根据所述第一判断结果、所述第二判断结果和所述第三判断结果，获得所述对象是否被关注的检测结果。/n

【技术特征摘要】
1.一种对象被关注的识别方法，其特征在于，包括：
获取从对象的方向拍摄得到的包含人脸的待识别图像；
检测所述待识别图像中人脸偏航角和人脸俯仰角，以及检测所述待识别图像中人眼的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角；
根据所述人脸偏航角和所述人脸俯仰角判断所述人脸是否为有效关注，获得第一判断结果；
根据所述左眼偏航角和所述左眼俯仰角判断所述左眼是否为有效关注，获得第二判断结果；
根据所述右眼偏航角和所述右眼俯仰角判断所述右眼是否为有效关注，获得第三判断结果；
根据所述第一判断结果、所述第二判断结果和所述第三判断结果，获得所述对象是否被关注的检测结果。


2.根据权利要求1所述的对象被关注的识别方法，其特征在于，所述根据所述人脸偏航角和所述人脸俯仰角判断所述人脸是否为有效关注，获得第一判断结果之前，还包括：
检测所述待识别图像中的瞳孔像距；
计算所述瞳孔像距、预设瞳距、所述人脸偏航角和拍摄参数，得到所述人脸与所述对象的距离；
确定所述人脸与所述对象的距离小于预设距离。


3.根据权利要求1所述的对象被关注的识别方法，其特征在于，所述根据所述第一判断结果、所述第二判断结果和所述第三判断结果，获得所述对象是否被关注的检测结果，包括：
若所述第一判断结果为所述人脸为有效关注，所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼为有效关注，根据人脸置信度确定人脸投票分数，根据左眼置信度确定左眼投票分数，根据右眼置信度确定右眼投票分数，根据所述人脸投票分数、所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述人脸为有效关注、所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼不是有效关注，根据所述人脸置信度确定人脸投票分数，根据所述左眼置信度确定左眼投票分数，根据所述人脸投票分数和所述左眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述人脸为有效关注、所述第三判断结果为右眼为有效关注，所述第二判断结果为所述左眼不是有效关注，根据所述人脸置信度确定人脸投票分数，根据所述右眼置信度确定右眼投票分数，根据所述人脸投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述人脸不是有效关注，所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼为有效关注，根据所述左眼置信度确定左眼投票分数，根据所述右眼置信度确定右眼投票分数，根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述人脸为有效关注、所述第二判断结果为所述左眼不是有效关注，所述第三判断结果为所述右眼不是有效关注，根据所述人脸置信度确定人脸投票分数，根据所述人脸投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述人脸不是有效关注、所述第二判断结果为所述左眼为有效关注，所述第三判断结果为所述右眼不是有效关注，根据所述左眼置信度确定左眼投票分数，根据所述左眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述人脸不是有效关注、所述第二判断结果为所述左眼不是有效关注，所述第三判断结果为所述右眼为有效关注，根据所述右眼置信度确定右眼投票分数，根据所述右眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述人脸不是有效关注，所述第二判断结果为所述左眼不是有效关注，所述第三判断结果为所述右眼不是有效关注，获得所述对象没有被关注的检测结果。


4.根据权利要求3所述的对象被关注的识别方法，其特征在于，所述根据所述人脸投票分数、所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果包括：
判断是否满足所述人脸投票分数大于第一预设分数，所述左眼投票分数大于第一预设分数，且所述右眼投票分数大于所述第一预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；
根据所述人脸投票分数和所述左眼投票分数，获得所述对象是否被关注的检测结果，包括：
判断是否满足所述人脸投票分数大于第二预设分数，且所述左眼投票分数大于第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；
所述根据所述人脸投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果包括：
判断是否满足所述人脸投票分数大于第二预设分数，所述右眼投票分数大于第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；
所述根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结...

【专利技术属性】
技术研发人员：王占亮，
申请(专利权)人：京东数字科技控股有限公司，
类型：发明
国别省市：北京;11