对象被关注的识别方法、装置、设备及存储介质制造方法及图纸

本申请涉及一种对象被关注的识别方法、装置、设备和存储介质，通过检测待识别图像中人脸偏航角和人脸俯仰角，以及检测待识别图像中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角，综合人脸偏航角、人脸俯仰角、左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角，分别判断左眼和右眼是否为有效关注，基于判断左眼和右眼是否为有效关注的结果，确定对象是否被关注，实现了结合眼部的特征判断对象是否被关注的目的，解决了仅通过人脸角度判断行人关注度过程中存在的误判或漏检的问题，从而能够更准确的确定对象是否真正被关注，有效的提高了对象被关注的识别准确性。

【技术实现步骤摘要】
对象被关注的识别方法、装置、设备及存储介质
本申请涉及人工智能
，尤其涉及一种对象被关注的识别方法、装置、设备及存储介质。
技术介绍
随着社会信息化的不断深化，人们在生活中随处可以看到投放各种信息(广告、通知等)的信息投放装置，例如电子广告屏，这些信息投放装置会统计行人对投放信息的关注度。对行人关注度的计算方法很多，目前大多是以人脸识别技为主。通过在广告屏一侧设置拍摄装置，比如摄像头，利用摄像头采集的图像进行人脸检测，将获得人脸角度信息与阈值比较进行判断，确定行人对广告屏的关注状态，根据行人的关注状态对投放信息是否有效进行标定。但将人脸角度信息与设置的阈值的比较结果作为是否关注的判断依据，会对行人关注度产生误判或漏检的情况，造成行人关注度统计不准确的问题，进而影响对投放信息是否有效的标定。
技术实现思路
本申请提供了一种对象被关注的识别方法、装置、设备及存储介质，用以解决行人关注度统计过程中存在的误判或漏检的问题，提高对象被关注的识别准确性。第一方面，本申请实施例提供了一种对象被关注的识别方法，包括：获取从对象的方向拍摄得到的包含人脸的待识别图像；检测所述待识别图像中人脸偏航角和人脸俯仰角，以及检测所述待识别图像中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角；根据所述左眼偏航角、所述人脸偏航角、所述左眼俯仰角和所述人脸俯仰角，判断左眼是否为有效关注，获得第一判断结果；根据所述右眼偏航角、所述人脸偏航角、所述右眼俯仰角和所述人脸俯仰角，判断右眼是否为有效关注，获得第二判断结果；根据所述第一判断结果和所述第二判断结果，获得所述对象是否被关注的检测结果。可选的，所述根据所述第一判断结果和所述第二判断结果，获得所述对象是否被关注的检测结果，包括：若所述第一判断结果为所述左眼为有效关注，所述第二判断结果为所述右眼为有效关注，根据左眼置信度确定左眼投票分数，根据右眼置信度确定右眼投票分数，根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述左眼为有效关注，所述第二判断结果为所述右眼不是有效关注，根据所述左眼置信度确定左眼投票分数，根据所述左眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述左眼不是有效关注，所述第二判断结果为所述右眼为有效关注，根据所述右眼置信度确定右眼投票分数，根据所述右眼投票分数，获得所述对象是否被关注的检测结果；若所述第一判断结果为所述左眼不是有效关注，所述第二判断结果为所述右眼不是有效关注，获得所述对象没有被关注的检测结果。可选的，所述根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果，包括：判断是否满足所述左眼投票分数大于第一预设分数，且所述右眼投票分数大于所述第一预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；所述根据所述左眼投票分数，获得所述对象是否被关注的检测结果，包括：判断是否满足所述左眼投票分数大于第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；所述根据所述右眼投票分数，获得所述对象是否被关注的检测结果，包括：判断是否满足所述右眼投票分数大于所述第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；其中，所述第二预设分数不小于所述第一预设分数。可选的，所述检测所述待识别图像中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角，包括：检测所述待识别图像中的眼部图像；对所述眼部图像进行视线检测，确定左眼虹膜中心坐标、左眼眼球中心坐标、右眼虹膜中心坐标、右眼眼球中心坐标和眼球半径；根据所述左眼虹膜中心坐标、所述左眼眼球中心坐标和所述眼球半径，计算得到所述左眼偏航角和所述左眼俯仰角；根据所述右眼虹膜中心坐标、所述右眼眼球中心坐标和所述眼球半径，计算得到所述右眼偏航角和所述右眼俯仰角。可选的，所述根据所述左眼偏航角、所述人脸偏航角、所述左眼俯仰角和所述人脸俯仰角，判断左眼是否为有效关注，获得第一判断结果，包括：计算所述左眼偏航角与所述人脸偏航角的和，得到第一和值，计算所述左眼俯仰角与所述人脸俯仰角的和，得到第二和值；判断是否同时满足所述第一和值小于预设左眼偏航角上限阈值且大于预设左眼偏航角下限阈值，所述第二和值小于预设左眼俯仰角上限阈值且大于预设左眼俯仰角下限阈值，若是，获得所述第一判断结果为所述左眼为有效关注，否则，获得所述第一判断结果为所述左眼为无效关注。可选的，所述根据所述右眼偏航角、所述人脸偏航角、所述右眼俯仰角和所述人脸俯仰角，判断右眼是否为有效关注，获得第二判断结果，包括：计算所述右眼偏航角与所述人脸偏航角之和，得到第三和值，计算所述右眼俯仰角与所述人脸俯仰角之和，得到第四和值；判断是否同时满足所述第三和值小于预设右眼偏航角上限阈值且大于预设右眼偏航角下限阈值，所述第四和值小于预设右眼俯仰角上限阈值且大于预设右眼俯仰角下限阈值，若是，获得所述第二判断结果为所述右眼为有效关注，否则，获得所述第二判断结果为所述右眼为无效关注。可选的，所述对所述眼部图像进行视线检测，确定所述眼球半径，包括：根据所述眼部图像进行视线检测，获得原始眼球半径；根据所述人脸偏航角、拍摄参数、预设眼球半径和预设瞳距，计算得到预估眼球半径；根据所述预估眼球半径，对所述原始眼球半径进行修正，确定所述眼球半径。可选的，所述根据所述人脸偏航角、拍摄参数、预设眼球半径和预设瞳距，计算得到预估眼球半径包括：判断所述人脸偏航角的绝对值是否小于预设小角度阈值；若是，获取所述眼部图像的瞳距成像距离所占像素数，根据所述人脸偏航角、所述预设眼球半径、所述预设瞳距和所述瞳距成像距离所占像素数，计算得到眼球半径成像距离所占像素数，将所述眼球半径成像距离所占像素数作为所述预估眼球半径；若不是，根据所述人脸偏航角、所述预设眼球半径、所述预设瞳距和所述拍摄参数，利用光学成像原理和成像相似原理，计算得到所述预估眼球半径。可选的，所述在检测所述待识别图像中人脸偏航角和人脸俯仰角后，在检测所述待识别图像中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角之前包括：根据所述人脸偏航角和人脸俯仰角判断是否检测所述待识别图像中的人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角。第二方面，本申请实施例提供了一种对象被关注的识别装置，包括：第一获取模块，用于获取从对象的方向拍摄得到的包含人脸的待识别图像；检测模块，用于检测所述待识别图像中人脸偏航角和人脸俯仰角，以及所述待检测图中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角；第一判断模块，用于根据所述左眼偏航角、所述人脸偏航角、所述左眼俯仰角和所述人脸俯仰角本文档来自技高网...

【技术保护点】
1.一种对象被关注的识别方法，其特征在于，包括：/n获取从对象的方向拍摄得到的包含人脸的待识别图像；/n检测所述待识别图像中人脸偏航角和人脸俯仰角，以及检测所述待识别图像中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角；/n根据所述左眼偏航角、所述人脸偏航角、所述左眼俯仰角和所述人脸俯仰角，判断左眼是否为有效关注，获得第一判断结果；/n根据所述右眼偏航角、所述人脸偏航角、所述右眼俯仰角和所述人脸俯仰角，判断右眼是否为有效关注，获得第二判断结果；/n根据所述第一判断结果和所述第二判断结果，获得所述对象是否被关注的检测结果。/n

【技术特征摘要】
1.一种对象被关注的识别方法，其特征在于，包括：
获取从对象的方向拍摄得到的包含人脸的待识别图像；
检测所述待识别图像中人脸偏航角和人脸俯仰角，以及检测所述待识别图像中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角；
根据所述左眼偏航角、所述人脸偏航角、所述左眼俯仰角和所述人脸俯仰角，判断左眼是否为有效关注，获得第一判断结果；
根据所述右眼偏航角、所述人脸偏航角、所述右眼俯仰角和所述人脸俯仰角，判断右眼是否为有效关注，获得第二判断结果；
根据所述第一判断结果和所述第二判断结果，获得所述对象是否被关注的检测结果。


2.根据权利要求1所述的对象被关注的识别方法，其特征在于，所述根据所述第一判断结果和所述第二判断结果，获得所述对象是否被关注的检测结果，包括：
若所述第一判断结果为所述左眼为有效关注，所述第二判断结果为所述右眼为有效关注，根据左眼置信度确定左眼投票分数，根据右眼置信度确定右眼投票分数，根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述左眼为有效关注，所述第二判断结果为所述右眼不是有效关注，根据所述左眼置信度确定左眼投票分数，根据所述左眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述左眼不是有效关注，所述第二判断结果为所述右眼为有效关注，根据所述右眼置信度确定右眼投票分数，根据所述右眼投票分数，获得所述对象是否被关注的检测结果；
若所述第一判断结果为所述左眼不是有效关注，所述第二判断结果为所述右眼不是有效关注，获得所述对象没有被关注的检测结果。


3.根据权利要求2所述对象被关注的识别的方法，其特征在于，所述根据所述左眼投票分数和所述右眼投票分数，获得所述对象是否被关注的检测结果，包括：
判断是否满足所述左眼投票分数大于第一预设分数，且所述右眼投票分数大于所述第一预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；
所述根据所述左眼投票分数，获得所述对象是否被关注的检测结果，包括：
判断是否满足所述左眼投票分数大于第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；
所述根据所述右眼投票分数，获得所述对象是否被关注的检测结果，包括：
判断是否满足所述右眼投票分数大于所述第二预设分数，若是，获得所述对象被关注的检测结果，否则，获得所述对象没有被关注的检测结果；
其中，所述第二预设分数不小于所述第一预设分数。


4.根据权利要求1所述的对象被关注的识别方法，其特征在于，所述检测所述待识别图像中人脸的左眼偏航角、左眼俯仰角、右眼偏航角和右眼俯仰角，包括：
检测所述待识别图像中的眼部图像；
对所述眼部图像进行视线检测，确定左眼虹膜中心坐标、左眼眼球中心坐标、右眼虹膜中心坐标、右眼眼球中心坐标和眼球半径；
根据所述左眼虹膜中心坐标、所述左眼眼球中心坐标和所述眼球半径，计算得到所述左眼偏航角和所述左眼俯仰角；
根据所述右眼虹膜中心坐标、所述右眼眼球中心坐标和所述眼球半径，计算得到所述右眼偏航角和所述右眼俯仰角。


5.根据权利要求1至4任一项所述的对象被关注的识别方法，其特征在于，所述根据所述左眼偏航角、所述人脸偏航角、所述左眼俯仰角和所述人脸俯仰角，判断左眼是否为有效关注，获得第一判断结果，包括：
计算所述左眼偏航角与所述人脸偏航角的和，得到第一和值，计算所述左眼俯仰角与所述人脸俯仰角的和，得到第二和值；
判断是否同时满足所述第一和值...

【专利技术属性】
技术研发人员：王占亮，
申请(专利权)人：京东数字科技控股有限公司，
类型：发明
国别省市：北京;11