基于人脸识别技术追踪用户的注意力方法和装置制造方法及图纸

本发明专利技术的实施方式提供了一种追踪用户注意力的方法和装置。该方法包括：通过摄像头获取包含用户人脸的画面；从所述画面中识别出用户的人脸信息；提取所述用户人脸信息的特征点；根据所述人脸信息的特征点在所述画面上位置以及拍摄人脸画面的摄像头的位置，生成人脸相对于所述摄像头的相对位置和朝向；基于所述相对位置和朝向确定用户注意力所在区域。本发明专利技术提供的技术方案能够通过对用户注意力的追踪以及统计使向用户推送以及展示的内容更加的符合用户的需求，为用户带来了更好的体验，并且降低了成本。

Attention tracking method and device based on face recognition technology

【技术实现步骤摘要】
基于人脸识别技术追踪用户的注意力方法和装置
本专利技术的实施方式涉及人脸识别领域，尤其涉及一种基于人脸识别技术追踪用户的注意力的方法和装置。
技术介绍
本部分旨在为权利要求书中陈述的本专利技术的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。在现有技术中，追踪用户的注意力的方法主要是应用专业的眼球跟踪仪通过眼球追踪技术判断用户此时的注意力，现有的眼球追踪技术一般的流程通常是利用红外摄像头获取人眼部的图像信息，通过图像算法确定出瞳孔中心，根据映射关系模型求出眼睛在屏幕上的注视点。但是由于专业的眼球追踪仪的成本较高，所以眼球追踪技术现多用于VR、实验心理学、应用心理学、工程心理学、认知神经科学等领域。近年来，国内在视线跟踪领域的研究日益活跃。天津师范大学刘瑞安对基于人脸识别技术自适应视线跟踪方法展开了研究，该研究方式所提到的人脸识别算法是相对早期的，现在所使用深度学习的人脸识别从效率、准确路上会高于上述文中的2DPCA这类算法，并且文中主要提及的是如何提取人脸特征，关于如何从人脸朝向映射到屏幕上被关注的坐标本文档来自技高网...

【技术保护点】
1.一种追踪用户注意力的方法，其特征在于，包括：/n通过摄像头获取包含用户人脸的画面；/n从所述画面中识别出用户的人脸信息；/n提取所述用户人脸信息的特征点；/n根据所述人脸信息的特征点在所述画面上位置以及拍摄人脸画面的摄像头的位置，生成人脸相对于所述摄像头的相对位置和朝向；/n基于所述相对位置和朝向确定用户注意力所在区域。/n

【技术特征摘要】
1.一种追踪用户注意力的方法，其特征在于，包括：
通过摄像头获取包含用户人脸的画面；
从所述画面中识别出用户的人脸信息；
提取所述用户人脸信息的特征点；
根据所述人脸信息的特征点在所述画面上位置以及拍摄人脸画面的摄像头的位置，生成人脸相对于所述摄像头的相对位置和朝向；
基于所述相对位置和朝向确定用户注意力所在区域。


2.根据权利要求1所述的方法，其特征在于，预先确定所述摄像头与一屏幕的相对位置，其中所述基于所述人脸朝向确定用户注意力所在区域的步骤包括：
基于所述摄像头、所述屏幕与人脸的相对位置关系以及所述人脸的朝向确定用户注意力在屏幕上的区域。


3.根据权利要求2所述的方法，其特征在于，所述基于所述摄像头、屏幕与人脸的相对位置关系以及所述人脸的朝向确定用户注意力在屏幕上的区域的步骤包括：
利用已知的所述屏幕、摄像头与人脸的相对位置关系以及所述人脸的朝向和用户注意力在屏幕上的区域对注意力计算模型进行训练，得到训练后的注意力计算模型；
将检测或计算得到的所述屏幕、摄像头以及人脸的相对位置关系以及所述人脸的朝向输入到训练后的注意力计算模型得出当前用户注意力在屏幕上的区域。


4.根据权利要求2所述的方法，其特征在于，所述基于所述摄像头、屏幕与人脸的相对位置关系以及所述人脸的朝向确定用户注意力在屏幕上的区域的步骤包括：
将所述摄像头、屏幕与人脸的相对位置关系以及所述人脸的朝向代入预定公式计算出用户注意力在屏幕上的区域。


5.根据权利要求4所述的方法，其特征在于，所述将所述摄像头、屏幕与人脸的相对位置关系以及所述人脸的朝向代入预定公式计算出用户注意力在屏幕上的区域的步骤包括：
获取人脸上鼻尖在屏幕上的投影坐标；
获取人脸上山根在屏幕上的投影坐标；
获取人脸脸颊连线中点在屏幕上的投影坐标；
基于上述三个特征点的投影坐标计算人脸的俯仰角和偏转角；
基于所述人脸的俯仰角和偏转角计算注意力在屏幕上相对于所述人脸脸颊连线中点在屏幕上投影坐标的偏移量；
基于所述偏移量和所述人脸脸颊连线中点的坐标计算所述注意力在屏幕上的坐标。


6.一种追踪用户注意力的装置，其特征在于，包括：
获取人...

【专利技术属性】
技术研发人员：乔丹，冯小平，龙超，李广松，陈月，
申请(专利权)人：北京大蛋科技有限公司，
类型：发明
国别省市：北京;11