一种注意力检测方法、装置、系统、终端及存储介质制造方法及图纸

本发明专利技术公开了一种注意力检测方法、装置、系统、终端及存储介质，其中注意力检测方法，应用于终端，包括：获取图像信息和终端的标识信息；利用图像信息对图像中目标的注意力进行检测，得到瞬时注意力；对预设时间段内目标的多个瞬时注意力进行处理，得到目标的平均注意力；将平均注意力和终端的标识信息发送至预设的网络端。本发明专利技术的技术方案将平均注意力发送至网络端，而不是直接将终端获取的图像信息发送至网络端，解决了远程互动过程中参与者由于设备和网络带宽限制无法分享视频时或/和由于隐私原因不愿意分享实时视频，其他人无法获知其注意力状态的问题。

【技术实现步骤摘要】
一种注意力检测方法、装置、系统、终端及存储介质
本专利技术涉及远程控制
，具体涉及一种注意力检测方法、装置、系统、终端及存储介质。
技术介绍
远程教学、远程办公、远程视频会议是网络信息化发展至今的一个显著趋势。通过网络连接，人们可以在各个地方写作办公，或是共享教学资源，极大的提高了生产效率。然而在远程活动中，通常不会让所有参与者的视频都呈现出来。这主要有主客观两方面的原因。在客观方面，由于传输端、网络传输和显示端的设备和网络带宽等技术问题，有时，特别是参与者较多的远程活动，无法让所有参与者的视频一一呈现出来。在主观方面，参与者在某些情况下，比如在家中私密场所，他们不愿意进行视频对话。由此就带来一个问题，参加远程活动的人，特别是主持者，很难了解参与人是否关注远程活动。比如，在远程课堂中，老师无法得知参加的同学是否注意听讲；在远程会议中，发言人也无法确定所有参会人是否认真听取讲话。
技术实现思路
有鉴于此，本专利技术实施例提供了一种注意力检测方法、装置、系统、终端及存储介质，以解决远程互动过程中参与者由于设备和网络带宽限制无法分享视频时或/和由于隐私原因不愿意分享实时视频，其他人无法获知其注意力状态的问题。根据第一方面，本专利技术实施例提供了一种注意力检测方法，包括：获取图像信息和所述终端的标识信息；利用所述图像信息对图像中目标的注意力进行检测，得到瞬时注意力；对预设时间段内所述目标的多个瞬时注意力进行处理，得到所述目标的平均注意力；将所述平均注意力和所述终端的标识信息发送至预设的网络端。结合第一方面，在第一方面第一实施方式中，对预设时间段内所述目标的多个瞬时注意力进行处理，得到所述目标的平均注意力，包括：对预设时间段内所述目标的多个瞬时注意力进行滑动平均计算，得到所述目标的平均注意力。结合第一方面，在第一方面第二实施方式中，利用所述图像信息对图像中目标的注意力进行检测，得到瞬时注意力包括：判断所述图像信息中是否包括所述目标的脸部信息；当所述图像信息中包括所述目标的脸部信息时，基于所述目标的脸部信息得到所述目标的头部姿态信息；根据所述目标的头部姿态信息判断所述目标的头部朝向是否偏出预设范围；当所述目标的头部朝向没有偏出预设范围时，基于所述目标的脸部信息得到所述目标的眼部信息；根据所述目标的眼部信息，得到所述目标的瞬时注意力。结合第一方面第二实施方式，在第一方面第三实施方式中，根据所述目标的眼部信息，得到所述目标的瞬时注意力，包括：根据所述目标的眼部信息判断所述目标是否闭眼；当所述目标闭眼时，得到第一检测结果；当所述目标没有闭眼时，得到第二检测结果。结合第一方面第二实施方式或第三实施方式，在第一方面第四实施方式中，注意力检测方法还包括：当所述图像信息中不包括所述目标的脸部信息时，得到第三检测结果；或/和，当所述目标的头部朝向偏出预设范围时，得到第四检测结果。结合第一方面第二实施方式或第三实施方式，在第一方面第五实施方式中，基于所述目标的脸部信息得到所述目标的头部姿态信息包括：基于所述目标的脸部信息利用预设的深度学习头部姿态检测算法得到所述目标的头部姿态信息；或/和，基于所述目标的脸部信息得到所述目标的眼部信息包括：基于所述目标的脸部信息利用预设的多任务卷积神经网络MTCNN得到所述目标的眼部信息。结合第一方面至第一方面第五实施方式，在第一方面第六实施方式中，在得到所述目标的平均注意力之后，还包括：当所述平均注意力低于预设阈值时，发出提示信息。根据第二方面，本专利技术实施例提供了一种注意力检测装置，包括：获取模块，用于获取图像信息和所述终端的标识信息；处理模块，用于利用所述图像信息对图像中目标的注意力进行检测，得到瞬时注意力；对预设时间段内的所述目标的多个瞬时注意力进行处理，得到所述目标的平均注意力；发送模块，用于将所述平均注意力和所述终端的标识信息发送至预设的网络端。根据第三方面，本专利技术实施例还提供了一种终端，包括存储器和处理器，所述存储器和所述处理器之间互相通信连接，所述存储器中存储有计算机指令，所述处理器通过执行所述计算机指令，从而执行第一方面或者第一方面的任意一种实施方式中所述的注意力检测方法。根据第四方面，本专利技术实施例还提供了一种注意力检测系统，包括第三方面所述的终端及与第三方面所述的终端通讯连接的网络端。根据第五方面，本专利技术实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储计算机指令，所述计算机指令用于使所述计算机执行第一方面或者第一方面的任意一种实施方式中所述的注意力检测方法。本专利技术实施例具有以下优点：本专利技术终端的通过获取图像信息和终端的标识信息，利用图像信息对图像中目标的注意力进行检测得到瞬时注意力；对预设时间段内的目标的多个瞬时注意力进行处理得到目标的平均注意力，并将平均注意力发送至网络端，而不是直接将终端获取的图像信息发送至网络端，解决了远程互动过程中参与者由于设备和网络带宽限制无法分享视频时或/和由于隐私原因不愿意分享实时视频，其他人无法获知其注意力状态的问题。同时，由于发送至预设的网络端的平均注意力为对多个瞬时注意力进行滑动平滑处理得到的，利用该种方法得到的平均注意力可以排除掉偶然的随机影响因素，具有很高的准确性。附图说明通过参考附图会更加清楚的理解本专利技术的特征和优点，附图是示意性的而不应理解为对本专利技术进行任何限制，在附图中：图1为本专利技术提供的一种注意力检测系统的示意图；图2为本专利技术提供的一种注意力检测方法的流程示意图；图3为本专利技术提供的一种注意力检测装置的结构示意图；图4为本专利技术提供的一种计算机可读存储介质的结构示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。实施例1本专利技术实施例1提供了一种注意力检测系统，下面结合附图具体说明。参见图1，该图为本专利技术提供的一种注意力检测系统的示意图。该注意力检测系统，应用于注意力检测，所述检测系统包括：网络端101和终端102。所述终端102用于获取图像信息和终端102的标识信息；利用所述图像信息对图像中目标的注意力进行检测，得到瞬时注意力；对预设时间段内的所述目标的多个瞬时注意力进行处理，得到所述目标的平均注意力；将所述平均注意力和所述终端102的标识信息发送至网络端101。所述网络端101，用于接收终端102发送的平均注意力和标识信息，根据平均注意力和标识信息发出提示消息。可以理解的，所述网络端101可以是服务器，也可以是与终端102进本文档来自技高网...

【技术保护点】
1.一种注意力检测方法，应用于终端，其特征在于，包括：/n获取图像信息和所述终端的标识信息；/n利用所述图像信息对图像中目标的注意力进行检测，得到瞬时注意力；/n对预设时间段内所述目标的多个瞬时注意力进行处理，得到所述目标的平均注意力；/n将所述平均注意力和所述终端的标识信息发送至预设的网络端。/n

【技术特征摘要】
1.一种注意力检测方法，应用于终端，其特征在于，包括：
获取图像信息和所述终端的标识信息；
利用所述图像信息对图像中目标的注意力进行检测，得到瞬时注意力；
对预设时间段内所述目标的多个瞬时注意力进行处理，得到所述目标的平均注意力；
将所述平均注意力和所述终端的标识信息发送至预设的网络端。


2.根据权利要求1所述的注意力检测方法，其特征在于，对预设时间段内所述目标的多个瞬时注意力进行处理，得到所述目标的平均注意力，包括：
对预设时间段内所述目标的多个瞬时注意力进行滑动平均计算，得到所述目标的平均注意力。


3.根据权利要求1所述的注意力检测方法，其特征在于，利用所述图像信息对图像中目标的注意力进行检测，得到瞬时注意力包括：
判断所述图像信息中是否包括所述目标的脸部信息；
当所述图像信息中包括所述目标的脸部信息时，基于所述目标的脸部信息得到所述目标的头部姿态信息；
根据所述目标的头部姿态信息判断所述目标的头部朝向是否偏出预设范围；
当所述目标的头部朝向没有偏出预设范围时，基于所述目标的脸部信息得到所述目标的眼部信息；
根据所述目标的眼部信息，得到所述目标的瞬时注意力。


4.根据权利要求3所述的注意力检测方法，其特征在于，根据所述目标的眼部信息，得到所述目标的瞬时注意力，包括：
根据所述目标的眼部信息判断所述目标是否闭眼；
当所述目标闭眼时，得到第一检测结果；当所述目标没有闭眼时，得到第二检测结果。


5.根据权利要求3或4所述的注意力检测方法，其特征在于，还包括：
当所述图像信息中不包括所述目标的脸部信息时，得到第三检测结果；
或/和，当所述目标的...

【专利技术属性】
技术研发人员：张轶君，朱玉荣，
申请(专利权)人：北京文香信息技术有限公司，
类型：发明
国别省市：北京;11