一种基于情绪识别技术的智能门控安防方法技术

本发明专利技术公开了一种基于情绪识别技术的智能门控安防方法，能够通过对用户情绪状态的智能检测分析，实现对潜在可疑访客的主动发现预警，实现家庭智能设备与主人间的人机互动和情感交互。其中，视频数据流接收模块接收外来视频数据；人脸识别比对模块用于判定用户是家庭成员还是外来访客；情绪状态评估模块用于实现对家庭成员情绪状态的识别和评估；情感智能交互模块用于实现对家庭智能设备的联动控制和人机交互；异常情绪检测模块用于检测外来访客是否存在异常情绪；可疑访客报警模块用于实现对异常情绪访客的报警推送；情绪状态数据库用于情绪状态数据的存取；情感数据分析模块用于实现对家庭成员、外来访客情绪状态数据的汇总统计分析。

【技术实现步骤摘要】
一种基于情绪识别技术的智能门控安防方法
本专利技术涉及门控安防
，特别是涉及一种基于情绪识别技术的智能门控安防方法。
技术介绍
随着人工智能大潮的持续推动，智能家庭产业迅猛发展，“智能化”是未来家庭的必然发展趋势。门锁是家庭安全的第一道防线，因此实现“智能门控安防”是实现智能家庭的先决条件。当前，各大传统厂商及新兴互联网企业纷纷发力智能门控安防市场，智能门控安防市场呈爆发式增长态势。当前，各大厂商纷纷引入指纹识别、虹膜识别、人脸识别等先进技术，以提升自家智能门控安防产品的技术含量与核心竞争力。其中，内置人脸识别技术的智能门控安防可通过电子猫眼实时对用户进行人脸识别，并将其与已知的人脸进行对比，从而最终实现验证开门的过程。由于这种技术本身属于非接触式身份识别技术，无需与识别设备发生接触，从而提升了用户对上述技术的接受程度，再加上人脸识别速度快、精度高，因此在安全性和操作性方面广受欢迎，成为智能门控安防普遍采用的身份识别技术之一。然而，当前基于人脸识别技术的智能门控安防也存在一定的局限性。通常来讲，这种智能门控安防只会根据电子猫眼所采集的用户面部图像数据对用户进行身份辨认，以此判定该用户是主人还是访客，但是不具备对该用户的情绪状态的实时识别分析能力。而在现实场景中，不管是对于主人还是对于访客，情绪状态都是一种非常有价值的参考信息。举例来说，若能进一步实现对用户情绪状态的实时识别和分析，可有助于辅助实现对潜在可疑访客的主动发现和预警，同时还能够基于主人的情绪状态实现主人与各种家庭智能设备间更好的人机互动和情感交互。
技术实现思路
为了克服上述现有技术的不足，本专利技术在于提供一种基于情绪识别技术的智能门控安防方法。与现有的智能门控安防技术相比，本专利技术所提供的智能门控安防方法能够实现对用户情绪状态的实时感知、识别和分析，从而能够实现对潜在可疑访客的主动发现和预警，能够基于主人的情绪状态实现主人与各种家庭智能设备间更好的人机互动和情感交互。本专利技术所提供的基于情绪识别技术的智能门控安防方法，其基本功能流程如附图1所示。其中：视频数据流接收模块负责接收来自电子猫眼、监控摄像头所采集的视频数据；人脸识别比对模块负责判定用户的身份是家庭成员还是外来访客；情绪状态评估模块负责实现对家庭成员情绪状态的识别和评估；情感智能交互模块负责根据家庭成员的情绪状态评估结果实现对家庭智能设备相应工作状态的切换；异常情绪检测模块负责检测外来访客人员是否存在包括愤怒、攻击倾向在内的异常情绪；可疑访客报警模块负责实现对存在异常情绪的外来访客的报警信息推送；情绪状态数据库模块用于家庭成员和外来访客的情绪状态数据的存取；情感数据分析模块负责实现对家庭成员、外来访客情绪状态数据的汇总统计和分析。与现有技术相比，本专利技术的有益效果是：本专利技术提供的是一种基于情绪识别技术的智能门控安防方法，除了能够实现对来访人员的身份(家庭成员/外来访客)进行识别以外，还能够对家庭成员和外来访客的情绪状态进行实时的感知、识别和分析，从而能够实现对潜在可疑访客的主动发现和预警，实现对家庭成员情绪状态的客观评估，从而可以基于家庭成员的情绪状态实现家人与各种家庭智能设备间更好的人机互动和情感交互。附图说明图1为该方法的具体功能流程图。具体实施方式下面结合附图对本专利技术进一步说明。在本专利技术中，视频数据流接收模块负责接收来自电子猫眼、监控摄像头等视频采集设备所采集的视频数据，并将数据推送给人脸识别比对模块。人脸识别比对模块负责判定用户的身份，即判断该用户是家庭成员还是外来访客；该模块基于FaceNet构建，并使用MySQL数据库进行人脸相关图像数据信息的存取；如果判定结果是家人，则触发情绪状态评估模块，否则触发异常情绪检测模块。情绪状态评估模块负责实现对家庭成员情绪状态的识别和评估；其中，识别过程基于人的面部表情识别和生理振动分析两种方式综合判定，评估过程的最终结果分为正面、负面、中性3种状态。情感智能交互模块负责根据家庭成员的情绪状态评估结果实现对家庭智能设备的联动控制和人机交互(根据家庭成员情绪状态的不同，自动切换室内相关智能设备的工作状态)；该模块同各智能设备的联动过程基于WiFi和ZigBee两种网络连接方式。异常情绪检测模块负责检测外来访客人员是否存在包括愤怒、攻击倾向在内的异常情绪；其中，检测过程基于人的面部表情识别和生理振动分析两种方式综合判定；如果判定结果为是，则会触发可疑访客报警模块。其中，情绪状态评估模块和异常情绪检测模块中的生理振动分析是指通过对人的面部肌肉微小振动的振幅和频率进行量化计算，以此得出该人的情绪状态值；其中所述振幅由公式确定，其中x、y代表图像中该点的坐标值，n代表图像的总帧数，Vx,y,i代表在第i帧中该点的位移幅度；所述频率由公式确定，其中Δi代表图像的第i个点在不同帧之间的差异。可疑访客报警模块负责将存在异常情绪的外来访客报警信息推送至预先设定的智能终端，以提醒主人该外来访客存在情绪异常；其中所述报警信息具体包含时间、地点、访客图像、逗留时长、逗留次数等。情绪状态数据库模块通过使用MySQL数据库实现上述情绪状态评估模块和异常情绪检测模块所生成的结果数据的汇总存储。情感数据分析模块负责实现对家庭成员、外来访客情绪状态汇总数据的统计分析，包括不同情绪状态出现的次数、持续时长等；一方面分析和评估家庭成员特定时段内的情绪变化情况，以便更好的实现情感智能交互；另一方面，还可识别出潜在的经常出没在门外的可疑人员，提醒主人采取进一步防范措施。本文档来自技高网...

【技术保护点】
1.一种基于情绪识别技术的智能门控安防方法，其特征在于：能够通过对用户情绪状态的智能检测和分析，实现对潜在可疑访客的主动发现和预警，实现家庭智能设备与主人间更人性化的人机互动和情感交互，具体包括视频数据流接收、人脸识别比对、情绪状态评估、情感智能交互、异常情绪检测、可疑访客报警、情绪状态数据库、情感数据分析八个功能模块。/n

【技术特征摘要】
1.一种基于情绪识别技术的智能门控安防方法，其特征在于：能够通过对用户情绪状态的智能检测和分析，实现对潜在可疑访客的主动发现和预警，实现家庭智能设备与主人间更人性化的人机互动和情感交互，具体包括视频数据流接收、人脸识别比对、情绪状态评估、情感智能交互、异常情绪检测、可疑访客报警、情绪状态数据库、情感数据分析八个功能模块。


2.根据权利要求1所述的方法，其特征在于：所述人脸识别比对模块用于判定用户的身份是家庭成员还是外来访客；该模块基于FaceNet构建，并使用MySQL数据库进行人脸相关图像数据信息的存取。


3.根据权利要求1所述的方法，其特征在于：所述情绪状态评估模块用于实现对家庭成员情绪状态的识别和评估；其中，识别过程基于人的面部表情识别和生理振动分析两种方式综合判定，评估过程的最终结果分为正面、负面、中性三种状态。


4.根据权利要求1所述的方法，其特征在于：所述情感智能交互模块用于根据家庭成员的情绪状态评估结果实现对家庭智能设备相应工作状态的切换；其中，该模块同各智能设备的联动过程基于WiFi和ZigBee两种网络连接方式。


5.根据权利要求1所述的方法，其特征在于：所述异常情绪检测模块用于检...

【专利技术属性】
技术研发人员：王春雷，尉迟学彪，毛鹏轩，
申请(专利权)人：北京入思技术有限公司，
类型：发明
国别省市：北京;11