用户场景分析装置及方法制造方法及图纸

本发明专利技术提供了一种用户场景分析装置及方法，包括：视频图像获取模块，用于根据预设规则从视频流中提取至少一帧视频图像；有效用户识别模块，用于根据视频图像获取模块提取的视频图像对当前有效用户进行识别；用户场景匹配模块，用于根据有效用户识别模块识别出的有效用户对用户场景进行匹配，完成用户场景分析。其不仅适用单用户应用场景，同时适用多用户场景，且针对视频图像中出现的所有用户进行有效用户识别，以此更加真实准确的理解场景，便于更加准确的为用户提供定制化服务，如智能电视根据匹配的应用场景推荐节目，或智能家居对用户使用的数据进行搜集操作等。

User Scene Analysis Device and Method

The invention provides a user scene analysis device and method, including: a video image acquisition module for extracting at least one video image from a video stream according to preset rules; an effective user identification module for recognizing the current effective user according to the video image extracted by the video image acquisition module; and a user field. Scene matching module is used to match user scenarios and complete user scenario analysis according to the effective user recognition module. It is not only suitable for single-user application scenarios, but also for multi-user scenarios. It can recognize all users in video images effectively, so as to understand the scenarios more truly and accurately and provide customized services for users more accurately, such as intelligent TV recommending programs according to matching application scenarios, or Smart home collects and operates data used by users.

【技术实现步骤摘要】
用户场景分析装置及方法
本专利技术涉及智能家居
，尤其涉及一种用户场景分析装置及方法。
技术介绍
对于家用电器，目前大多数还是通过操控面板、遥控器等进行控制，随着AI(ArtificialIntelligence，人工智能)时代的到来，尤其是随着计算机视觉与语音识别技术的飞速发展，家居控制已实质性的向智能化发展并逐步普及，提升家居环境的安全性、便利性、舒适性、节能性等。随着人们对智能家居需求的不断提升，计算机视觉相关技术在智能家居中会应用的更加广泛，如基于图像的人脸识别技术，在智能电视中通过人脸识别完成对电视的相关控制、节目推荐等。目前，有不少通过人脸识别实现对家居控制的方法，如通过搭载在电视上的摄像头实时监控观看电视的用户，并利用人脸识别技术分析该用户的身份，进而向其推荐适合的电视节目。但是，在现有的技术方案中，通常都是针对单人用户场景，满足单人场景的需求，显然与真实使用场景的需求不太相符。
技术实现思路
本专利技术的目的是提供一种用户场景分析装置及方法，有效解决现有技术中针对智能电视的用户场景分析方法仅针对单人用户，与真实使用场景不相符的技术问题。本专利技术提供的技术方案如下：一种用户场景分析装置，所述用户场景分析装置中包括：视频图像获取模块，用于根据预设规则从视频流中提取至少一帧视频图像；有效用户识别模块，用于根据视频图像获取模块提取的视频图像对当前有效用户进行识别；用户场景匹配模块，用于根据有效用户识别模块识别出的有效用户对用户场景进行匹配，完成用户场景分析。与现有技术中出现即为用户的技术方案不同，在本技术方案中，首先从视频流中获取视频图像，之后根据视频图像对当前有效用户进行判断进而匹配预先设置的用户场景，不仅适用单用户应用场景，同时适用多用户场景，且针对视频图像中出现的所有用户进行有效用户识别，以此更加真实准确的理解场景，便于更加准确的为用户提供定制化服务，如智能电视根据匹配的应用场景推荐节目，或智能家居对用户使用的数据进行搜集操作等。进一步优选地，所述有效用户识别模块中包括：人脸识别单元，用于对视频图像中出现的人脸进行识别；有效用户判断单元，用于根据所述人脸识别单元识别的人脸对当前有效用户进行判断。进一步优选地，所述有效用户识别模块中还包括：年龄判断单元，用于对人脸识别单元识别出的人脸进行年龄判断；尺寸获取单元，用于获取人脸识别单元识别出的人脸的尺寸；所述有效用户判断单元根据所述年龄判断单元判断的人脸年龄及所述尺寸获取单元获取的人脸尺寸判断相应用户是否为有效用户。在本技术方案中，根据视频图像中出现的人脸的年龄及大小对其是否为有效用户进行判断，以此去掉距离较远的无效用户，避免其对用户场景分析造成干扰。进一步优选地，所述有效用户识别模块中还包括：角度获取单元，用于获取人脸识别单元识别出的人脸相对于应用设备的偏移角度；所述有效用户判断单元根据所述角度获取单元获取的人脸偏移角度判断相应用户是否为有效用户。在本技术方案中，根据视频图像中人脸的偏移角度对其是否为有效用户进行判断，将偏移角度过大的无效用户过滤掉。这里的偏移角度，具体为人脸相对于视频流获取设置(用于应用设备)，如摄像头的偏移角度。进一步优选地，所述人脸识别单元还用于对视频图像中出现的闭眼的人脸进行识别；所述有效用户识别模块中还包括统计单元，所述统计单元根据连续多帧视频图像统计闭眼人脸对应用户连续闭眼的时间；所述有效用户判断单元根据所述统计单元统计的用户连续闭眼时间判断其是否为有效用户。在本技术方案中，统计视频流中出现的闭眼用户连续闭眼的时间，若长时间处于闭眼状态，判定其为无效用户。进一步优选地，所述统计单元还用于根据连续多帧视频图像统计人脸对应用户连续出现的时间；所述有效用户判断单元根据所述统计单元统计的用户连续出现时间判断其是否为有效用户。在本技术方案中，统计用户在视频流中连续出现的时间，若出现的时间较短，判定其为无效用户。进一步优选地，所述用户场景匹配模块中包括判断单元及匹配单元，其中，判断单元，用于判断有效用户识别模块识别出的当前有效用户是否与一预设用户场景中设定的用户完全相同；当判断单元判断出当有效用户与一预设用户场景中设定的用户完全匹配，则匹配单元直接匹配该用户场景；当判断单元判断出当有效用户与所有预设用户场景中设定的用户都不完全相同，则匹配单元匹配与当前有效用户重合用户数量最多的用户场景。在本技术方案中，根据识别出来的当前有效用户匹配预设的用户场景，便于为用户提供定制化服务。进一步优选地，所述用户场景匹配模块中还包括提示单元及用户场景新建单元，其中，当判断单元判断出当有效用户与所有预设用户场景中设定的用户都不完全相同，则提示单元提示用户是否创建用户场景；若接收到用户场景创建指令，所述用户场景新建单元创建新的用户场景，否则匹配单元匹配与当前有效用户重合用户数量最多的用户场景。在本技术方案中，若识别出的当前有效用户不能与预设的用户场景完全匹配，支持用户重新创建新的用户场景进行完善。本专利技术还提供了一种用户场景分析方法，所述用户场景分析方法中包括：获取视频流并根据预设规则从中提取至少一帧视频图像；根据提取的视频图像对当前有效用户进行识别；根据识别出的有效用户对用户场景进行匹配，完成用户场景分析。与现有技术中出现即为用户的技术方案不同，在本技术方案中，首先从视频流中获取视频图像，之后根据视频图像对当前有效用户进行判断进而匹配预先设置的用户场景，不仅适用单用户应用场景，同时适用多用户场景，且针对视频图像中出现的所有用户进行有效用户识别，更加真实准确的理解场景，便于更加准确的为用户提供定制化服务，如智能电视根据匹配的应用场景推荐节目，或智能家居对用户使用的数据进行搜集操作等。进一步优选地，在步骤S20，根据提取的视频图像对当前有效用户进行识别中，包括：对视频图像中出现的人脸进行识别；对识别出的人脸进行年龄判断；获取识别出的人脸的尺寸；根据人脸的年龄及尺寸判断相应用户是否为有效用户；和/或，在步骤S20，根据提取的视频图像对当前有效用户进行识别中，包括：对视频图像中出现的人脸进行识别；获取识别出的人脸相对于应用设备的偏移角度；根据获取的人脸偏移角度判断相应用户是否为有效用户；和/或，在步骤S20，根据提取的视频图像对当前有效用户进行识别中，包括：对视频图像中出现的闭眼的人脸进行识别；根据连续多帧视频图像统计闭眼人脸对应用户连续闭眼的时间；根据所述统计的用户连续闭眼时间判断其是否为有效用户；和/或，在步骤S20，根据提取的视频图像对当前有效用户进行识别中，包括：对视频图像中出现的人脸进行识别；根据连续多帧视频图像统计人脸对应用户连续出现的时间；根据统计的用户连续出现时间判断其是否为有效用户。进一步优选地，在步骤S30，根据识别出的有效用户对用户场景进行匹配中，包括：判断识别出的当前有效用户是否与一预设用户场景中设定的用户完全相同；若是，则直接匹配该用户场景；否则，匹配与当前有效用户重合用户数量最多的用户场景。进一步优选地，在步骤判断识别出的当前有效用户是否与一预设用户场景中设定的用户完全相同中，在判断出当有效用户与所有预设用户场景中设定的用户都不完全相同之后，还包括：提示用户是否创建用户场景；若接收到用户场景创建指令，则进入创建新的用户场景本文档来自技高网...

【技术保护点】
1.一种用户场景分析装置，其特征在于，所述用户场景分析装置中包括：视频图像获取模块，用于根据预设规则从视频流中提取至少一帧视频图像；有效用户识别模块，用于根据视频图像获取模块提取的视频图像对当前有效用户进行识别；用户场景匹配模块，用于根据有效用户识别模块识别出的有效用户对用户场景进行匹配，完成用户场景分析。

【技术特征摘要】
1.一种用户场景分析装置，其特征在于，所述用户场景分析装置中包括：视频图像获取模块，用于根据预设规则从视频流中提取至少一帧视频图像；有效用户识别模块，用于根据视频图像获取模块提取的视频图像对当前有效用户进行识别；用户场景匹配模块，用于根据有效用户识别模块识别出的有效用户对用户场景进行匹配，完成用户场景分析。2.如权利要求1所述的用户场景分析装置，其特征在于，所述有效用户识别模块中包括：人脸识别单元，用于对视频图像中出现的人脸进行识别；有效用户判断单元，用于根据所述人脸识别单元识别的人脸对当前有效用户进行判断。3.如权利要求2所述的用户场景分析装置，其特征在于，所述有效用户识别模块中还包括：年龄判断单元，用于对人脸识别单元识别出的人脸进行年龄判断；尺寸获取单元，用于获取人脸识别单元识别出的人脸的尺寸；所述有效用户判断单元根据所述年龄判断单元判断的人脸年龄及所述尺寸获取单元获取的人脸尺寸判断相应用户是否为有效用户。4.如权利要求2或3所述的用户场景分析装置，其特征在于，所述有效用户识别模块中还包括：角度获取单元，用于获取人脸识别单元识别出的人脸相对于应用设备的偏移角度；所述有效用户判断单元根据所述角度获取单元获取的人脸偏移角度判断相应用户是否为有效用户。5.如权利要求2或3所述的用户场景分析装置，其特征在于，所述人脸识别单元还用于对视频图像中出现的闭眼的人脸进行识别；所述有效用户识别模块中还包括统计单元，所述统计单元根据连续多帧视频图像统计闭眼人脸对应用户连续闭眼的时间；所述有效用户判断单元根据所述统计单元统计的用户连续闭眼时间判断其是否为有效用户。6.如权利要求5所述的用户场景分析装置，其特征在于，所述统计单元还用于根据连续多帧视频图像统计人脸对应用户连续出现的时间；所述有效用户判断单元根据所述统计单元统计的用户连续出现时间判断其是否为有效用户。7.如权利要求1或2或3或6所述的用户场景分析装置，其特征在于，所述用户场景匹配模块中包括判断单元及匹配单元，其中，判断单元，用于判断有效用户识别模块识别出的当前有效用户是否与一预设用户场景中设定的用户完全相同；当判断单元判断出当有效用户与一预设用户场景中设定的用户完全匹配，则匹配单元直接匹配该用户场景；当判断单元判断出当有效用户与所有预设用户场景中设定的用户都不完全相同，则匹配单元匹配与当前有效用户重合用户数量最多的用户场景。8.如权利要求7所...

【专利技术属性】
技术研发人员：陈洁，
申请(专利权)人：四川斐讯信息技术有限公司，
类型：发明
国别省市：四川,51