基于人脸识别的人机交互方法和装置制造方法及图纸

本发明专利技术公开了基于人脸识别的人机交互方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：获取用户进入封闭式自助设备内时所述封闭式自助设备的内部图像；确定所述内部图像中的人脸数量以及最大人脸图像；当所述最大人脸图像满足预设条件时，根据所述人脸数量确定账户登录方式，以使所述封闭式自助设备基于所述账户登录方式提供人机交互服务。该实施方式能够避免由于通过加装防窥膜片来防止屏幕上用户隐私泄露而导致的对用户操作角度要求高、当存在屏幕较大或多块屏幕呈非同一平面排列时用户在同一位置无法看到全部屏幕的内容、影响屏幕的透光性等不足，提供用户账户信息的安全性。

Human computer interaction method and device based on face recognition

【技术实现步骤摘要】
基于人脸识别的人机交互方法和装置
本专利技术涉及计算机
，尤其涉及一种基于人脸识别的人机交互方法和装置。
技术介绍
封闭式自助设备指供人活动的独立内部空间，无需客服介入，用户通过人机交互自助获取相关服务的设备。封闭式自助设备体验过程中可能会暴露登录方不愿透露的私隐信息。目前绝大多数自助设备通过加装防窥膜片来防止屏幕上的客户隐私的泄露，客户需垂直于屏幕进行观看和操作，其他视角的人员无法获取到屏幕的信息。在实现本专利技术过程中，专利技术人发现现有技术中至少存在如下问题：(1)对用户操作的角度有较高的要求，需垂直于屏幕；(2)如果屏幕较大或多块屏幕呈非同一平面排列时，客户在同一位置无法看到全部屏幕的内容；(3)防窥膜片会影响屏幕的透光性，降低屏幕的色彩呈现效果，视角体验不佳。
技术实现思路
有鉴于此，本专利技术实施例提供一种基于人脸识别的人机交互方法和装置，能够避免由于通过加装防窥膜片来防止屏幕上用户隐私泄露而导致的对用户操作角度要求高、当存在屏幕较大或多块屏幕呈非同一平面排列时用户在同一位置无法看到全部屏幕的内容、影响屏幕的透光性等不足，提供用户账户信息的安全性。为实现上述目的，根据本专利技术实施例的一个方面，提供了一种基于人脸识别的人机交互方法，包括：获取用户进入封闭式自助设备内时所述封闭式自助设备的内部图像；确定所述内部图像中的人脸数量以及最大人脸图像；当所述最大人脸图像满足预设条件时，根据所述人脸数量确定账户登录方式，以使所述封闭式自助设备基于所述账户登录方式提供人机交互服务。可选地，所述预设条件包括以下至少之一：所述最大人脸图像是活体的人脸图像，所述最大人脸图像的图像质量满足预设质量要求。可选地，所述内部图像包括至少两帧图像；确定所述内部图像中的人脸数量，包括：当所述至少两帧图像中均仅仅包含一个人脸图像时，判定所述内部图像中的人脸数量为1；否则，判定所述内部图像中的人脸数量大于1。可选地，根据所述人脸数量确定账户登录方式，包括：当所述内部图像中的人脸数量为1时，确定所述账户登录方式为认证登录方式；当所述内部图像中的人脸数量大于1时，在所述封闭式自助设备中显示认证登录方式和游客登录方式，以使用户从所述认证登录方式和游客登录方式中选择其一作为所述账户登录方式。可选地，使所述封闭式自助设备基于所述账户登录方式提供人机交互服务，包括：若所述账户登录方式为认证登录方式，则利用所述封闭式自助设备获取用户的标识信息，查询与所述标识信息对应的人脸样本图像，判断所述最大人脸图像与所述人脸样本图像是否一致；若是，则控制所述封闭式自助设备显示预设的与所述认证登录方式对应的交互信息；否则，控制所述封闭式自助设备基于所述游客登录方式提供人机交互服务；若所述账户登录方式为游客登录方式，则控制所述封闭式自助设备显示预设的与所述游客登录方式对应的交互信息。可选地，所述用户的标识信息是通过语音或键盘获取的。可选地，所述用户的标识信息为所述用户的手机号。可选地，当所述内部图像中的人脸数量大于1、且登录至所述用户的账户之后，还包括：响应于所述用户的账户信息查询请求，根据预设的隐私设置信息，控制所述封闭式自助设备显示所述用户的展示或隐藏预设信息项之后的账户信息；所述隐私设置信息用于表示是否隐藏各个预设信息项的信息。可选地，控制所述封闭式自助设备显示所述用户的展示或隐藏预设信息项之后的账户信息之后，还包括：响应于用户的信息显示变更请求，控制所述封闭式自助设备显示所述用户的隐藏或展示预设信息项之后的账户信息。可选地，当所述最大人脸图像不满足预设条件时，重新获取所述封闭式自助设备的内部图像，当重新获取的内部图像中的最大人脸图像满足预设条件时，根据重新获取的内部图像中的人脸数量确定所述账户登录方式。可选地，用户进入封闭式自助设备内时，所述封闭式自助设备的设备门打开；获取用户进入封闭式自助设备内时所述封闭式自助设备的内部图像的步骤是响应于所述设备门关闭而执行的。可选地，所述设备门是按照如下步骤关闭的：当用户进入封闭式自助设备内、且所述设备门打开预设时长时，检测所述封闭式自助设备的门框处是否有人；若是，则间隔预设时长后重新检测所述封闭式自助设备的门框处是否有人；否则，关闭所述设备门。可选地，所述封闭式自助设备的内部图像是通过控制安装于所述封闭式自助设备内的图像采集设备或者调用第三方的图像采集设备获取得到的。根据本专利技术实施例的第二方面，提供一种基于人脸识别的人机交互装置，包括：采集模块，获取用户进入封闭式自助设备内时所述封闭式自助设备的内部图像；确定模块，确定所述内部图像中的人脸数量以及最大人脸图像；登录模块，当所述最大人脸图像满足预设条件时，根据所述人脸数量确定账户登录方式，以使所述封闭式自助设备基于所述账户登录方式提供人机交互服务。可选地，所述预设条件包括以下至少之一：所述最大人脸图像是活体的人脸图像，所述最大人脸图像的图像质量满足预设质量要求。可选地，所述内部图像包括至少两帧图像；所述确定模块确定所述内部图像中的人脸数量，包括：当所述至少两帧图像中均仅仅包含一个人脸图像时，判定所述内部图像中的人脸数量为1；否则，判定所述内部图像中的人脸数量大于1。可选地，所述登录模块根据所述人脸数量确定账户登录方式，包括：当所述内部图像中的人脸数量为1时，确定所述账户登录方式为认证登录方式；当所述内部图像中的人脸数量大于1时，在所述封闭式自助设备中显示认证登录方式和游客登录方式，以使用户从所述认证登录方式和游客登录方式中选择其一作为所述账户登录方式。可选地，所述登录模块使所述封闭式自助设备基于所述账户登录方式提供人机交互服务，包括：若所述账户登录方式为认证登录方式，则利用所述封闭式自助设备获取用户的标识信息，查询与所述标识信息对应的人脸样本图像，判断所述最大人脸图像与所述人脸样本图像是否一致；若是，则控制所述封闭式自助设备显示预设的与所述认证登录方式对应的交互信息；否则，控制所述封闭式自助设备基于所述游客登录方式提供人机交互服务；若所述账户登录方式为游客登录方式，则控制所述封闭式自助设备显示预设的与所述游客登录方式对应的交互信息。可选地，所述用户的标识信息是通过语音或键盘获取的。可选地，所述用户的标识信息为所述用户的手机号。可选地，所述登录模块还用于：当所述内部图像中的人脸数量大于1、且登录至所述用户的账户之后，响应于所述用户的账户信息查询请求，根据预设的隐私设置信息，控制所述封闭式自助设备显示所述用户的展示或隐藏预设信息项之后的账户信息；所述隐私设置信息用于表示是否隐藏各个预设信息项的信息。可选地，所述登录模块还用于：控制所述封闭式自助设备显示所述用户的展示或隐藏预设信息项之后的账户信息之后响应于用户的信息显示变更请求，控制所述封闭式自助设备显示所述用户的隐藏或展示预设本文档来自技高网...

【技术保护点】
1.一种基于人脸识别的人机交互方法，其特征在于，包括：/n获取用户进入封闭式自助设备内时所述封闭式自助设备的内部图像；/n确定所述内部图像中的人脸数量以及最大人脸图像；/n当所述最大人脸图像满足预设条件时，根据所述人脸数量确定账户登录方式，以使所述封闭式自助设备基于所述账户登录方式提供人机交互服务。/n

【技术特征摘要】
1.一种基于人脸识别的人机交互方法，其特征在于，包括：
获取用户进入封闭式自助设备内时所述封闭式自助设备的内部图像；
确定所述内部图像中的人脸数量以及最大人脸图像；
当所述最大人脸图像满足预设条件时，根据所述人脸数量确定账户登录方式，以使所述封闭式自助设备基于所述账户登录方式提供人机交互服务。


2.如权利要求1所述的人机交互方法，其特征在于，所述预设条件包括以下至少之一：所述最大人脸图像是活体的人脸图像，所述最大人脸图像的图像质量满足预设质量要求。


3.如权利要求1所述的人机交互方法，其特征在于，所述内部图像包括至少两帧图像；
确定所述内部图像中的人脸数量，包括：当所述至少两帧图像中均仅仅包含一个人脸图像时，判定所述内部图像中的人脸数量为1；否则，判定所述内部图像中的人脸数量大于1。


4.如权利要求1所述的人机交互方法，其特征在于，根据所述人脸数量确定账户登录方式，包括：
当所述内部图像中的人脸数量为1时，确定所述账户登录方式为认证登录方式；
当所述内部图像中的人脸数量大于1时，在所述封闭式自助设备中显示认证登录方式和游客登录方式，以使用户从所述认证登录方式和游客登录方式中选择其一作为所述账户登录方式。


5.如权利要求4所述的人机交互方法，其特征在于，使所述封闭式自助设备基于所述账户登录方式提供人机交互服务，包括：
若所述账户登录方式为认证登录方式，则利用所述封闭式自助设备获取用户的标识信息，查询与所述标识信息对应的人脸样本图像，判断所述最大人脸图像与所述人脸样本图像是否一致；若是，则控制所述封闭式自助设备显示预设的与所述认证登录方式对应的交互信息；否则，控制所述封闭式自助设备基于所述游客登录方式提供人机交互服务；
若所述账户登录方式为游客登录方式，则控制所述封闭式自助设备显示预设的与所述游客登录方式对应的交互信息。


6.如权利要求5所述的人机交互方法，其特征在于，所述用户的标识信息是通过语音或键盘获取的。


7.如权利要求5所述的人机交互方法，其特征在于，所述用户的标识信息为所述用户的手机号。


8.如权利要求5所述的人机交互方法，其特征在于，当所述内部图像中的人脸数量大于1、且登录至所述用户的账户之后，还包括：响应于所述用户的账户信息查询请求，根据预设的隐私设置信息，控制所述封闭式自助...

【专利技术属性】
技术研发人员：杨朝晖，莫湘群，肖群，邓小茜，钟博，陈泽垒，王炬华，马加宁，聂义斌，徐文龙，李坚明，黄东生，姚梦玥，张毅锋，
申请(专利权)人：中国建设银行股份有限公司，建信金融科技有限责任公司，
类型：发明
国别省市：北京;11