基于虹膜识别和人脸识别的多模态生物识别支付的方法技术

本发明专利技术公开了一种基于虹膜识别和人脸识别的多模态生物识别支付的方法，先将顾客的人脸、虹膜图像与他的账户绑定在一起建立支付数据库，顾客进行支付时，先对顾客的人脸进行识别，并识别出人眼所在的位置，再调节虹膜识别模块的转向来对准人眼，对人眼的虹膜图像进行识别，再讲采集到的人脸图像和虹膜图像与数据库中保存的人脸图像数据和虹膜图像数据进行对比，当识别到的人脸图像和虹膜图像与数据库中的人脸图像和虹膜图像能对应起来，即可完成支付。

【技术实现步骤摘要】
基于虹膜识别和人脸识别的多模态生物识别支付的方法
本专利技术涉及多模态生物识别领域，尤其涉及基于虹膜识别和人脸识别的多模态生物识别支付的方法。
技术介绍
随着科学技术的发展，移动支付的普及率越来越高。例如支付宝支付和微信支付。这种支付仍然属于账户号+加密码的支付方式，支付宝账号和微信号作为账户身份的认证，需要用到随身携带的手机。而伴随着人们对移动支付的要求提高，例如出门健身时不方便携带卡片和手机，老年人容易忘记密码等等。逐渐出现了利用人脸、指纹等生物特征识别的支付手段。现有技术中有指纹识别支付或刷脸支付等生物识别技术进行支付，即利用机器进行指纹或人脸识别，再输入与账户绑定的手机号，确认后即可支付。其中：指纹支付存在以下缺陷：部分群体的指纹特征少，难成像；每一次使用指纹时都会在指纹采集头上留下用户的指纹印痕，而这些指纹痕迹存在被用来复制指纹的可能性；过去因为在犯罪记录中使用指纹，使得某些人害怕“将指纹记录在案”。而人脸支付的准确度不高，需要输入手机号码进行双重认证。且手机号码是公开的，易被人所知；输入繁琐的手机号码影响便捷性。另一方面，由于面部特征会由于整容、胖瘦、衰老等原因发生改变，容易带来识别失败而造成无法支付。再例如，在排队结账的顾客较多时，人脸设备摄像头由于视场角范围大，容易拍摄同时到多张人脸，可能将其他顾客的面部图像作为识别目标。这些对因为人脸识别安全性有极高要求的支付事件来说带来隐患。综上所述，每一项生物特征的识别算法和方式相对单一，容易造成支付隐患。为了达到最佳的应用性、安全性和便捷性体验，需要融合多种生物特征识别的多模态生物识别技术来提高支付的安全性。
技术实现思路
为了解决上述问题，本专利技术的目的在于提供一种基于虹膜识别和人脸识别的多模态生物识别支付的方法，先将顾客的人脸、虹膜图像与他的账户绑定在一起建立支付数据库，顾客进行支付时，先对顾客的人脸进行识别，并识别出人眼所在的位置，再调节虹膜识别模块的转向来对准人眼，对人眼的虹膜图像进行识别，再讲采集到的人脸图像和虹膜图像与数据库中保存的人脸图像数据和虹膜图像数据进行对比，当识别到的人脸图像和虹膜图像与数据库中的人脸图像和虹膜图像能对应起来，即可完成支付。为了实现上述目的，本专利技术提供的一种基于虹膜识别和人脸识别的多模态生物识别支付的方法是这样实现的：一种基于虹膜识别和人脸识别的多模态生物识别支付的方法，包括第一推拉玻璃门、第一手掌感应开关、云端摄像机、支付终端、第二推拉玻璃门、第二手掌感应开关、商品扫码器、载物台、进店二维码，第一推拉玻璃门作为进出商店的通道门，在第一推拉玻璃门上设有第一手掌感应开关，手掌接触到第一手掌感应开关后即可打开第一推拉玻璃门，便于顾客进出商店，商店里的每个商品柜上均安装有一个相同的云端摄像机，用于实时监控超市内安全隐患，给顾客放心的保障。支持语音喊话功能，第一时间阻止违法行为。同时，还可以语音引导顾客购物操作，以第二推拉玻璃门作为商品柜的门，第二手掌感应开关安装在第二推拉玻璃门上，顾客通过手掌感应第二手掌感应开关即可打开第二推拉玻璃门，商店的支付通道上设有支付终端，支付终端前面安装有商品扫码器和载物台，支付终端用于为顾客提供支付平台，商品扫码器用于扫描商品的条形码，并将扫描结果传输至支付终端进行计算和显示，第一推拉玻璃门还贴有进店二维码，用户进店前需要利用微信或者支付宝扫描进店二维码确认信息再进店。本专利技术的购物流程为：进店前先使用微信或者支付宝扫描进店二维码进行用户注册，确认好信息后再次扫描进店二维码后，用手掌去感应第一手掌感应开关将第一推拉玻璃门的门禁打开，顾客即可进入商店进行购物，商品柜排列在通道两侧，顾客通过手掌感应第二手掌感应开关将第二推拉玻璃门的门禁打开，即打开商品柜的门获取需要选购的货物，并将取出的商品的条形码对准商品扫码器，由商品扫码器扫描商品码，识别出商品的基本信息，并在支付终端中生成订单，由支付终端对顾客的人脸和虹膜进行识别，当人脸识别和虹膜识别的结果与顾客账户对应起来后，即可完成支付，待支付成功后，用手掌去感应第一手掌感应开关将第一推拉玻璃门的门禁打开，顾客即可出店，完成购物。本专利技术的人脸识别和虹膜识别融合的支付系统包括支付终端、服务器，在支付终端上采集用户的账户信息、人脸图像、虹膜图像，并将采集到的这些数据发送至服务器进行存储，当用户需要使用人脸和虹膜进行支付时，再次将人脸对准支付终端即可完成支付。本专利技术的支付终端包括金属铝框、液晶触摸屏、图像采集卡、高清摄像头、全景摄像头、FPGA处理板、GPRS模块，液晶触摸屏镶嵌在金属铝框中，用于显示顾客的订单信息以及用户可以在液晶触摸屏上进行用户注册，便于用户查看购物信息和账单，高清摄像头、全景摄像头安装在液晶触摸屏顶端的金属铝框上，图像采集卡、FPGA处理板、GPRS模块安装在金属铝框内，高清摄像头用于采集人脸图像，全景摄像头用于采集虹膜图像，高清摄像头、全景摄像头采集到的图像信息传输给图像采集卡，经图像采集卡处理后发送到FPGA处理板中进行图像处理，实现对人脸和虹膜的识别，由FPGA处理板控制GPRS模块将识别后的人脸和虹膜图像信息发送至服务器，并保存在用户数据库中。本专利技术的全景摄像头采用360度无死角旋转摄像头，先由高清摄像头采集到用户人脸图像，在FPGA处理板中进行识别，并识别出眼睛所在的位置坐标，由FPGA处理板根据人眼的位置坐标来调节全景摄像头的拍摄角度，待全景摄像头根据人眼位置坐标后，既是全景摄像头对准人眼位置，以便于全景摄像头能够准确的采集到虹膜图像。本专利技术的支付终端还包含了信息录入单元、信息融合单元、第一无线通讯单元，在信息录入单元中可以录入用户名和登录密码，以及人脸识别数据、虹膜识别数据，并在信息融合单元中将用户的用户名、登录密码、人脸识别数据、虹膜识别数据融合在一起，经过第一无线通讯单元发送到服务器上进行存储，即完成用户的注册。本专利技术的服务器包含了第二无线通讯单元、对比识别单元、数据单元、用户数据库，第二无线通讯单元接收第一无线通讯单元发送来的数据，并将接收到的数据存入到用户数据库中，其中数据单元的信息就是支付终端发送过来的用户名、登录密码、人脸图库、虹膜图库，当用户需要进行支付时，在支付终端进行人脸识别和虹膜识别后，经第一无线通讯单元、第二无线通讯单元发送到用户数据库中，在对比识别单元中对新采集到的人脸图像和虹膜图像与存储在用户数据库中的人脸图像和虹膜图像做对比识别，只有新采集到的人脸图像、虹膜图像与用户数据库中存储的人脸图像、虹膜图像吻合时，才能够完成支付。本专利技术的人脸图像识别方案为：1.人脸图像采集：通过高清摄像头采集顾客的人脸图像，传输至FPGA处理板中进行图像处理。2.人脸图像预处理：对于人脸的图像预处理是基于人脸检测结果，对图像进行处理并最终服务于特征提取的过程。系统获取的原始图像由于受到各种条件的限制和随机干扰，往往不能直接使用，必须在图像处理的早期阶段对它进行灰度校正、噪声过滤等图像预处理。对于人脸图像而言，其预处理过程主要包括人脸图像本文档来自技高网...

【技术保护点】
1.一种基于虹膜识别和人脸识别的多模态生物识别支付的方法，其特征在于：包括第一推拉玻璃门、第一手掌感应开关、云端摄像机、支付终端、第二推拉玻璃门、第二手掌感应开关、商品扫码器、载物台、进店二维码，第一推拉玻璃门作为进出商店的通道门，在第一推拉玻璃门上设有第一手掌感应开关，手掌接触到第一手掌感应开关后即可打开第一推拉玻璃门，便于顾客进出商店，商店里的每个商品柜上均安装有一个相同的云端摄像机，用于实时监控超市内安全隐患，给顾客放心的保障，支持语音喊话功能，第一时间阻止违法行为，同时，还可以语音引导顾客购物操作，以第二推拉玻璃门作为商品柜的门，第二手掌感应开关安装在第二推拉玻璃门上，顾客通过手掌感应第二手掌感应开关即可打开第二推拉玻璃门，商店的支付通道上设有支付终端，支付终端前面安装有商品扫码器和载物台，支付终端用于为顾客提供支付平台，商品扫码器用于扫描商品的条形码，并将扫描结果传输至支付终端进行计算和显示，第一推拉玻璃门还贴有进店二维码，用户进店前需要利用微信或者支付宝扫描进店二维码确认信息再进店。/n

【技术特征摘要】
1.一种基于虹膜识别和人脸识别的多模态生物识别支付的方法，其特征在于：包括第一推拉玻璃门、第一手掌感应开关、云端摄像机、支付终端、第二推拉玻璃门、第二手掌感应开关、商品扫码器、载物台、进店二维码，第一推拉玻璃门作为进出商店的通道门，在第一推拉玻璃门上设有第一手掌感应开关，手掌接触到第一手掌感应开关后即可打开第一推拉玻璃门，便于顾客进出商店，商店里的每个商品柜上均安装有一个相同的云端摄像机，用于实时监控超市内安全隐患，给顾客放心的保障，支持语音喊话功能，第一时间阻止违法行为，同时，还可以语音引导顾客购物操作，以第二推拉玻璃门作为商品柜的门，第二手掌感应开关安装在第二推拉玻璃门上，顾客通过手掌感应第二手掌感应开关即可打开第二推拉玻璃门，商店的支付通道上设有支付终端，支付终端前面安装有商品扫码器和载物台，支付终端用于为顾客提供支付平台，商品扫码器用于扫描商品的条形码，并将扫描结果传输至支付终端进行计算和显示，第一推拉玻璃门还贴有进店二维码，用户进店前需要利用微信或者支付宝扫描进店二维码确认信息再进店。


2.根据权利要求1所述的基于虹膜识别和人脸识别的多模态生物识别支付的方法，其特征在于：所述购物流程为：进店前先使用微信或者支付宝扫描进店二维码进行用户注册，确认好信息后再次扫描进店二维码后，用手掌去感应第一手掌感应开关将第一推拉玻璃门的门禁打开，顾客即可进入商店进行购物，商品柜排列在通道两侧，顾客通过手掌感应第二手掌感应开关将第二推拉玻璃门的门禁打开，即打开商品柜的门获取需要选购的货物，并将取出的商品的条形码对准商品扫码器，由商品扫码器扫描商品码，识别出商品的基本信息，并在支付终端中生成订单，由支付终端对顾客的人脸和虹膜进行识别，当人脸识别和虹膜识别的结果与顾客账户对应起来后，即可完成支付，待支付成功后，用手掌去感应第一手掌感应开关将第一推拉玻璃门的门禁打开，顾客即可出店，完成购物。


3.根据权利要求1所述的基于虹膜识别和人脸识别的多模态生物识别支付的方法，其特征在于：所述支付终端包括金属铝框、液晶触摸屏、图像采集卡、高清摄像头、全景摄像头、FPGA处理板、G...

【专利技术属性】
技术研发人员：李火亮，熊乃学，严飞，
申请(专利权)人：江西拓世智能科技有限公司，
类型：发明
国别省市：江西;36