一种自助咖啡机图像识别装置及其操作方法制造方法及图纸

本发明专利技术公开了一种自助咖啡机图像识别装置及其操作方法，该种发明专利技术设计合理，咖啡机图像识别处理系统主要有后台服务系统、路由系统、Android处理系统、前置摄像头和内置摄像头等组成，Android处理系统通过前置摄像头可以对用户的人脸信息进行采集和特征提取，并将人脸特征信息上传到后台服务系统进行存储，当用户购买饮品选择刷脸支付后，Android处理系统会打开前置摄像头采集当前用户的人脸信息和提取人脸特征，并将该用户的特征信息与服务系统存储的数据库系统进行比对，特征符合后进行支付扣款并制作饮品，Android处理系统内部储存着标准图片，用滤波方法对图像进行处理，并将特征值信息存储在内部储存中，可见该发明专利技术功能实用，适合被广泛推广。

A Self-service Coffee Machine Image Recognition Device and Its Operation Method

The invention discloses a self-service coffee machine image recognition device and its operation method. The invention is reasonable in design. The coffee machine image recognition processing system mainly consists of background service system, routing system, Android processing system, front camera and built-in camera. Android processing system can collect and extract user's face information through front camera. And then upload the facial feature information to the back-end service system for storage. When the user purchases drinks and chooses to brush his face for payment, Android processing system will open the front-end camera to collect the current user's facial information and extract facial features, and compare the user's feature information with the database system stored in the service system. After the feature matches, he will pay for the deduction and make drinks. The Android processing system stores standard pictures, processes them with filtering method, and stores eigenvalue information in internal storage. This shows that the invention has practical functions and is suitable for wide promotion.

【技术实现步骤摘要】
一种自助咖啡机图像识别装置及其操作方法
本专利技术涉及咖啡机
，特别涉及一种自助咖啡机图像识别装置及其操作方法。
技术介绍
随着新零售模式的兴起，自助现磨咖啡机已经越来越普及了，大众已慢慢开始接受咖啡文化，现有自助咖啡机对图像识别这一块基本上没有应用。现有应用场景主要通过摄像头进行图片拍摄与上传，其基本构成有路由器和网络摄像头，摄像头的云端系统，网络摄像头通过路由器连接云端系统，人工通过云端系统控制网络摄像头进行拍照并查看机器运行状况。现有咖啡机的支付主要通过扫码支付，支持的支付方式主要有微信和支付宝。现有自助咖啡机的一种自助咖啡机图像识别装置方式基本能满足应用，但也存在不足的地方，首先，现有应用场景使用第三方的云端系统，这是一个付费系统，当集成的网络摄像头越来越多后，费用也会越来越昂贵，其次，现有应用场景通过拍照上传机器内部照片，需要人工去后台查看照片来判断那台机器内部出现了问题，当机器数量增加后，对人力提出了大量的需求，处理起来不方便，最后，现有自助咖啡机的支付方式主要是微信和支付宝，支付方式比较单一。
技术实现思路
本专利技术的主要目的在于提供一种自助咖啡机图像识别装置及其操作方法，可以有效解决
技术介绍
中的问题。为实现上述目的，本专利技术采取的技术方案为：一种自助咖啡机图像识别装置，包括Android处理系统和路由系统，所述Android处理系统的上端与下端分别通信连接有图像识别处理系统，所述Android处理系统的一侧电性连接有后台服务系统，所述后台服务系统与路由系统之间相互通信连接，所述路由系统的另一侧设置有咖啡机箱，所述咖啡机箱与路由系统之间相互通信连接。进一步地，一个所述图像识别处理系统的前端设置有前置摄像头，所述前置摄像头与图像识别处理系统之间电性连接。进一步地，一个所述图像识别处理系统的内部设置有内置摄像头，所述内置摄像头与图像识别处理系统之间电性连接。进一步地，所述Android处理系统通过后台服务系统与路由系统之间通信连接。进一步地，一种自助咖啡机图像识别装置及其操作方法，其操作步骤如下：第一步，所述图像识别处理系统第一步进行用户首次的人脸识别与人脸采集，在Android处理系统的内部完成人脸图片预处理，进行人脸特征提取，并进行人脸特征数据的存储；第二步，所述图像识别处理系统再次进行第二次用户的人脸识别与人脸采集，在Android处理系统的内部完成人脸图片预处理，进行人脸特征提取，将人脸特征数据库调取第一次的比对人像，与第二次的人脸特征匹配；第三步，所述图像识别处理系统将第二次获取的图像与其内部存储的照片进行特征点匹配，然后提取匹配的特征点，截图匹配点矩形图片，最后进行图片处理，进行图片中判断异物。与现有技术相比，本专利技术具有如下有益效果：该种专利技术设计合理，咖啡机图像识别处理系统主要有后台服务系统、路由系统、Android处理系统、前置摄像头和内置摄像头等组成，Android处理系统通过前置摄像头可以对用户的人脸信息进行采集和特征提取，并将人脸特征信息上传到后台服务系统进行存储，当用户购买饮品选择刷脸支付后，Android处理系统会打开前置摄像头采集当前用户的人脸信息和提取人脸特征，并将该用户的特征信息与服务系统存储的数据库系统进行比对，特征符合后进行支付扣款并制作饮品，Android处理系统内部储存着标准图片，先用滤波方法对图像进行处理，然后通过sift算法提取标准图片的特征值，并将特征值信息存储在内部储存中，当饮品制作完成后，会触发Android处理系统通过内置摄像头对咖啡机箱内部的三只落粉碗区域地方进行拍照作为比对图片，一种自助咖啡机图像识别装置算法会先对比对图片进行预处理，然后通过sift算法提取该比对图片的特征值，通过匹配算法将标准图片的特征值与比对图片的特征值进法比对，该比对算法采用了一对三的特征比对方式来提取出三只落粉碗的特征值，然后根据特征值的坐标用矩形方式将每个落粉碗截取出来，然后将每个截取出来的落粉碗图片进行灰度化处理，来判断落粉碗中是否有异物存在，可见该专利技术，功能实用，适合被广泛推广。附图说明图1为本专利技术整体结构示意图。图2为本专利技术人脸采集系统结构示意图。图3为本专利技术人脸识别系统结构示意图。图4为本专利技术图像处理算法框图结构示意图。图中：1、后台服务系统；2、Android处理系统；3、图像识别处理系统；4、路由系统；5、前置摄像头；6、内置摄像头；7、咖啡机箱。具体实施方式为使本专利技术实现的技术手段、创作特征、达成目的与功效易于明白了解，下面结合具体实施方式，进一步阐述本专利技术。如图1-4所示，一种自助咖啡机图像识别装置，包括Android处理系统2和路由系统4，所述Android处理系统2的上端与下端分别通信连接有图像识别处理系统3，所述Android处理系统2的一侧电性连接有后台服务系统1，所述后台服务系统1与路由系统4之间相互通信连接，所述路由系统4的另一侧设置有咖啡机箱7，所述咖啡机箱7与路由系统4之间相互通信连接。其中，一个所述图像识别处理系统3的前端设置有前置摄像头5，所述前置摄像头5与图像识别处理系统3之间电性连接。其中，一个所述图像识别处理系统3的内部设置有内置摄像头6，所述内置摄像头6与图像识别处理系统3之间电性连接。其中，所述Android处理系统2通过后台服务系统1与路由系统4之间通信连接。其中，一种自助咖啡机图像识别装置及其操作方法，其操作步骤如下：第一步，所述图像识别处理系统3第一步进行用户首次的人脸识别与人脸采集，在Android处理系统2的内部完成人脸图片预处理，进行人脸特征提取，并进行人脸特征数据的存储；第二步，所述图像识别处理系统3再次进行第二次用户的人脸识别与人脸采集，在Android处理系统2的内部完成人脸图片预处理，进行人脸特征提取，将人脸特征数据库调取第一次的比对人像，与第二次的人脸特征匹配；第三步，所述图像识别处理系统3将第二次获取的图像与其内部存储的照片进行特征点匹配，然后提取匹配的特征点，截图匹配点矩形图片，最后进行图片处理，进行图片中判断异物。实施例1：一种自助咖啡机图像识别装置，包括Android处理系统2和路由系统4，所述Android处理系统2的上端与下端分别通信连接有图像识别处理系统3，所述Android处理系统2的一侧电性连接有后台服务系统1，所述后台服务系统1与路由系统4之间相互通信连接，所述路由系统4的另一侧设置有咖啡机箱7，所述咖啡机箱7与路由系统4之间相互通信连接，一个所述图像识别处理系统3的前端设置有前置摄像头5，所述前置摄像头5与图像识别处理系统3之间电性连接，一个所述图像识别处理系统3的内部设置有内置摄像头6，所述内置摄像头6与图像识别处理系统3之间电性连接，所述Android处理系统2通过后台服务系统1与路由系统4之间通信连接，所述图像识别处理系统3第一步进行用户首次的人脸识别与人脸采集，在Android处理系统2的内部完成人脸图片预处理，进行人脸特征提取，并进行人脸特征数据的存储。对于图像的预处理的灰度化，本方案的摄像头对图片进行拍照采集的是彩色的图片，彩色图片是由RGB三色组成的，信息量比较大而且比较占内存。对于图像的预处理的二值化，二值化是将图像进行黑白化，黑白化后图像占用的信息本文档来自技高网...

【技术保护点】
1.一种自助咖啡机图像识别装置，包括Android处理系统(2)和路由系统(4)，其特征在于：所述Android处理系统(2)的上端与下端分别通信连接有图像识别处理系统(3)，所述Android处理系统(2)的一侧电性连接有后台服务系统(1)，所述后台服务系统(1)与路由系统(4)之间相互通信连接，所述路由系统(4)的另一侧设置有咖啡机箱(7)，所述咖啡机箱(7)与路由系统(4)之间相互通信连接。

【技术特征摘要】
1.一种自助咖啡机图像识别装置，包括Android处理系统(2)和路由系统(4)，其特征在于：所述Android处理系统(2)的上端与下端分别通信连接有图像识别处理系统(3)，所述Android处理系统(2)的一侧电性连接有后台服务系统(1)，所述后台服务系统(1)与路由系统(4)之间相互通信连接，所述路由系统(4)的另一侧设置有咖啡机箱(7)，所述咖啡机箱(7)与路由系统(4)之间相互通信连接。2.根据权利要求1所述的一种自助咖啡机图像识别装置，其特征在于：一个所述图像识别处理系统(3)的前端设置有前置摄像头(5)，所述前置摄像头(5)与图像识别处理系统(3)之间电性连接。3.根据权利要求1所述的一种自助咖啡机图像识别装置，其特征在于：一个所述图像识别处理系统(3)的内部设置有内置摄像头(6)，所述内置摄像头(6)与图像识别处理系统(3)之间电性连接。4.根...

【专利技术属性】
技术研发人员：王栋，
申请(专利权)人：杭州凡咖网络科技有限公司，
类型：发明
国别省市：浙江,33