基于图像与文本的图书盘点识别方法、装置、设备及系统制造方法及图纸

本发明专利技术提供一种基于图像与文本的图书盘点识别方法、装置、设备及系统，所述方法包括：包括：采集书架图像，并将所述书架图像切割为多个含有书脊的书脊图像；对所述书脊图像进行识别，获取各所述书脊对应的关键字；判断任一所述书脊对应的关键字与图书数据库中图书信息的相似度是否到第一相似度阈值：若是，则完成该书脊对应的图书的盘点；若否，则将该书脊对应的关键字和该书脊周围的至少一个所述书脊对应的关键字作为一个整体关键字，并继续判断所述整体关键字与图书数据库中图书信息的相似度是否到第二相似度阈值：若是，则完成形成所述整体关键字的各书脊所对应的图书的盘点；若否，则确定盘点失败。本发明专利技术可以辅助智能图书馆的自动图书盘点。

【技术实现步骤摘要】
基于图像与文本的图书盘点识别方法、装置、设备及系统
本专利技术属于智能图书馆
，特别是涉及图书管理
，具体为一种基于图像与文本的图书盘点识别方法、装置、设备及系统。
技术介绍
近年来，智慧图书馆的研究与应用吸引了众多学者和公司的目光，目前仍是一个难度很大的课题。其中，基于图书馆书籍背脊的自动化识别是智能盘点的前沿核心研发内容。视觉分析能够实时获取精准的图书背脊文本信息，结合高效文本匹配方法，对提高图书盘点的效率、降低其成本有很大的前景。目前图书馆的图书识别技术，除人工之外，主要依赖于射频识别技术(RFID)，该方法拥有较高的准确率，但却有成本高、隐私泄露、信息冲突以及无法获取图书排序等问题。导致该技术在高效的图书馆图书智能盘点领域的应用有很大的限制。在当前的计算机应用算法方面，已经有许多公开的文本检测与识别算法，但很少用于图书馆书籍盘点系统。基于深度学习的文本识别技术近几年得到了长足发展，效率和准确率逐渐提高，大量的开源软件以及开放的API已经可供使用。考虑到如果未来智能图书馆的普及，显然利用视觉分析、深度学习和文本智能匹配本文档来自技高网...

【技术保护点】
1.一种基于图像与文本的图书盘点识别方法，其特征在于：包括：/n采集书架图像，并将所述书架图像切割为多个含有书脊的书脊图像；/n对所述书脊图像进行识别，获取各所述书脊对应的关键字；/n判断任一所述书脊对应的关键字与图书数据库中图书信息的相似度是否到第一相似度阈值：/n若是，则完成该书脊对应的图书的盘点；/n若否，则将该书脊对应的关键字和该书脊周围的至少一个所述书脊对应的关键字作为一个整体关键字，并继续判断所述整体关键字与图书数据库中图书信息的相似度是否到第二相似度阈值：/n若是，则完成形成所述整体关键字的各书脊所对应的图书的盘点；/n若否，则确定盘点失败。/n

【技术特征摘要】
1.一种基于图像与文本的图书盘点识别方法，其特征在于：包括：
采集书架图像，并将所述书架图像切割为多个含有书脊的书脊图像；
对所述书脊图像进行识别，获取各所述书脊对应的关键字；
判断任一所述书脊对应的关键字与图书数据库中图书信息的相似度是否到第一相似度阈值：
若是，则完成该书脊对应的图书的盘点；
若否，则将该书脊对应的关键字和该书脊周围的至少一个所述书脊对应的关键字作为一个整体关键字，并继续判断所述整体关键字与图书数据库中图书信息的相似度是否到第二相似度阈值：
若是，则完成形成所述整体关键字的各书脊所对应的图书的盘点；
若否，则确定盘点失败。


2.根据权利要求1所述的基于图像与文本的图书盘点识别方法，其特征在于：将所述书架图像切割为多个含有书脊的书脊图像的一种实现方式包括：
利用边缘检测算法检测所述书架图像的边缘；
识别所述书架图像中的直线，并根据识别出的直线将所述书架图像切割为多个含有书脊的书脊图像。


3.根据权利要求1或2所述的基于图像与文本的图书盘点识别方法，其特征在于：所述基于图像与文本的图书盘点识别方法还包括：对所述书脊图像进行方向校正和/或清晰度校正。


4.根据权利要求1述的基于图像与文本的图书盘点识别方法，其特征在于：利用OCR文字模型对所述书脊图像进行识别，获取各所述书脊对应的关键字。


5.一种基于图像与文本的图书盘点识别装置，其特征在于：包括：
采集处理模块，用于采集书架图像，并将所述书架图像切割为多个含有书脊的书脊图像；
识别模块，用于对所述书脊图像进行识别，获取各所述书脊对应的关键字；<...

【专利技术属性】
技术研发人员：施晓华，许敬一，杨婉茹，卢宏涛，
申请(专利权)人：上海交通大学，赛尔网络有限公司，
类型：发明
国别省市：上海;31