一种图书损坏自动检测方法及装置制造方法及图纸

本发明专利技术公开了一种图书损坏自动检测方法及装置，其特征在于，所述方法包括：通过双目摄像头对图书进行图像采集，获取图像的深度信息；将深度信息转换为三维点云数据，根据三维点云数据进行三维重构，生成借出图书和归还图书的三维模型并保存至数据库；将当前归还图书的三维模型与同一本图书借出时的三维模型进行多次角点匹配，选取空间差异度最小的匹配结果；根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置；提取差异区域特征，根据差异区域特征、图书损坏位置分别判断对应的损坏类型和损坏程度，根据各损坏类型的损坏程度进行图书损坏评级。本发明专利技术实现了图书损坏类型、损坏程度自动检测与计算。

【技术实现步骤摘要】
一种图书损坏自动检测方法及装置
本专利技术涉及图书管理领域，尤其涉及一种图书损坏自动检测方法及装置。
技术介绍
自助借阅终端现已成为校园图书借阅的新趋势，借阅人通过自助借阅终端实现身份认证、自动借书与还书，方便快捷。但自助借阅终端常常出现因为借阅人图书管理不当造成图书损坏的情况，借阅人归还图书时又无管理员检查图书是否出现损坏，因此图书经常折损严重。常见的图书损坏类型包括表面翻折、卷曲、浸水、缺页等，翻折或卷曲对书本的损坏较小，仅影响美观，多半不影响阅读，而浸水、缺页等等损坏是不可逆的，图书大面积浸水风干后会出现大量褶皱，书页粘连严重者书页呈波浪状，且纸张变脆而容易折毁，一旦出现浸水、缺页等问题会严重影响图书价值。现有的自助借阅终端基本没有自动检测图书损毁程度的功能，无法判断图书损坏类型，从而无法准确评估损坏程度。
技术实现思路
有鉴于此，本专利技术提出了一种图书损坏自动检测方法，用于解决自助借阅终端无法自动判断图书损坏类型、评估损坏程度的问题。本专利技术第一方面，公开一种图书损坏自动检测方法，所述方法包括：通过双目摄像头对图书进行图像采集，获取图像的深度信息；将深度信息转换为三维点云数据，根据三维点云数据进行三维重构，生成借出图书和归还图书的三维模型并保存至数据库；将当前归还图书的三维模型与同一本图书借出时的三维模型进行多次角点匹配，确定对应位置；分别计算每次角点匹配的空间差异度，选取空间差异度最小的匹配结果；根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置；提取差异区域特征，根据差异区域特征、图书损坏位置分别判断对应的损坏类型和损坏程度，根据各损坏类型的损坏程度进行图书损坏评级。优选的，所述将归还图书的三维模型与同一本图书借出的三维模型进行多次角点匹配，确定对应位置分别计算每次角点匹配的空间差异度，选取空间差异度最小的匹配结果具体为：分别提取当前归还图书的三维模型和同一本图书借出时的三维模型的8个角点数据；分别选取底面的3个角点数据为基准进行多次角点匹配，采用余弦相似度分别计算空间差异度；选取空间差异度最小的匹配结果。优选的，所述根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置具体为：根据所述差异度最小的匹配结果分别计算对应点之间的欧式距离，欧式距离均不为0的连通区域即为存在差异的区域；确定存在差异的区域对应的图书位置，将所述对应位置作为图书损坏位置，将图书损坏位置划分为正面、反面、书脊侧和开口侧。优选的，所述提取差异区域特征，根据差异区域特征、图书损坏位置、损坏面积分别判断对应的损坏类型和损坏程度具体为：提取借出图书三维模型上对应的差异区域的曲面法线、曲率；提取归还图书三维模型上对应的差异区域的曲面法线、曲率，分别计算三维模型上对应的差异区域的曲面法线夹角、曲率变化率；若差异区域的曲面法线夹角超过设定角度或者曲率变化率超过设定值，则对应的损坏类型为表面翻折或卷曲，将法线夹角作为翻折损坏程度δ1，将所述曲率变化率作为卷曲损坏程度δ2；若图书损坏位置对应图书的开口侧，进行孔洞检测提取差异区域边界点，分别计算差异区域面积，若差异区域面积超过预设面积阈值，则判顶图书损坏类型为缺页或浸水；根据差异区域面积计算缺页或浸水损坏程度δ3计算公式为：其中Si为开口侧每个差异区域面积，a、b、c分别为图书对应的长、宽、高。优选的，所述根据各损坏类型的损坏程度进行图书损坏评级具体为：若缺页或浸水损坏程度δ3超出对应的设定阈值，判定为严重损坏；否则通过加权求和的方式计算综合损坏程度，缺页或浸水损坏的权重大于其它损坏类型的权重，若所述综合损坏程度超过预设综合阈值，判定为严重损坏；否则为一般损坏或无损坏。本专利技术第二方面，公开一种图书损坏自动检测装置，所述装置包括：数据获取模块：通过双目摄像头对归还图书进行图像采集，获取图像的深度信息；三维重构模块：将深度信息转换为三维点云数据，根据三维点云数据进行三维重构，生成借出图书和归还图书的三维模型并保存至数据库；角点匹配模块：将当前归还图书的三维模型与同一本图书借出时的三维模型进行多次角点匹配，确定对应位置；分别计算每次角点匹配的空间差异度，选取空间差异度最小的匹配结果；差异确定模块：根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置；损坏判定模块：提取差异区域特征，根据差异区域特征、图书损坏位置分别判断对应的损坏类型和损坏程度，根据各损坏类型的损坏程度进行图书损坏评级。本专利技术相对于现有技术具有以下有益效果：通过三维重构获取准确的图书三维空间信息，通过角点匹配选取空间差异度最小的匹配结果用于损坏程度判断，进一步减小匹配误差，提高判定准确度；通过差异度最小的匹配结果确定存在差异的区域，进而判断图书损坏类型，识别出缺页、浸水等不可逆损坏，可对不同类型的损坏程度进行细分判断，实现了图书损坏程度自动检测与计算，为图书损坏程度分级评定提供依据。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术的图书损坏自动检测方法流程示意图；具体实施方式下面将结合本专利技术实施方式，对本专利技术实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式仅仅是本专利技术一部分实施方式，而不是全部的实施方式。基于本专利技术中的实施方式，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施方式，都属于本专利技术保护的范围。请参阅图1，本专利技术提出一种图书损坏自动检测方法，所述方法包括：S1、通过双目摄像头对图书进行图像采集，获取图像的深度信息；S2、将深度信息转换为三维点云数据，根据三维点云数据进行三维重构，生成借出图书和归还图书的三维模型并保存至数据库；S3、将当前归还图书的三维模型与同一本图书借出时的三维模型进行多次角点匹配，确定对应位置；分别计算每次角点匹配的空间差异度，选取空间差异度最小的匹配结果；具体为：标准的图书一般为长方体，有8个顶角，所述8个角点数据即为图书对应的8个顶角的坐标，即便是一定程度损毁的图书，根据其三维模型也可确定对应的8个角点数据。分别提取当前归还图书的三维模型和同一本图书借出时的三维模型的8个角点数据；分别选取底面一侧的2个角点数据为基准进行多次角点匹配，采用余弦相似度分别计算空间差异度。选取空间差异度最小的匹配结果。S4、根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置，具体为：根据所述差异度最小的匹配结果分别计算对应点之间的欧式距离，欧式距离均不为0的连通区域即为存在差异的区域；确定存在本文档来自技高网...

【技术保护点】
1.一种图书损坏自动检测方法，其特征在于，所述方法包括：/n通过双目摄像头对图书进行图像采集，获取图像的深度信息；/n将深度信息转换为三维点云数据，根据三维点云数据进行三维重构，生成借出图书和归还图书的三维模型并保存至数据库；/n将当前归还图书的三维模型与同一本图书借出时的三维模型进行多次角点匹配，确定对应位置；分别计算每次角点匹配的空间差异度，选取空间差异度最小的匹配结果；/n根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置；/n提取差异区域特征，根据差异区域特征、图书损坏位置分别判断对应的损坏类型和损坏程度，根据各损坏类型的损坏程度进行图书损坏评级。/n

【技术特征摘要】
1.一种图书损坏自动检测方法，其特征在于，所述方法包括：
通过双目摄像头对图书进行图像采集，获取图像的深度信息；
将深度信息转换为三维点云数据，根据三维点云数据进行三维重构，生成借出图书和归还图书的三维模型并保存至数据库；
将当前归还图书的三维模型与同一本图书借出时的三维模型进行多次角点匹配，确定对应位置；分别计算每次角点匹配的空间差异度，选取空间差异度最小的匹配结果；
根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置；
提取差异区域特征，根据差异区域特征、图书损坏位置分别判断对应的损坏类型和损坏程度，根据各损坏类型的损坏程度进行图书损坏评级。


2.根据权利要求1所述图书损坏自动检测方法，其特征在于，所述将归还图书的三维模型与同一本图书上一次归还时的三维模型进行多次角点匹配，确定对应位置，分别计算每次角点匹配的空间差异度，选取空间差异度最小的匹配结果具体为：
分别提取当前归还图书的三维模型和同一本图书借出时的三维模型的8个角点数据；
分别选取底面的3个角点数据为基准进行多次角点匹配，采用余弦相似度分别计算空间差异度；
选取空间差异度最小的匹配结果。


3.根据权利要求1所述图书损坏自动检测方法，其特征在于，所述根据所述差异度最小的匹配结果确定存在差异的区域，判断图书损坏位置具体为：
根据所述差异度最小的匹配结果分别计算对应点之间的欧式距离，欧式距离均不为0的连通区域即为存在差异的区域；
确定存在差异的区域对应的图书位置，将所述对应位置作为图书损坏位置，将图书损坏位置划分为正面、反面、书脊侧和开口侧。


4.根据权利要求3所述图书损坏自动检测方法，其特征在于，所述提取差异区域特征，根据差异区域特征、图书损坏位置、损坏面积分别判断对应的损坏类型和损坏程度具体为：
提取借出图书三维模型上对应的差异区域的曲面法...

【专利技术属性】
技术研发人员：海克洪，王迎曙，
申请(专利权)人：湖北美和易思教育科技有限公司，
类型：发明
国别省市：湖北;42