一种图像处理方法、装置及设备制造方法及图纸

本说明书实施例提供了一种图像处理方法、装置及设备，所述图像处理方法、装置及设备可用于人工智能技术领域。所述方法包括根据SIFT特征检测算法分别确定参考图像对应的第一特征点集和目标图像对应的第二特征点集；从所述第二特征点集中确定所述第一特征点集中每个特征点的近邻特征点；根据所述第一特征点集中每个特征点和对应的近邻特征点，确定特征点匹配信息；基于所述特征点匹配信息，确定将所述目标图像映射到所述参考图像的单应性矩阵；利用所述单应性矩阵对所述目标图像进行线性变换，获得所述目标图像对应的矫正图像。利用本说明书实施例可以提高鲁棒性的同时，提高对图像的矫正准确度。像的矫正准确度。像的矫正准确度。

【技术实现步骤摘要】
一种图像处理方法、装置及设备


[0001]本申请涉及人工智能
，特别涉及一种图像处理方法、装置及设备。

技术介绍

[0002]票据、凭证作为商业银行开展各种承兑、贴现和抵押放款等业务的信用媒介基础。以票据作为载体的商业信用信息管理，是银行开展日常经营的重要基础。而作为信息管理第一步，票据信息提取录入是必不可少的环节。近年来随着RPA(Robotic process automation，机器人流程自动化)技术发展，银行借助OCR(Optical Character Recognition，光学字符识别)技术对票据信息进行自动识别，以期将大量人力资源从手工录入票据信息中解放出来，提高效能产出。
[0003]由于商业银行业务过程中票据管理大多由扫描仪、高拍仪等专用设备进行票据影像采集。现有技术中借助OCR技术对票据信息进行自动识别时，先对票据影像中票据轮廓进行检测，然后根据轮廓角点构建仿射变换矩阵，进而对影像进行仿射变换以实现线性畸变矫正。然而，这种方式一方面需要影像中具有完整清晰的目标轮廓，另一方面，对于二维畸变(诸如扫描仪、高拍仪等专用设备采集引入)和三维畸变(诸如手机、ipad等手持设备拍摄引起)其需要分别构建不同的变换矩阵进行矫正处理使得泛用性和鲁棒性较低。
[0004]因此，业内亟需一种可以解决上述技术问题的技术方案。

技术实现思路

[0005]本说明书实施例提供了一种图像处理方法、装置及设备，可以提高鲁棒性的同时，提高对图像的矫正准确度。
[0006]本说明书提供的一种图像处理方法、装置及设备是包括以下方式实现的。
[0007]一种图像处理方法，包括：根据SIFT特征检测算法分别确定参考图像对应的第一特征点集和目标图像对应的第二特征点集；从所述第二特征点集中确定所述第一特征点集中每个特征点的近邻特征点；根据所述第一特征点集中每个特征点和对应的近邻特征点，确定特征点匹配信息；基于所述特征点匹配信息，确定将所述目标图像映射到所述参考图像的单应性矩阵；利用所述单应性矩阵对所述目标图像进行线性变换，获得所述目标图像对应的矫正图像。
[0008]一种图像处理装置，包括：第一确定模块，用于根据SIFT特征检测算法分别确定参考图像对应的第一特征点集和目标图像对应的第二特征点集；第二确定模块，用于从所述第二特征点集中确定所述第一特征点集中每个特征点的近邻特征点；第三确定模块，用于根据所述第一特征点集中每个特征点和对应的近邻特征点，确定特征点匹配信息；第四确定模块，用于基于所述特征点匹配信息，确定将所述目标图像映射到所述参考图像的单应性矩阵；获得模块，用于利用所述单应性矩阵对所述目标图像进行线性变换，获得所述目标图像对应的矫正图像。
[0009]一种图像处理设备，包括至少一个处理器以及存储计算机可执行指令的存储器，
所述处理器执行所述指令时实现本说明书实施例中任意一个方法实施例的步骤。
[0010]一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现本说明书实施例中任意一个方法实施例的步骤。
[0011]本说明书提供的一种图像处理方法、装置及设备。一些实施例可以根据SIFT特征检测算法分别确定参考图像对应的第一特征点集和目标图像对应的第二特征点集，从第二特征点集中确定第一特征点集中每个特征点的近邻特征点。还可以根据第一特征点集中每个特征点和对应的近邻特征点，确定特征点匹配信息，基于特征点匹配信息，确定将目标图像映射到参考图像的单应性矩阵，进一步可以利用单应性矩阵对目标图像进行线性变换，获得目标图像对应的矫正图像。由于本申请方案可以对票据图片中诸如旋转、位移、缩放、三维角度偏转在内的各种线性畸变干扰情况进行自适应地矫正处理，能够自动兼容各种平面畸变和三维透视畸变，提供统一通用矫正处理，相比传统根据轮廓、角点矫正方法，本申请方案可以提高鲁棒性的同时，提高对图像的矫正准确度。
附图说明
[0012]此处所说明的附图用来提供对本说明书的进一步理解，构成本说明书的一部分，并不构成对本说明书的限定。在附图中：
[0013]图1是本说明书提供的一种图像处理方法的一个实施例的流程示意图；
[0014]图2是本说明书提供的一种图像处理方法的一个具体实施例的流程示意图；
[0015]图3是本说明书提供的对于扫描件票据影像轻微旋转畸变的原始图像；
[0016]图4是本说明书提供的对于扫描件票据影像轻微旋转畸变的矫正图像；
[0017]图5是本说明书提供的对于扫描件票据影像严重旋转畸变的原始图像；
[0018]图6是本说明书提供的对于扫描件票据影像严重旋转畸变的矫正图像；
[0019]图7是本说明书提供的手机拍摄票据影像透视偏转畸变的原始图像；
[0020]图8是本说明书提供的手机拍摄票据影像透视偏转畸变的矫正图像；
[0021]图9是本说明书提供的一种图像处理装置的一个实施例的模块结构示意图；
[0022]图10是本说明书提供的一种图像处理服务器的一个实施例的硬件结构框图。
具体实施方式
[0023]为了使本
的人员更好地理解本说明书中的技术方案，下面将结合本说明书实施例中的附图，对本说明书实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本说明书中的一部分实施例，而不是全部的实施例。基于本说明书中的一个或多个实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本说明书实施例保护的范围。
[0024]近年来随着RPA技术发展，银行借助OCR技术对票据信息进行自动识别，以期将大量人力资源从手工录入票据信息中解放出来，提高效能产出。有别于传统OCR应用场景的识别完整文字信息，银行业务相关OCR场景往往需提取特定字段信息加以识别，比如对于划款指令影像，只需要识别其中的收/付款方账号、金额等字段。目前业界对于特定信息提取识别的做法主要可分为两种：(1)是先对影像进行OCR识别获取完整文字识别信息，再通过预先设计好的关键字匹配规则提取目标字段信息，以划款指令为例，预设匹配关键字“收款方
账号”、“付款方账号”、“金额”，提取规则是提取划款指令整文识别文本中匹配关键字后固定长度的文本；(2)是先基于版式定义提取影像中特定字段信息切片，再进行OCR获取识别信息，以划款指令为例，由于版式较为固定，“收款方账号”、“付款方账号”、“金额”的要素内容会出现在相对固定的位置区域，可基于版式信息预先定义好待识别要素相对位置，处理时直接根据相对位置提取出切片识别。其中，前一种方案高度依赖于OCR识别精准度和稳定性，一旦文字识别准确率下降或出现波动，尤其对匹配规则涉及关键字识别结果不稳定，则会导致信息提取效果不稳定；此外，基于关键字匹配规则也易受无关字段干扰影响，一旦无关字段中出现匹配规则所涉及的关键字，则会对真正目标要素的信息提取造成干扰。考虑到OCR现实中无法达到百分之百准确率，也无法保证特定关键字不会出现误识别。同本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：根据SIFT特征检测算法分别确定参考图像对应的第一特征点集和目标图像对应的第二特征点集；从所述第二特征点集中确定所述第一特征点集中每个特征点的近邻特征点；根据所述第一特征点集中每个特征点和对应的近邻特征点，确定特征点匹配信息；基于所述特征点匹配信息，确定将所述目标图像映射到所述参考图像的单应性矩阵；利用所述单应性矩阵对所述目标图像进行线性变换，获得所述目标图像对应的矫正图像。2.根据权利要求1所述的方法，其特征在于，所述根据SIFT特征检测算法分别确定参考图像对应的第一特征点集和目标图像对应的第二特征点集，包括：获取参考图像和目标图像；利用所述SIFT特征检测算法分别对所述参考图像和所述目标图像进行特征点提取，获得参考特征点集和目标特征点集；基于所述参考特征点集，构建线性变换矩阵；根据所述线性变换矩阵分别对所述参考特征点集中每个特征点和所述目标特征点集中每个特征点进行特征变换，获得所述参考图像对应的第一特征点集和目标图像对应的第二特征点集。3.根据权利要求2所述的方法，其特征在于，所述基于所述参考特征点集，构建线性变换矩阵，包括：对所述参考特征点集进行SVD分解，获得分解结果；其中，所述分解结果中包括特征值和特征向量；从所述分解结果中选取预设数量特征值对应的特征向量构建线性变换矩阵。4.根据权利要求1所述的方法，其特征在于，所述从所述第二特征点集中确定所述第一特征点集中每个特征点的近邻特征点，包括：基于最近邻搜索算法从所述第二特征点集中确定所述第一特征点集中每个特征点的近邻特征点。5.根据权利要求4所述的方法，其特征在于，所述根据所述第一特征点集中每个特征点和对应的近邻特征点，确定特征点匹配信息，包括：计算每个特征点分别与近邻特征点的相似度距离；基于所述相似度距离，确定与每个特征点匹配的特征点；基于每个特征点和与每个特征点匹配的特征点，确定特...

【专利技术属性】
技术研发人员：李兆佳，姜璐，许明，李铁岭，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：