【技术实现步骤摘要】
本申请涉及计算机视觉，尤其涉及一种文档检测矫正方法及终端。
技术介绍
1、随着在线教育和在线办公的需求日益增加，用户经常需要对发票、书本、试卷、作业本进行扫描或拍照得到对应的文档图像，然后再对文档图像进行检测，现有的文档扫描或者检测方案中，都只能适配单页的场景，例如基于深度学习的图像边缘检测分割算法，将文档边缘视为要检测分割的对象，最终得到二值化文档边缘分割图像，这种方式无法对单页、双页类型进行区分，只能对平整类型的文档进行检测矫正；又例如，基于垂直线的条数以及用户给出单页或者双页的先验信息的方式，构造了一种基于传统算法的半自动单双页矫正方案，然后通过判断图像的宽度是否大于高度，以及在图像中间部分是否能找到足够长的中缝直线来区分单双页，这种方式在文档没有明显中线的情况下，无法区分单双页；因此，现有技术中对于弯折的发票、打开的书籍、试卷、作业本等文档类型，往往只能检测出其中一页，这样就造成了另一页文档信息的丢失，给用户体验带来严重影响。
技术实现思路
1、本申请实施例提供一种文档检测矫正方法及终端，用以实现对单页文档或多页文档等多种文档类型进行检测并矫正。
2、第一方面，本申请实施例提供一种文档检测矫正方法，该方法可以由终端执行，该方法包括：响应于针对第一应用的第一操作，显示扫描预览界面，扫描预览界面用于显示预览的第一图像，第一图像中包含第一文档；接收第二操作；响应于第二操作，采集获得第二图像，第二图像中包括第一文档；然后，将第二图像分别输入到训练完成的分类模型与分割模型
3、本申请实施例中，通过将采集到的第二图像输入分类模块，可以准确的检测出第二图像包含的第一文档的文档类型，例如为单页文档，又例如多页文档，通过将第二图像输入分割模块，可以对第一文档进行边缘检测得到边缘分割图，然后结合分类结果以及边缘分割图可以实现对多种不同的文档类型的文档图像进行矫正。
4、一种可能的设计中，该方法还包括：响应于第三操作，显示第二用户界面，第二用户界面显示有第二图像以及第一文档的角点，第一文档的角点用于矫正第一文档；接收对第一文档的角点中至少一个角点的第四操作；响应于第四操作，调整至少一个角点的位置。通过该设计，可以实现通用户操作对第一文档的角点的位置进行调整。
5、一种可能的设计中，在响应于第四操作，调整至少一个角点的位置之后，还可以响应于第五操作，根据第一文档的分类结果以及调整位置后的角点坐标，对第一文档进行矫正得到第二目标文档图像；显示第三用户界面，第三用户界面用于显示第二目标文档图像。通过该设计，基于对第一文档的分类结果以及调整位置后的角点坐标对第一文档进行矫正，可以提高矫正的准确性。
6、一种可能的设计中，在响应于第二操作，采集获得第二图像之后，该方法还包括：显示第四用户界面，第四用户界面用于显示第二图像以及第一文档的角点。通过该设计，在获得第二图像之后，可以在第四显示界面上展示获得的第二图像以及第一文档的角点，便于用户对第一文档的角点进行调整。
7、一种可能的设计中，该方法还包括：接收对第一文档的角点中至少一个角点的第六操作；响应于第六操作，调整至少一个角点的位置；响应于第七操作，根据第一文档的分类结果以及调整位置后的角点坐标，对第一文档进行矫正得到第三目标文档图像；显示第五用户界面，第五用户界面用于显示第三目标文档图像。通过该设计，基于对第一文档的分类结果以及调整位置后的角点坐标对第一文档进行矫正，可以提高矫正的准确性。
8、一种可能的设计中，第一文档的分类结果包括至少一种文档类型以及每种文档类型的概率；至少一种文档类型包括以下至少一种类型：
9、(1)页面平整的单页文档类型；
10、(2)页面弯曲的单页文档类型；
11、(3)左侧页面与右侧页面均平整的双页文档类型；
12、(4)左侧页面平整右侧页面弯曲的双页文档类型；
13、(5)左侧页面弯曲右侧页面平整的双页文档类型；
14、(6)左侧页面弯曲右侧页面弯曲的双页文档类型。
15、通过该设计，根据分类结果可以确定第一文档的类型，有助于后续选择合适的矫正算法进行矫正，获的更好的矫正效果。
16、一种可能的设计中，根据第一文档的分类结果以及边缘分割图，对第一文档进行矫正得到第一目标文档图像，包括：根据第一文档的分类结果以及边缘分割图，确定第一文档的类型；根据第一文档的类型，确定第一文档对应的文档矫正算法；将第二图像输入至第一文档对应的文档矫正算法，得到第一目标文档图像。
17、一种可能的设计中，将第二图像输入至第一文档对应的文档矫正算法，得到第一目标文档图像，可以通过以下方式一至方式六中的任一种方式实现：
18、方式一，若第一文档的类型为页面平整的单页文档类型，则将第二图像输入至普通文档矫正算法进行矫正得到第一目标文档图像；例如在采集页面平整的单页文档的图像时，拍摄视角并不是垂直于第一文档所在页面，导致采集到的第二图像所包含的第一文档虽然页面平整但是页面中的内容是倾斜的，通过方式一可以实现对第一文档进行矫正，使得矫正后得到的第一目标文档图像的观看效果相当于拍摄视角垂直于边缘平整的单页文档所在平面而拍摄得到的效果，这样可以提升用户对目标文档图像的观感。
19、方式二，若第一文档的类型为页面弯曲的单页文档类型，则将第二图像输入至第一文档矫正算法进行矫正得到单页文档图像，将单页文档图像输入至去扭曲矫正算法进行矫正，得到第一目标文档图像；例如采集到的第二图像中第一文档是单页文档，第一文档的边缘弯曲、文字不在一条直线，通过方式二对第一文档进行矫正，可以使得矫正后得到的第一目标文档图像中文档边缘为直线，而且文字在一条直线，这样可以提升用户对目标文档图像的观感。
20、方式三，若第一文档的类型为左侧页面与右侧页面均平整的双页文档类型，则将第二图像中第一文档的左侧页面输入至普通文档矫正算法进行矫正得到第一页面图像，将第一文档的右侧页面输入至普通文档矫正算法进行矫正得到第二页面图像，将第一页面图像与第二页面图像合并得到第一目标文档图像；例如在采集页面平整的双页文档的图像时，拍摄视角并不是垂直于第一文档所在页面，导致采集到的第二图像所包含的第一文档虽然页面平整但是页面中的内容是倾斜的，通过方式三可以实现对第一文档进行矫正，使得矫正后得到的第一目标文档图像的观看效果相当于拍摄视角垂直于边缘平整的双页文档所在平面而拍摄得到的效果，这样可以提升用户对目标文档图像的观感。
21、方式四，若第一文档的类型为左侧页面平整右侧页面弯曲的双页文档类型，则将第二图像中第一文档的左侧页面输入至普通文档矫正算法进行矫正得到第三页面图像，将第一文档的右侧页面输入本文档来自技高网...
【技术保护点】
1.一种文档检测矫正方法，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，所述方法还包括：
3.如权利要求2所述的方法，其特征在于，在响应于所述第四操作，调整所述至少一个角点的位置之后，所述方法还包括：
4.如权利要求1所述的方法，其特征在于，在所述响应于所述第二操作，采集获得第二图像之后，所述方法还包括：
5.如权利要求4所述的方法，其特征在于，所述方法还包括：
6.如权利要求1-5任一项所述的方法，其特征在于，所述第一文档的分类结果包括至少一种文档类型以及每种文档类型的概率；
7.如权利要求1-6任一项所述的方法，其特征在于，所述根据所述第一文档的分类结果以及所述边缘分割图，对所述第一文档进行矫正得到第一目标文档图像，包括：
8.如权利要求7所述的方法，其特征在于，所述将所述第二图像输入至所述第一文档对应的文档矫正算法，得到所述第一目标文档图像，包括：
9.一种终端，其特征在于，包括处理器和存储器；
10.一种计算机可读存储介质，其特征在于，所述计算
11.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序或指令，当所述计算机程序或指令被终端执行时，实现如上述权利要求1至8中任一项所述的方法。
...【技术特征摘要】
1.一种文档检测矫正方法，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，所述方法还包括：
3.如权利要求2所述的方法，其特征在于，在响应于所述第四操作，调整所述至少一个角点的位置之后，所述方法还包括：
4.如权利要求1所述的方法，其特征在于，在所述响应于所述第二操作，采集获得第二图像之后，所述方法还包括：
5.如权利要求4所述的方法，其特征在于，所述方法还包括：
6.如权利要求1-5任一项所述的方法，其特征在于，所述第一文档的分类结果包括至少一种文档类型以及每种文档类型的概率；
7.如权利要求1-6任一项所述的方法，其特征在于，所述根据所...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。