类似区域检测装置、类似区域检测方法及程序制造方法及图纸

技术编号:33425334 阅读:23 留言:0更新日期:2022-05-19 00:16
实施方式的类似区域检测装置具有获取部、特征点提取部、匹配部、最外轮廓提取部和检测部。获取部获取第一图像和第二图像。特征点提取部提取第一图像和第二图像各自的特征点。匹配部将从第一图像提取出的特征点和从第二图像提取出的特征点建立对应关系,检测图像之间的对应点。最外轮廓提取部从第一图像和第二图像的各个提取最外轮廓。检测部基于最外轮廓和对应点的数量,从第一图像和第二图像的各个检测在第一图像和第二图像中相互类似的局部区域即类似区域。域即类似区域。域即类似区域。

【技术实现步骤摘要】
【国外来华专利技术】类似区域检测装置、类似区域检测方法及程序


[0001]本专利技术涉及类似区域检测装置、类似区域检测方法及程序。

技术介绍

[0002]作为判定图像的类似性的方法,已知模板匹配。模板匹配是将模板图像与比较对象的图像进行比较,从比较对象的图像检测与模板图像类似的部分的技术。但是,在模板匹配中,虽然能够从比较对象的图像检测与模板图像的整体类似的区域,但是不能检测与模板图像的局部的区域类似的区域。
[0003]现有技术文献
[0004]专利文献
[0005]专利文献1:日本特开2018

72937号公报

技术实现思路

[0006]专利技术要解决的课题
[0007]本专利技术要解决的课题是,提供一种能够从各图像检测在图像之间相互类似的局部区域即类似区域的类似区域检测装置、类似区域检测方法及程序。
[0008]实施方式的类似区域检测装置具有获取部、特征点提取部、匹配部、最外轮廓提取部和检测部。获取部获取第一图像和第二图像。特征点提取部提取所述第一图像和所述第二图像各自的特征点。匹配部将从所述第一图像提取出的特征点和从所述第二图像提取出的特征点建立对应关系,检测图像之间的对应点。最外轮廓提取部从所述第一图像和所述第二图像的各个提取最外轮廓。检测部基于所述最外轮廓和所述对应点的数量,从所述第一图像和所述第二图像的各个检测在所述第一图像和所述第二图像中相互类似的局部区域即类似区域。
附图说明
[0009]图1是表示有关实施方式的类似区域检测装置的功能性的结构例的框图。
[0010]图2是表示有关实施方式的类似区域检测装置的处理顺序的一例的流程图。
[0011]图3是表示第一图像及第二图像的具体例子的图。
[0012]图4是表示对应点的一例的图。
[0013]图5是表示最外轮廓的一例的图。
[0014]图6是表示对应点是否位于最外轮廓的内侧的判定方法的一例的图。
[0015]图7是表示最外轮廓和对应点的关系的一例的图。
[0016]图8是表示类似图像对的一例的图。
[0017]图9是表示类似图像对的一例的图。
[0018]图10是表示类似图像对的一例的图。
[0019]图11是说明确认对应点的位置关系的方法的一例的图。
[0020]图12是说明特征点匹配的另一例的图。
[0021]图13是表示类似图像对的一例的图。
[0022]图14是表示有关实施方式的类似区域检测装置的硬件结构例的框图。
具体实施方式
[0023]下面,关于实施方式的类似区域检测装置、类似区域检测方法及程序,参照附图进行详细说明。
[0024]<实施方式的概要>
[0025]实施方式的类似区域检测装置用于从各图像中检测在两个图像之间相互类似的局部区域即类似区域,特别是,根据特征点匹配和最外轮廓提取的组合进行类似区域的检测。
[0026]特征点匹配是指以下技术,从两个图像中分别提取表示图像的特征的特征点,将从一个图像提取的特征点和从另一个图像提取的特征点,例如根据各特征点的局部特征量的近似度建立对应关系。将在图像之间建立了对应关系的特征点称为对应点。最外轮廓提取是指提取图像所含的图形等物体的最外侧的轮廓(最外轮廓)的技术。在本实施方式中,在假设在一个图像中包含大量对应点的物体与另一个图像中的任一个物体类似的基础上,对于两个图像分别将包含大量对应点的最外轮廓内的区域检测为类似区域。
[0027]另外,作为检测类似区域的方法,也可以考虑仅使用特征点匹配的方法。即,分别从两个图像将由通过特征点匹配得到的对应点包围的区域检测为类似区域的方法。但是,在该方法中存在这样的问题:并非是将在两个图像之间类似的物体的整体而是仅将由物体内的对应点包围的部分的区域检测为类似区域;或在两个图像之间的并不类似的物体的一部分存在对应点的情况下,将包含该物体的一部分的区域检测为类似区域。与此相对,在本实施方式中,由于是根据特征点匹配和最外轮廓提取的组合进行类似区域的检测的结构,所以能够将在两个图像之间类似的物体的整体妥当地检测为类似区域。
[0028]本实施方式的类似区域检测装置例如能够在自动生成事例数据(学习数据)的用途中有效地利用,该事例数据用于使包含局部类似的类似图像检索所使用的特征提取器进行学习(有监督学习)。在一般的类似图像检索中,根据查询指令提取表示图像的特征的特征量,将查询图像的特征量与登记图像的特征量进行比较,由此检索与查询图像类似的类似图像。另一方面,在包含局部类似的类似图像检索中,例如在查询图像和登记图像双方进行区域提取,并进行提取出的局部区域的比较。由此,能够检索仅部分地类似的图像。作为用于提高这样的类似图像检索的检索精度的手段之一,存在对特征提取器进行学习以使判断为类似的图像彼此的特征量变近的方法。由此,能够检索在学习前不能检索的类似图像。
[0029]为了这样的特征提取器的类似性的学习,需要一个图像和与其类似的类似图像的两幅一组的类似图像对。在类似图像包含局部类似的情况下,不使整体图像彼此成为类似图像对,而需要使提取了双方的类似区域的局部图像彼此成为类似图像对。在需要得到这样的类似图像对的情况下,存在例如人工地比较多个图像,并指示判断为类似区域的部位的方法。但是,对于该方法,获得大量的学习数据需要花费庞大的时间。与此相对,如果使用本实施方式的类似区域检测装置,则能够不经人手而自动地生成局部图像彼此的类似图像对,能够效率良好地进行包含局部类似的类似图像检索所使用的特征提取器的学习。
[0030]<第一实施方式>
[0031]图1是表示有关本实施方式的类似区域检测装置的功能性的结构例的框图。如图1所示,有关本实施方式的类似区域检测装置具有获取部1、特征点提取部2、匹配部3、最外轮廓提取部4、检测部5和输出部6。
[0032]获取部1从装置外部获取成为处理的对象的第一图像和第二图像,将所获取的第一图像及第二图像传递给特征点提取部2和最外轮廓提取部4和输出部6。
[0033]成为处理的对象的第一图像和第二图像,例如由使用类似区域检测装置的用户指定。即,如果用户指定表示第一图像的存储位置的路径,则获取部1读取保存在该路径的第一图像。同样地,如果用户指定表示第二图像的存储位置的路径,则获取部1读取保存在该路径的第二图像。另外,图像的获取方法不限于此,例如也可以获取用户通过相机或扫描仪等拍摄的图像作为第一图像和第二图像。
[0034]特征点提取部2提取通过获取部1所获取的第一图像和第二图像各自的特征点,计算所提取的各特征点的局部特征量,将第一图像和第二图像各自的特征点及局部特征量的信息传递给匹配部3。
[0035]特征点的提取以及局部特征量的计算使用例如SIFT(Scale

Invariant Feature Transform,尺度不变特征变换)那样的本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种类似区域检测装置,具有:获取部,获取第一图像和第二图像;特征点提取部,提取所述第一图像和所述第二图像各自的特征点;匹配部,将从所述第一图像提取出的特征点和从所述第二图像提取出的特征点建立对应关系,检测图像之间的对应点;最外轮廓提取部,从所述第一图像和所述第二图像的各个提取最外轮廓;检测部,基于所述最外轮廓和所述对应点的数量,从所述第一图像和所述第二图像的各个检测在所述第一图像和所述第二图像中相互类似的局部区域即类似区域。2.根据权利要求1所述的类似区域检测装置,所述检测部对于所述第一图像和所述第二图像的各个,将各图像所包含的所述最外轮廓内的区域中的所述对应点的数量最大的区域检测为所述类似区域。3.根据权利要求1所述的类似区域检测装置,所述检测部对于所述第一图像和所述第二图像的各个,将各图像所包含的所述最外轮廓内的区域中的所述对应点的数量超过类似判定阈值的区域检测为类似区域。4.根据权利要求1~3中任一项所述的类似区域检测装置,所述类似区域检测装置还具有输出部,从所述第一图像和所述第二图像的各个切取与所述类似区域的所述最外轮廓外接的矩形区域的图像作为类似图像对输出。5.根据权利要求4所述的类似区域检测装置,所述输出部将映入所述矩形区域内的所述类似区域以外的背景区域的物体去除而进行输出。6.根据权利要求1~5中任一项所述的类似区域检测装置,所述检测部基于所述最外轮廓和所述对应点的数量和所述对应点的位置关系,从所述第一图像和所述第二图像的各个检测所述类似区域。7.根据权利要求1~6中任一项所述的类似区域检测装置,所述匹配部...

【专利技术属性】
技术研发人员:木山亮
申请(专利权)人:东芝数字解决方案株式会社
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1