视差值导出装置、可移动设备和视差值产生方法制造方法及图纸

一种视差值导出装置，包括计算器，该计算器被配置为基于区域的亮度值，来计算与在基准图像中的基准区域对应的在比较图像中的对应区域的候选的代价。该装置还包括改变器，其被配置为将超过阈值的代价改变为高于该阈值的值；合成器，其被配置为使如下项合成，即对于在改变之后的对于一个基准区域的对应区域的候选的代价，以及对于在改变之后的对于另一个基准区域的对应区域的候选的代价；以及导出单元，其被配置为基于一个基准区域的位置和在比较图像中的对应区域的位置来导出视差值，对于在比较图像中的对应区域，合成之后的代价是最小的。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及视差值导出装置、可偏移设备、机器人、视差值产生方法和计算机程序。
技术介绍
远距离测量方法是传统公知的，其中从立体相机通过立体成像导出对于对象的视差，指示这种视差的视差值被用于基于三角测量原理来测量从立体相机到对象的距离。采用该距离测量方法，例如，测量在汽车之间的距离或者在汽车与障碍物之间的距离以用于防止汽车碰撞。立体匹配过程被用于获取视差值。在该立体匹配过程中，通过获取图像信号是最类似的所在的对应像素的位置，计算在通过立体相机中的两个相机中的一个所获取的基准图像与通过其它相机所获取的比较图像之间的视差值，同时，相对于在基准图像中的目标基准像素，依次偏移对于在比较图像中的对应像素的多个候选。一般地，比较通过两个相机获取的图像信号的亮度值，借此获取与在偏移量当中比较的亮度值有关的具有代价的最低的一个(在此，代价是“相异度”)的像素的位置(参见日本专利申请公开No.2006-090896)。然而，在指示对象的亮度改变幅度的纹理是弱的并且待提取的特征是稀缺的所在的区域中，即使通过执行边缘检测，也不能获取足够的效果。提出一种即使对于具有弱纹理的对象导出更加精确的视差的方法(参见，例如，日本专利申请公开No.2012-181142)。采用该方法，不仅在基准图像中的目标基准像素的代价，还有存在于接近远离基准像素的位置的其它像素的代价被聚合，以导出对于具有弱纹理的对象的视差。然而，当使用在日本专利申请公开No.2012-181142中描述的方法来测量在汽车之间的距离或其它距离时，对于公路或具有弱纹理的其它对象的代价被具有强纹理的环境(例如前方行驶的车辆)的代价所影响。这导致不能导出精确的代价。
技术实现思路
本专利技术的目的是至少部分地解决在常规技术中的问题。根据实施例，提供一种用于导出视差值的视差值导出装置，所述视差值指示来自通过捕获对象的图像的第一成像单元所获取的基准图像和通过捕获所述对象的另一个图像的第二成像单元所捕获的比较图像中的所述对象的视差获取。视差值导出装置包括计算器，其被配置为，基于基准区域的亮度值和对于对应区域的候选的亮度值，来计算与在基准图像中的所述基准区域对应的比较图像中的对应区域的候选的代价，所述对于对应区域的候选以如下方式来指定，即基于在所述比较图像中的基准区域，对于所述对应区域的各自的候选在核线上偏移各自的偏移量；改变器，其被配置为，将在由所述计算器所计算的代价当中的超过阈值的代价改变为高于所述阈值的给定值；合成器，其被配置为，关于所述偏移量中的每个，使如下项进行合成，即对于与由所述改变器改变之后的一个基准区域对应的对应区域的候选的代价，以及对于与由所述改变器改变之后的另一个基准区域对应的对应区域的候选的代价；以及导出单元，其被配置为，基于在基准图像中的一个基准区域的位置和在所述比较图像中的对应区域的位置，导出所述视差值，对于在所述比较图像中的所述对应区域，在由合成器合成之后的代价是最小的。当结合附图考虑时，通过阅读本专利技术的当前优选的实施例的以下详细描述，将更好地理解该专利技术的以上和其它目的、特征、优点以及技术和工业意义。附图说明图1是导出从成像装置到对象的距离的原理的图示。图2示出(a)基准图像的示例、(b)高密度视差图像的示例，以及(c)边缘视差图像的示例。图3示出在依次偏移对于相对于基准图像的比较图像中的对应像素的候选的偏移量的计算。图4是示出相对于偏移量的代价的图表。图5是用于导出合成代价的概念图。图6是示出相对于视差值的合成代价的图表。图7示出配备根据本专利技术的实施例的视差值导出装置的汽车。图8是视差值导出装置的示意图。图9是作为整体的视差值导出装置的硬件配置图。图10是视差值导出装置的主要部分的硬件配置图。图11是示出在第一实施例中的处理的流程图。图12示出基准图像的示例、部分基准图像、没有代价改变的高密度视差图像、具有代价改变且具有阈值Th＝40的高密度视差图像，以及具有代价改变且具有阈值Th＝20的高密度视差图像。图13示出没有代价改变的代价的图表、具有代价改变的代价的图表、没有代价改变的合成代价的图表，以及具有代价改变的合成代价的图表。图14是基准图像的概念图，该基准图像包括指示由对象识别装置识别的对象识别结果的尺寸的帧。图15是示出在第二实施例中的处理的流程图。图16示出基准图像的示例、部分基准图像、没有代价改变的高密度视差图像，以及具有代价改变的高密度视差图像。图17示出没有代价改变的代价的图表、具有代价改变的代价的图表、没有代价改变的合成代价的图表，以及具有代价改变的合成代价的图表。图18示出与图17的(b)等同的图表、与图17的(d)等同的图表，以及具有代价改变的合成代价的图表。具体实施方式下面将参考附图描述本专利技术的实施例。使用SGM方法的距离测量方法的概述首先参考图1到图6，将描述使用半全局匹配(SGM)的距离测量方法的概述。SGM方法在由半全局匹配和相互信息的精确和有效的立体处理(AccurateandEfficientStereoProcessingbySemi-GlobalMatchingandMutualInformation)中公开，并且在下面给出简要说明。距离测量的原理参照图1，将描述测量从立体相机到对象的距离的原理，其中通过使用立体相机来进行立体成像，对象的视差被导出为视差值，并且视差值被用于测量从立体相机到对象的距离。图1是导出从成像装置到对象的距离的原理的图示。为使说明更简单，以下描述相对于每个单个像素而不是相对于包括多个像素的每个预定区域来说明过程。当不以单个像素为单位而是以均包括多个像素的预定区域为单位时，包括基准像素的预定区域被表示为基准区域，并且包括对应像素的预定区域被表示为对应区域。基准区域可仅包括基准像素，并且对应区域可仅包括对应像素。视差值的计算由在图1中示出的成像装置10a和成像装置10b捕获的图像分别被表示为基准图像la和比较图像lb。在图1中，成像装置10a和成像装置10b以平行并且相同的高度来安装。在图1中，在成像装置10a的一个位置处以及还有在成像装置10b的一个位置处捕获在三维空间中的对象E上的点S，其中这两个位置在成像装置10a和成像装置10b的相同的水平线上。也就是，在基准图像la中的点Sa(x,y)以及在比较图像lb中的点Sb(x,y)处捕获在每个图像本文档来自技高网...

【技术保护点】
一种用于导出视差值的视差值导出装置，所述视差值指示来自通过捕获对象的图像的第一成像单元所获取的基准图像和通过捕获所述对象的另一个图像的第二成像单元所捕获的比较图像中的所述对象的视差，所述视差值导出装置包括：计算器，其被配置为，基于基准区域的亮度值和对于对应区域的候选的亮度值，来计算与在基准图像中的所述基准区域对应的比较图像中的对应区域的候选的代价，所述对于对应区域的候选以如下方式来指定，即基于在所述比较图像中的基准区域，对于所述对应区域的各自的候选在核线上偏移各自的偏移量；改变器，其被配置为，将在由所述计算器所计算的代价当中的超过阈值的代价改变为高于所述阈值的给定值；合成器，其被配置为，关于所述偏移量中的每个，使如下项进行合成，即对于与由所述改变器改变之后的一个基准区域对应的对应区域的候选的代价，以及对于与由所述改变器改变之后的另一个基准区域对应的对应区域的候选的代价；以及导出单元，其被配置为，基于在基准图像中的一个基准区域的位置和在所述比较图像中的对应区域的位置，导出所述视差值，对于在所述比较图像中的所述对应区域，在由合成器合成之后的代价是最小的。

【技术特征摘要】
【国外来华专利技术】2013.12.12 JP 2013-257217;2013.12.26 JP 2013-268461.一种用于导出视差值的视差值导出装置，所述视差值指示来自通过捕
获对象的图像的第一成像单元所获取的基准图像和通过捕获所述对象的另一
个图像的第二成像单元所捕获的比较图像中的所述对象的视差，所述视差值导
出装置包括：
计算器，其被配置为，基于基准区域的亮度值和对于对应区域的候选的亮
度值，来计算与在基准图像中的所述基准区域对应的比较图像中的对应区域的
候选的代价，所述对于对应区域的候选以如下方式来指定，即基于在所述比较
图像中的基准区域，对于所述对应区域的各自的候选在核线上偏移各自的偏移
量；
改变器，其被配置为，将在由所述计算器所计算的代价当中的超过阈值的
代价改变为高于所述阈值的给定值；
合成器，其被配置为，关于所述偏移量中的每个，使如下项进行合成，即
对于与由所述改变器改变之后的一个基准区域对应的对应区域的候选的代价，
以及对于与由所述改变器改变之后的另一个基准区域对应的对应区域的候选
的代价；以及
导出单元，其被配置为，基于在基准图像中的一个基准区域的位置和在所
述比较图像中的对应区域的位置，导出所述视差值，对于在所述比较图像中的
所述对应区域，在由合成器合成之后的代价是最小的。
2.一种用于导出视差值的视差值导出装置，所述视差值指示来自通过捕
获对象的图像的第一成像单元所获取的基准图像和通过捕获所述对象的另一
个图像的第二成像单元所捕获的比较图像中的所述对象的视差，并且向用于基
于所述视差值来识别所述对象的对象识别装置输出所述视差值，所述视差值导
出装置包括：
计算器，其被配置为，基于基准区域的亮度值和对于对应区域的候选的亮
度值，来计算与在基准图像中的所述基准区域对应的比较图像中的对应区域的
候选的代价，所述对于对应区域的候选以如下方式来指定，即基于在所述比较
图像中的基准区域，对于所述对应区域的各自的候选在核线上偏移各自的偏移

\t量；
改变器，其被配置为，将在由所述计算器所计算的代价当中的超过阈值的
代价改变为高于所述阈值的给定值；
合成器，其被配置为，关于所述偏移量中的每个，使如下项进行合成，即
对于与由所述改变器改变之后的一个基准区域对应的对应区域的候选的代价，
以及对于与由所述改变器改变之后的另一个基准区域对应的对应区域的候选
的代价；以及
导出单元，其被配置为，基于在基准图像中的一个基准区域的位置和在所
述比较图像中的对应区域的位置，导出所述视差值，对于在所述比较图像中的
所述对应区域，在由合成器合成之后的代价是最小的，其中
当所述阈值较低时，由所述对象识别装置所识别的对象识别结果的尺寸较
小。
3.根据权利要求1或2所述的视差值导出装置，其中
所述给定值是第一给定值，以及
所述计算器将等于或小于所述阈值的代价改变为小于所述阈值的第二给
定值。
4.根据权利要求3所述的视差值导出装置，其中所述第二给定值是零。
5.一种用于导出视差值的视差值导出装置，所述视差值指示来自通过捕
获对象的图像的第一成像单元所获取的基准图像和通过捕获所述对象的另一
个图像的第二成像单元所捕获的比较图像中的所述对象的视差，所述视差值导
出装置包括：
计算器，其被配置为，基于基准区域的亮度值和对于对应区域的候选的亮
度值，来计算与在基准图像中的所述基准区域对应的比较图像中的对应区域的
候选的代价，所述对于对应区域的候选以如下方式来指定，即基于在所述比较
图像中的基准区域，对于所述对应区域的各自的候选在核线上偏移各自的偏移
量；
改变器，其被配置为，将在由所述计算器所计算的代价当中的超过阈值的
代价改变为等于或小于所述阈值的值；
合成器，其被配置为，关于所述偏移量中的每个，使如下项进行合成，即

\t对于与由所述改变器改变之后的一个基准区域对应的对应区域的候选的代价，
以及...

【专利技术属性】
技术研发人员：齐藤树一郎，渡边义一，横田聪一郎，田村亮辅，仲维，
申请(专利权)人：株式会社理光，
类型：发明
国别省市：日本;JP