方法,系统和设备技术方案

在基于块的运动或深度估值中，由于使得在有限的候选值的组上匹配误差最小的结果，一个块被分配以一个运动值或深度值。对于这个组的每个单元的匹配误差是通过计算在第一图象（１０）的一个块与第二图象（１１）的一个区域之间的亮度差值而得到的。可能出现，一个物体（１２）被另一个物体（１５）遮挡，这样，该块中的一个象素（１４）可能不存在于相应的区域中，因为另一个象素（１６）覆盖了这个象素。按照本发明专利技术的方法和系统确定哪些象素是在第二图象（１１）中看不见的，以及仅仅计算对于可看见的象素的匹配误差。用于适配视频信号（４０）的设备使用选择的候选值来创建视频信号（４０）的增强的版本。（*该技术在2021年保护过期，可自由使用*）

【技术实现步骤摘要】
,系统和设备的制作
本专利技术涉及选择被使用来使得来自第一图象的块与来自第二图象的区域相匹配的最佳候选值的，该包括(a)作出用于确定来自第二图象的、要被匹配的区域的一个候选值组，(b)对于该组的每个候选值，根据所述候选值确定来自第二图象的、要被匹配的区域，使得来自第一图象的块与这个区域相匹配，和计算匹配误差，以及(c)根据计算的匹配误差，从该组中选择最佳候选值。本专利技术同样涉及用于选择被使用来使得来自第一图象的块与来自第二图象的区域相匹配的最佳候选值的系统，系统包括·收集器，用来作出用于确定来自第二图象的、要被匹配的区域的一个候选值组，·匹配器，用来对于该组的每个候选值，根据所述候选值确定来自第二图象的、要被匹配的区域，使得来自第一图象的块与这个区域相匹配，和计算匹配误差，以及选择器，用来根据计算的匹配误差，从该组中选择最佳候选值。本专利技术还涉及用于处理包括各种图象的视频信号的设备。在开头段落中定义的那种可以从同一个申请人的国际专利申请公布号WO 99/40726(PHN 17.017)中获知。通过用于确定图象中的运动和深度的、基于块的技术，图象被划分成多个块，例如，相等的尺寸的长方形。然后通过匹配其它图象中的各个块，而把该图象与另一个图象进行比较。使得一个块与第二图象进行匹配是通过选择多个用于运动矢量或深度的候选值，然后对于每个候选值确定该块相应于第二图象中的一个区域有多远。在这种匹配中偏差的程度可被计算。这个偏差被称为匹配误差，它属于候选的值，最佳候选值是具有相对较小的匹配误差的候选值。适当的候选值，特别地，是来自第一图象的相邻的块的深度或运动矢量，因为它们多半具有与当前的块几乎相同的特性。由于一个块包括象素，所以匹配误差可以根据在来自第一图象的块和第二图象的区域中的相应的象素被确定。诸如确定均方误差(MSE)的数学适用于本目的。可能出现，物体的一个点确实是在第一图象中可看见的，但在第二图象中是看不见的。第二个物体可能具有这样一个位置，从第二图象看来，第二物体部分地或全部覆盖第一物体，这意味着，来自第一图象的块不能在第二图象中完全被找回，因为它的多个象素在要被匹配的区域中是看不见的。已知的的缺点在于，匹配误差是在来自第一图象的块的所有的象素上被计算的，也在要被匹配的区域中看不见的象素上被计算的。这些象素然后与相应于其它的点的象素进行比较。如果例如因为亮度变化，它们相差很大，则这将产生大的匹配误差。这样，可能出现，候选值由于太大的匹配误差而被拒绝，虽然这个候选值确实形成对于块的可见区域的最佳候选值。本专利技术的一个目的是提供在开头段落中规定的那种，其中对于最佳候选值作出更好的选择。这个目的是通过按照本专利技术的达到的，在其中块由象素组成，进行选择在来自第二图象的、要被匹配的区域中可看见的、第一图象的块的象素，以及根据所述选择计算匹配误差。通过不把看不见的象素使用于计算匹配误差，避免了由于失配而出现大的匹配误差。在的一个实施例中，这种选择是通过对于第一图象的块的象素确定它们的位置处在来自第二图象的、要被匹配的区域中的哪个地方，以及根据与在来自第二图象的、要被匹配的区域中同一个位置处找到的、第一图象的块的其它的象素的比较结果选择一个象素，而被作出的。在的再一个实施例中，比较结果是根据深度作出的。这个实施例的有利点在于，现在可以简单和快速地执行比较。本专利技术的另一个目的是提供在引言部分中规定的那种系统，通过这个系统，对于最佳候选值作出更好的选择。这个目的是通过按照本专利技术的系统达到的，其中块由象素组成，以及匹配器用来进行选择在来自第二图象的、要被匹配的区域中可看见的、第一图象的块的象素，以及匹配器用来根据所述选择计算匹配误差。在系统的一个实施例中，匹配器用来通过对于第一图象的块的象素确定它们的位置处在来自第二图象的、要被匹配的区域中的哪个位置，以及根据与在来自第二图象的、要被匹配的区域中同一个位置处找到的、第一图象的块的其它的象素的比较结果选择一个象素，而作出这种选择。在系统的再一个实施例中，比较结果是根据深度作出的。本专利技术的另一个目的是提供在引言部分中规定的那种设备，通过这个设备，提供视频信号的更好的处理。这个目的是通过按照本专利技术的设备达到的，其中设备包括·按照本专利技术的、用于选择要被使用来把来自第一图象的块与来自第二图象的区域进行匹配的最佳候选值的系统，该系统用来从所述簇选择对于来自该图象的块的、最佳候选值，以及·用于根据如由所述系统确定的、得到的最佳候选值来处理视频信号以便得到增强的视频信号的图象处理器。图象处理器根据由按照本专利技术的系统选择的、最佳候选值来增强图象。由于通过这个系统对最佳候选值作出较好的选择，这将得出比其它设备更好的、增强的图象。在一个实施例中，设备还包括显示系统，用于显示增强的视频信号。参照此后描述的实施例将了解和说明本专利技术的这些和其它方面。在附图上附图说明图1是多个物体的多个图象的图形表示；以及图2是按照本专利技术的、用于处理图象的设备的图形表示。在用于确定第一图象中的运动和深度的、基于块的技术中，图象被再划分成多个块。这些块可以是长方形的，并具有相同的尺寸，这样，可以以简单的和快速的方式实施再划分。虽然还有可能利用任意的其它形状。非长方形块的使用的优点在于，现在的任意的物体可以用一组块覆盖，以使得这样的物体的运动或深度可被确定。通过把图象再划分成块，现在有可能通过那来自第一图象的块与来自第二图象的区域相匹配而把图象与第二图象进行比较。如果这些块被选择得足够小，则可以假定，每个块一致地移动，以及块的深度到处是相同的。然后有可能寻找来自第二图象的、相应于来自第一图象的块的区域。如果找到的话，则在两个图象之间的这个块的移位可被确定，因此，确定这个块的运动。如果两个图象都涉及到静止物体，则这提供对于确定这个物体的深度所必须的信息。很少发生来自第一图象的块完全匹配于来自第二图象的区域。这个问题可以通过根据对于深度或运动矢量的候选值来确定来自第一图象的块必须位于第二图象的哪个地方，而被解决。以后，来自第二图象的、相应于这一点的区域与第一块进行匹配，以及计算匹配的偏差程度。这个偏差被称为候选值的匹配误差。最佳候选值是具有相对较小的匹配误差，优选地是最小匹配误差的候选值。由于块包含象素，匹配误差可以根据两个块中的相应的象素来确定。诸如确定均方差(MSE)的数学适用于本目的。通过这个，对于运动矢量(dx，dy)的匹配误差可以如下地计算MSE(i,j)=Σm=1MΣn=1N[U1(m,n)-U0(m+dx,n+dy)]2]]>这里，M和N是象素中的尺度，以及Ui(m，n)是图象i中在位置(m，n)处的象素强度。对于深度d的匹配误差的计算是以相同的方式进行的。另一个适用的数学是计算绝对差值的和(SAD)。对于深度d的匹配误差由此可以如下地计算SAD(d)=Σ(x,y)∈B|U1(x+Δx(d),y+Δy(d))-U0(x,y)|]]>这里，(x，y)是块B的象素，Δx(d)是基于对于深度d的候选值的x的改变。除了均方误差和绝对差值的和本文档来自技高网...

【技术保护点】
一种选择被使用来使得来自第一图象（１０）的块与来自第二图象（１１）的区域相匹配的最佳候选值的方法，方法包括： （ａ）作出用于确定来自第二图象（１１）的、要被匹配的区域的一组候选值， （ｂ）对于该组的每个候选值，根据所述候选值确定来自第二图象（１１）的、要被匹配的区域，使得来自第一图象（１０）的块与这个区域相匹配，和计算匹配误差，以及 （ｃ）根据计算的匹配误差，从该组中选择最佳候选值， 其特征在于，块由象素组成，对在来自第二图象的、要被匹配的区域中可看见的、第一图象的块的象素进行选择，以及根据所述选择计算匹配误差。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：RAC布拉斯彭宁，FE埃恩斯特，CWAM范奥维韦德，P维林斯基，
申请(专利权)人：皇家菲利浦电子有限公司，
类型：发明
国别省市：NL[荷兰]