减小含有相互类似的信息的多个图像的数据量的方法、程序及装置制造方法及图纸

提供减小含有相互类似的信息的多个图像的数据量的方法，包括：取得多个图像，并且，在多个图像中选择与对象图像以及对象图像类似的第一参照图像及第二参照图像的步骤；基于第一参照图像及第二参照图像，生成与对象图像对应的合成图像的步骤；基于对象图像及合成图像的至少一方，生成边信息的步骤，边信息是对象图像的位置上的假想视野的信息；根据边信息来生成梯度图像的步骤；针对梯度图像的各像素位置，决定与梯度对应的系数，并且，针对对象图像的各像素位置的亮度值，以对应的系数作为除数来进行取模计算，通过取模计算而计算出各像素位置的余数，从而生成由余数构成的余数图像的步骤；输出第一参照图像、第二参照图像及余数图像，来作为表现对象图像、第一参照图像及第二参照图像的信息的步骤。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及减小含有相互类似的信息的多个图像的数据量(data size)的方法、程序及装置。
技术介绍
现在，正在研宄用于实现超临场感交流的各种技术。作为这种技术之一，有利用多视点图像提供高精细立体影像的三维影像技术。这种立体影像是这样实现的:从非常多视点(例如，200视点)拍摄被拍摄体，获得视差图像，从而利用视差图像来实现立体影像。作为用于实用化这种立体影像的一个课题，提出了减小多视点图像的数据量的方案。就多视点图像而言，包括从多个视点分别观察被拍摄体的信息，因此数据量大。对于这种课题，已经提出了各种提案。例如，非专利文献I公开了称为多视点图像的适应式分散编程的方法。更具体而言，该方法基于模数运算器，针对从各视点得到的图像，在互相不进行信息交换的状态下进行编码，并且，在解码时允许视点间的信息交换。换言之，非专利文献I所公开的方法、主要是架设面向分散信源编码、分散影像帧编码等的应用，因此，在编码处理中，没有考虑到视点间的联合。这是由于，非专利文献I所公开的方法主要是面向处理能力没有那么高的低耗电的装置(例如，便携终端等)。另外，在非专利文献I所公开的方法中，在编码处理及解码处理中，使用边信息(side informat1n)。作为该边信息，在编码器(编码设备)中使用原形图像，在解码器中，使用缩小图像或者假想图像(virtualimage)或它们的组合。现有技术文献非专利文献非专利文献1:Mehrdad Panahpour Tehrani, Toshiaki Fujii, MasayukiTanimotoj"The Adaptive Distributed Source Coding of Mult1-View Images in CameraSensor Networks"，IEICE Trans, E88-A(10), 2835-2843, (2005)非专利文献2:R.Szeliskij R.Zabihj D.Scharsteinj 0.Veksler, V.Kolmogorov, A.Agarwalaj M.Tappen and C.Rotherj〃A comparative study of energy minimizat1nmethods for Markov random fields with smoothness-based pr1rs,〃IEEE Trans.Pattern Anal.Machine Intell.，30(6)，1068-1080，(2008)非专利文献3:Y.Boykov，0.Veksler and R.Zabih，"Fast approximate energyminimizat1n via graph cuts, ^IEEE Trans.Pattern Anal.Machine Intell.，23，1222-1239，(Nov.2001)非专利文献4 ；Y.Mori, Ν.Fukushimaj Τ.Yendoj Τ.Fujii and Μ.Tanimotoj "Viewgenerat1n with 3D warping using depth informat1n for FTVj "SignalProcess.:1mage Commun.，24，65-72，(Jan.2009)非专利文献5:L.Yang, T.Yendo, M.Panahpour Tehrani, T.Fujii andΜ.Tanimoto, "Probabilistic reliability based view synthesis for FTV〃，in Proc.1CIP, 1785-1788，(Sep.2010)非专利文献6:N.Fukushima, T.Fujii, Y.1shibashi, T.Yendo, andΜ.Tanimoto, ^Real-time free viewpoint image rendering by using fast mult1-passdynamic programming, 〃in Proc.3DTV-C0N, (June 2010)非专利文献7:Α.Smolic, P.Kauff, S.Knorr, A.Hornung, M.Kunter, M.Muller, andM.Lang,"Three-Dimens1nal Video Postproduct1n and Processing",in Proc.1EEE, 99(4)，607-625，(Apr.2011)
技术实现思路
专利技术要解决的问题本申请的专利技术者们发现，能够通过在相互类似的图像间进行信息交换，来提高解码后的图像品质，并且，应用范围能够进一步拓宽。然而，在现有方案的方法中，在解码器及编码器中，没有在相互类似的图像间进行信息交换，其结果，也无法知晓如何优化处理才好。本专利技术为了解决上述问题，目的在于，提供一种高效降低含有相互类似的信息的多个图像的数据量的方法、程序及装置。用于解决课题的手段根据本专利技术的一个方面，提供一种减小含有相互类似的信息的多个图像的数据量的方法，包括:取得多个图像，并且，在多个图像中选择与对象图像以及对象图像类似的第一参照图像及第二参照图像的步骤；基于第一参照图像及第二参照图像，生成与对象图像对应的合成图像的步骤；基于对象图像及合成图像的至少一方，生成边信息的步骤，边信息是对象图像的位置上的假想视野的信息；根据边信息来生成梯度图像的步骤；针对梯度图像的各像素位置，决定与梯度对应的系数，并且，针对对象图像的各像素位置的亮度值，以对应的系数作为除数来进行取模计算，通过取模计算而计算出各像素位置的余数，从而生成由余数构成的余数图像的步骤；输出第一参照图像、第二参照图像及余数图像，来作为表现对象图像、第一参照图像及第二参照图像的信息的步骤。优选地，在生成边信息的步骤中包括:对对象图像的缩小图像和合成图像进行组合来生成边信息的步骤。更优选地，在生成边信息的步骤中还包括:基于通过对缩小图像进行增采样而得的图像与合成图像的差来决定误差分布的步骤；对误差相对高的区域分配通过对缩小图像进行增采样而得的图像的信息，并且，对于误差相对低的区域，分配合成图像的信息。或者更优选地，在边信息的步骤中包括:基于通过对缩小图像进行增采样而得的图像与合成图像的差来决定误差分布的步骤；对于误差相对高的区域分配更多的通过对缩小图像进行增采样而得的图像的信息，并且，对于误差相对低的区域，分配更多的合成图像的信息。优选地，生成梯度图像的步骤中包括生成特定图像的步骤，在特定图像中，边信息内的纹理变化越大的区域具有越大的亮度。优选地，生成梯度图像的步骤中包括:按照构成边信息的各彩色成分来生成梯度图像的步骤。更优选地，在梯度图像的步骤中，对于构成边信息的各彩色成分的灰度图像，按顺序应用边缘检测处理、平滑处理、一系列形态处理及平滑处理。优选地，在生成余数图像的步骤中，参照预定的对应关系，选择与梯度对应的系数。优选地，在生成余数图像的步骤中，针对梯度图像的各像素位置，按照各彩色成分来决定系数。优选地，进行选择的步骤包括:在多个图像是多视点图像的情况下，基于基线距离，选择对象图像以及第一参照图像本文档来自技高网...

【技术保护点】
一种减小含有相互类似的信息的多个图像的数据量的方法，其特征在于，包括：取得所述多个图像，并且，在所述多个图像中选择与对象图像以及所述对象图像类似的第一参照图像及第二参照图像的步骤，基于所述第一参照图像及所述第二参照图像，生成与所述对象图像对应的合成图像的步骤，基于所述对象图像及所述合成图像的至少一方，生成边信息的步骤，所述边信息是所述对象图像的位置上的假想视野的信息，根据所述边信息来生成梯度图像的步骤，针对所述梯度图像的各像素位置，决定与梯度对应的系数，并且，针对所述对象图像的各像素位置的亮度值，以对应的系数作为除数来进行取模计算，通过所述取模计算而计算出各像素位置的余数，从而生成由所述余数构成的余数图像的步骤，输出所述第一参照图像、所述第二参照图像及所述余数图像，来作为表现所述对象图像、所述第一参照图像及所述第二参照图像的信息的步骤。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员：迈赫达德·帕纳坡尔·德黑兰尼，石川彰夫，河北真宏，井上直己，藤井俊彰，
申请(专利权)人：国立研究开发法人情报通信研究机构，
类型：发明
国别省市：日本;JP