减小含有相互类似的信息的多个图像的数据量的方法、程序及装置,以及表现含有相互类似的信息的多个图像的数据结构制造方法及图纸

技术编号:11616006 阅读:112 留言:0更新日期:2015-06-17 15:40
提供减小含有相互类似的信息的多个图像的数据量的方法,包括:取得多个图像,并且,在多个图像中选择与对象图像以及对象图像类似的第一参照图像及第二参照图像的步骤;基于第一参照图像及第二参照图像,生成与对象图像对应的合成图像的步骤;生成掩模图像的步骤,掩模图像表示根据第一参照图像及第二参照图像生成的合成图像相对于对象图像的潜在误差;生成与残差对应的残差图像的步骤,残差是指对象图像与合成图像之间的差;基于掩模图像,对潜在误差相对大的区域分配残差图像的对应的区域的信息,从而生成与对象图像对应的变换后图像的步骤;输出第一参照图像、第二参照图像及变换后图像,来作为表现对象图像、第一参照图像及第二参照图像的信息的步骤。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及减小含有相互类似的信息的多个图像的数据量(data size)的方法、程序及装置,以及表现含有相互类似的信息的多个图像的数据结构。
技术介绍
现在,正在研宄用于实现超临场感交流的各种技术。作为这种技术之一,有利用多视点图像提供高精细立体影像的三维影像技术。这种立体影像是这样实现的:从非常多视点(例如,200视点)拍摄被拍摄体,获得视差图像,从而利用视差图像来实现立体影像。作为用于实用化这种立体影像的一个课题,提出了减小多视点图像的数据量的方案。就多视点图像而言,包括从多个视点分别观察被拍摄体的信息,因此数据量大。对于这种课题,已经提出了各种提案。例如,非专利文献I公开了称为多视点图像的适应式分散编程的方法。更具体而言,该方法基于模数运算器,针对从各视点得到的图像,在互相不进行信息交换的状态下进行编码,并且,在解码时允许视点间的信息交换。非专利文献2及非专利文献3都公开了基于图像间的残差(residual)及距离(depths)的方法。在这些方法中,使用一个以上的原形图像及从原形图像变形而来的图像(warped view)与相邻图像(neighbor views)之间的差。这样变形的图像是根据相邻图像生成的与原形图像对应的假想图像。现有技术文献非专利文献非专利文献1:Mehrdad PanahpourTehrani, ToshiakiFujii, MasayukiTanimoto, ^The Adaptive DistributedSourceCodingofMulti_ViewImagesinCameraSensorNetworks〃,IEICE Trans, E88-A(10), 2835-2843, (2005)非专利文献2:Κ.Mueller,A.Smolic,K.Dix,P.Merkle,P.KauffT.Wiegandj"Reliability-based generat1n andviewsynthesis in layereddepthvideo",inProc.1EEE Intl Conf on MMSPj 34-39(Oct.2008)非专利文献3 ;M.Tanimotoj M.Wildeboerj ^Frameworksfor FTVcoding^j inProc.PCS, 1-4(May2009)非专利文献4:R.Szeliskij R.Zabihj D.Scharsteinj 0.Veksler, V.Kolmogorov, A.AgarwalajM.Tappenand C.Rotherj^Acomparative studyofenergyminimizat1nmethods forMarkovrandomfieldswithsmoothness-basedpr1rs, ^IEEETrans.Pattern Anal.Machine Intell.,30 (6),1068-1080,(2008)非专利文献5 ;Y.Boykov, 0.Vekslerand R.Zabihj ^Fastapproximate energyminimizat1n viagraph cuts,^IEEE Trans.PatternAnal.Machinelntell., 23, 1222-1239,(Nov.2001)非专利文献6:Υ.Mori, Ν.Fukushimaj Τ.Yendoj Τ.Fujiiand Μ.Tanimotoj "Viewgenerat1n with 3D warpingusing depthinformat1n forFTV,"Signal Process.:1mageCommun.,24,65-72,(Jan.2009)非专利文献7:L.Yang,Τ.Yendo,Μ.PanahpourTehrani,Τ.Fujii andM.Tanimotoj"Probabilistic reliabilitybased view synthesisfor FTV〃, inProc.1CIPj 1785-1788, (Sep.2010)非专利文献8:Ν.Fukushimaj Τ.Fujii,Y.1shibashij Τ.Yendoj and Μ.Tanimotoj "Real-timefreeviewpoint imagerendering by usingfastmult1-passdynamic programming,"inProc.3DTV-C0N,(June 2010)非专利文献9:Α.Smolic,P.Kauff,S.Knorr,A.Hornung,Μ.Kunter,Μ.Muller,andM.Lang, "Three-Dimens1nal VideoPostproduct1nand Processing",inProc.1EEE, 99 (4),607-625,(Apr.2011)非专利文献10:Υ.Mori, N.Fukushimaj Τ.Fujii,andM.Tanimotoj ^Viewgenerationwith3Dwarping usingdepth informat1nfor FTVj"Image Communicat1n., Vol.24,N0.1-2(2009)
技术实现思路
专利技术要解决的问题上述的非专利文献I所公开的方法,主要假设面向分散信源编码、分散影像帧编码等的应用,因此在编码处理中没有考虑到视点间的联合。另外,在非专利文献I所公开的方法中,在编码处理及解码处理中,虽然使用了边信息(side informat1n),但在与原形图像的值之间的差大的区域中,边信息的精度没有那么高,因此有时导致解码后的图像品质低下。相反,在非专利文献2及3所公开的方法中,相对于边信息所含的原形图像,在差小的区域,无法恰当复原其所含的信息。本专利技术为了解决上述问题,目的在于,提供一种高效降低含有相互类似的信息的多个图像的数据量的方法、程序及装置,以及表现含有相互类似的信息的多个图像的数据结构。用于解决课题的手段根据本专利技术的一个方面,提供一种减小含有相互类似的信息的多个图像的数据量的方法。本方法包括:取得多个图像,并且,在多个图像中选择与对象图像以及对象图像类似的第一参照图像及第二参照图像的步骤;基于第一参照图像及第二参照图像,生成与对象图像对应的合成图像的步骤;生成掩模图像的步骤,掩模图像表示根据第一参照图像及第二参照图像生成的合成图像相对于对象图像的潜在误差;生成与残差对应的残差图像的步骤,残差是指对象图像与合成图像之间的差;基于掩模图像,对潜在误差相对大的区域分配残差图像的对应的区域的信息,从而生成与对象图像对应的变换后图像的步骤;输出第一参照图像、第二参照图像及变换后图像,来作为表现对象图像、第一参照图像及第二参照图像的信息的步骤。优选地,在本方法中,还包括:对对象图像的各像素位置的亮度值进行取模计算,计算出各像素位置的余数,从而生成由余数构成的余数图像的步骤;在生成变换后图像的步骤中包括:基于掩模图像,对潜在误差相对小的区域,分配余数图像的对应的区域的信息的步骤。优选地,在生成变换后图像的步骤中包括:将掩模图像的各像素位置的值与预定的阈本文档来自技高网
...

【技术保护点】
一种减小含有相互类似的信息的多个图像的数据量的方法,其特征在于,包括:取得所述多个图像,并且,在所述多个图像中选择与对象图像以及所述对象图像类似的第一参照图像及第二参照图像的步骤,基于所述第一参照图像及所述第二参照图像,生成与所述对象图像对应的合成图像的步骤,生成掩模图像的步骤,所述掩模图像表示根据所述第一参照图像及所述第二参照图像生成的所述合成图像相对于所述对象图像的潜在误差,生成与残差对应的残差图像的步骤,所述残差是指所述对象图像与所述合成图像之间的差,基于所述掩模图像,对所述潜在误差相对大的区域分配所述残差图像的对应的区域的信息,从而生成与所述对象图像对应的变换后图像的步骤,输出所述第一参照图像、所述第二参照图像及所述变换后图像,来作为表现所述对象图像、所述第一参照图像及所述第二参照图像的信息的步骤。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员:迈赫达德·帕纳坡尔·德黑兰尼石川彰夫河北真宏井上直己藤井俊彰
申请(专利权)人:国立研究开发法人情报通信研究机构
类型:发明
国别省市:日本;JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1