本发明专利技术的图像生成装置（200）具备：像素移位图像生成部（206），基于输入图像和进深图，生成第1像素移位图像和第2像素移位图像，该第1像素移位图像是针对输入图像实施了使像素移位与所述新视点对应的移位量的处理而得到的图像，该第2像素移位图像是针对包括输入图像中包含的对象物的边缘周边的背景区域的像素在内的背景边缘图像实施了使对应的像素移位与第1像素移位图像相同的移位量的处理而得到的图像；图像结合部（208），以使第2像素移位图像中包含的背景区域包含在通过使像素移位的处理而在第1像素移位图像中产生的没有像素信息的区域即空洞中的方式，将第2像素移位图像和第1像素移位图像结合；以及空洞填补部（210），基于结合的像素移位图像，对空洞中包含的像素信息进行补全。
【技术实现步骤摘要】
【国外来华专利技术】
本专利技术一般涉及图像处理，尤其涉及立体/多视点图像的生成方法及装置。
技术介绍
通过使用以往已知的DIBR(基于深度的图像绘制Depth-1mage_BasedRendering) 技术，能够使用一个图像视及与其对应的进深图来生成3维图像(例如专利文献I)。在先技术文献专利文献专利文献1:美国专利申请公开第2009/0115780号说明书非专利文献 非专利文献1:L. McMiIlan&S. Gortler: ^Image-Based Rendering:A New Interface Between Computer Vision and Computer Graphics", Computer Graphics, Vol. 33, No. 4(November 1999)非专利文献2 C. Fehn: “Depth-1mage-Based Rendering (DIBR), Compression and Transmission for a New Approach on 3D_TV〃，Proceedings of SPIE Stereoscopic Displays and Virtual RealitySystems XI，5291:93-104(2004)专利技术的概要专利技术所要解决的课题但是，在通过DIBR技术生成的图像中，存在前景对象物与背景的边界伪像 (artifact)增加的课题。
技术实现思路
因此，本专利技术的目的在于，提供一种图像生成装置，能够抑制在通过DIBR技术生成新的图像时产生的前景对象物与背景的边界伪像。解决课题所采用的手段为了解决上述课题，本专利技术的一个方式的图像生成装置根据输入图像和与所述输入图像对应的进深图(映射、map)，生成从新视点显示由该输入图像表示的场景的图像，该图像生成装置具备像素移位图像生成部，基于所述输入图像和所述进深图，生成第I像素移位图像和第2像素移位图像，该第I像素移位图像是针对所述输入图像实施了使像素移位与所述新视点对应的移位量的处理而得到的像素移位图像，该第2像素移位图像是针对包括作为所述输入图像中包含的前景对象物的边缘周边的背景区域的像素的指定边缘像素在内的背景边缘图像实施了使对应的像素移位与第I像素移位图像相同的移位量的处理而得到的像素移位图像；图像结合部，以使所述第2像素移位图像中包含的背景区域包含在通过使像素移位的处理而在所述第I像素移位图像中产生的没有像素信息的区域、即空洞(hole)中的方式，将所述第2像素移位图像和所述第I像素移位图像结合；以及空洞填补部，基于所述结合的像素移位图像，对所述空洞中包含的像素信息进行补全。另外，本专利技术不仅能够作为这样的图像生成装置来实现，也能够作为以图像生成装置中包含的特征性单元为步骤的图像生成方法来实现，还能够作为使计算机执行这样的特征性步骤的程序来实现。并且，这样的程序当然可以经由⑶-ROM (Compact Disc Read Only Memory)等记录介质及因特网等传输介质来流通。此外，本专利技术能够作为实现这样的图像生成装置的功能的一部分或全部的半导体集成电路(LSI)来实现，或者作为包括这样的图像生成装置的图像生成系统来实现。专利技术效果根据本专利技术，能够提供一种图像生成装置，该图像生成装置能够抑制前景对象物与背景的边界伪像。附图说明图图图图图图图图图图图图图图图I是通过本专利技术的关联技术生成的新的图像视的概念图。2是通过本专利技术的实施方式的图像生成装置生成的新的图像视的概念图。 3是在先技术的图像绘制单元的概略图。4是表示本专利技术的生成新的图像视的装置的框图。5是表示本专利技术的生成新的图像视的方法的流程图。6是表示本专利技术的一个实施方式的生成新的图像视的装置的框图。7是用于生成过滤处理后的边缘图像的边缘图像的过滤的图。8是表示本专利技术的实施方式的背景边缘图像的一例的图。9是表示本专利技术的实施方式的背景边缘图像生成的生成过程的一例的图。 10是本专利技术的实施方式的图像结合的图。11是表示本专利技术的实施方式的背景边缘图像生成的详细方法的流程图。 12是表示本专利技术的实施方式的新的图像视生成的详细方法的流程图。13是表示本专利技术的实施方式的前景边缘的重新映射方法的图。14是表示本专利技术的实施方式的修复的收敛率的图表。15是本专利技术的生成新的图像视的装置所装入的显示装置的框图。具体实施方式(本专利技术的基础知识)对于“
技术介绍
”部分中记载的3维图像生成技术，本专利技术人发现了以下的问题。通常，从新视点观察某场景时的图像能够使用基于进深图像的绘制(DIBR)技术来生成。来自场景的原来的视点的输入图像和表示与其对应的该场景的对象物间的距离的进深图像(也称为深度图(深度映射))在作为视(view)合成而已知的新视点的合成中使用。在该视合成方法中，基于使用原来的视点的摄像机位置和新视点的新的摄像机位置的信息的摄像机的几何学，生成新的图像视。在此，新的图像视(view)是指，为了成为从与输入图像不同的视点观察的图像而新合成的图像。合成的新的图像视能够将左眼视图像和右眼视图像用于3D立体视觉显示。多视点图像还能够用于多视点3D显示器而生成。因此，通过使用DIBR技术，仅使用一个图像视和与其对应的进深图，就能够生成3维图像。由于生成新视，在隐藏区域中产生空洞(hole)。在此，空洞是指在合成视中不包含像素信息而为空白的未知区域。这是由于原来的视点中的隐藏区域在新视点中可视化(非隐藏化)而产生的。因此，对于产生空洞的图像，需要应用填补方法。公知的填补方法有为了进行插值而使用空洞的两侧的像素的双线性插值法。该方法在较小的空洞区域中效果很好。但是，对于较大的空洞，在该方法中经常产生不鲜明的边缘、边界伪像及对象物的失真。这样的3D是低品质的。对称或非对称的进深图的平滑化等方法在将空洞的尺寸缩小的技术中公开。但是，在这样的方法中，在对象物中产生几何学失真，3D效果被抑制。此外，在专利文献I中公开有另一方法。在图3所示的关联技术的图像生成装置 100中，通过边缘检测104来检测进深图的边缘。接着，为了计算与边缘的周边区域一致的输入图像的区域中的像素值的一定的变化，通过纹理(texture)分析102对输入图像的纹理进行分析。此外，基于该变化量，通过进深缩放106使进深图缩小。最后，由绘制部108 显示输出图像。通过进深缩放106将进深图缩小，由此，在该方法中，在高纹理区域中空洞的尺寸缩小。因此，能够降低绘制伪像。但是，存在抑制3D效果的可能性。此外，在公知的方法中，对象物的边缘未被进行正确的处理。在公知的方法中，前景对象物的边缘变大，有产生边界伪像的趋势。因此，3D的品质劣化。为了解决这样的问题，本专利技术的一方式的图像生成装置根据输入图像和与所述输入图像对应的进深图，生成从新视点显示该输入图像所表示的场景的图像，该图像生成装置具备像素移位图像生成部，基于所述输入图像和所述进深图，生成第I像素移位图像和第2像素移位图像，该第I像素移位图像是对于所述输入图像实施了使像素移位与所述新视点对应的移位量的处理后的像素移位图像，该第2像素移位图像是针对包括作为所述输入图像中包含的前景对象物的边缘周边的背景区域的像素的指定边缘像素在内的背景边缘图像实施了使对应的像本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】...
【专利技术属性】
技术研发人员：K·源，P·拉桑，温觉觉，申省梅，
申请(专利权)人：松下电器产业株式会社，
类型：
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。