图像及深度3D影像格式及其多视点裸眼3D显示方法技术

本发明专利技术揭示了一种图像及深度3D影像格式及其多视点裸眼3D显示方法，所述方法包括如下步骤：S1.基于邻域相关性将深度图水平放大至图像相等；S2.将深度图按预设参数转换为视差图；S3.将视差图按照虚拟视点位置转换为虚拟视点视差图；S4.基于虚拟视点视差补偿的虚拟视点图像生成；S5.将生成的多视点3D图像按照多视点裸眼3D显示设备参数进行显示。本发明专利技术提出的图像及深度3D影像格式，可用更多的数据来描述图像信息，而用更少的数据来描述深度信息，从而获得更高的3D图像分辨率。同时提出其对应的多视点裸眼3D显示方法，可以获得逼真的3D显示效果。

Image and depth 3D image format and multi view naked eye 3D display method

The invention discloses a depth image and 3D image format and multi view Naked-eye 3D display method, the method comprises the following steps: S1. neighborhood correlation depth map to image based on equal level amplification; S2. depth map according to the preset parameters into the disparity map; S3. disparity map for the virtual parallax map according to the virtual viewpoint the position of viewpoint transformation; S4. virtual image virtual viewpoint generation based on multi view parallax compensation; 3D image S5. will be generated according to the multi view Naked-eye 3D display device parameter display. The image and the depth 3D image format proposed by the invention can use more data to describe the image information, and use the less data to describe the depth information, so as to obtain higher 3D image resolution. At the same time, the corresponding multi view naked eye 3D display method is proposed, which can obtain the realistic 3D display effect.

【技术实现步骤摘要】

本专利技术属于3D显示
，涉及一种3D影像格式，尤其涉及一种图像及深度3D影像格式；同时，本专利技术还涉及一种图像及深度3D影像格式的多视点裸眼3D显示方法。
技术介绍
图像及深度3D影像格式是3D影像格式的一种，由图像及其对应深度信息组成。图像及深度3D影像格式相对3D显示来说是一种中间格式，目前并无3D显示设备可以直接显示图像及深度3D影像格式，如果是助视3D显示，如眼镜式3D显示，则需要将图像及深度3D影像格式转换为双视点3D格式，如左右格式；如果是裸眼3D显示，则需要将图像及深度3D影像格式转换为多视点3D格式，本专利技术中多视点裸眼3D显示涵盖超多视点裸眼3D显示。在助视3D显示领域，主流的双视点3D格式要优于图像及深度3D影像格式；而在裸眼3D显示领域，理论上图像及深度3D影像格式更适合多视点裸眼3D显示。图像及深度3D影像格式由图像及深度组成，通常图像像素与深度信息一一对应，如图1所示。但是从图像与深度信息的统计特点以及人眼的视觉特点来看，这种处理方式未必是最优的，第一，深度信息的邻域相关性明显要强于图像信息，第二，人眼对深度信息的分辨力要显著低于图像信息，因此，深度信息可以用更少的数据来描述，而3D视觉效果上几乎没有变化。有鉴于此，如今迫切需要设计一种新的图像及深度3D影像格式，以便克服现有格式存在的上述缺陷。
技术实现思路
本专利技术所要解决的技术问题是：提供一种图像及深度3D影像格式，可用更多的数据来描述图像信息，而用更少的数据来描述深度信息，从而获得更高的3D图像分辨率。此外，本专利技术还提供一种图像及深度3D影像格式的多视点裸眼3D显示方法，可以获得逼真的3D显示效果。为解决上述技术问题，本专利技术采用如下技术方案：一种图像及深度3D影像格式，由图像及深度信息组成，所述3D影像格式包括：图像与深度信息按水平分列，且图像与深度信息水平宽度比例为2:1；图像像素由R、G、B颜色分量组成，形成彩色图像；深度信息由R、G、B颜色分量组成，R、G、B相等且都等于深度值，形成灰度深度图。作为本专利技术的一种优选方案，图像由原始图像按水平方向3:2下采样生成。作为本专利技术的一种优选方案，深度图由与原始图像对应的原始深度图按水平方向3:1下采样生成。作为本专利技术的一种优选方案，最大深度值对应最近点，最小深度值对应最远点。一种图像及深度3D影像格式的多视点裸眼3D显示方法，所述方法包括如下步骤：S1.基于邻域相关性将深度图水平放大至图像相等；S2.将深度图按预设参数转换为视差图；S3.将视差图按照虚拟视点位置转换为虚拟视点视差图；S4.基于虚拟视点视差补偿的虚拟视点图像生成；S5.将生成的多视点3D图像按照多视点裸眼3D显示设备参数进行显示。作为本专利技术的一种优选方案，步骤S1中，基于邻域相关性将深度图水平放大按如下方式进行：j%2＝＝1，则j%2＝＝1如果当前像素与左边像素相似与右边像素不相似，则如果当前像素与左边像素不相似与右边像素相似，则否则其中D为深度图，i为行坐标，j为列坐标。作为本专利技术的一种优选方案，步骤S2中，将深度图转换为视差图按如下方式进行：d(i，j)＝D(i，j)*(dn+df)-df，其中dn对应最近距离，df对应最远距离；视差图其中，k1、k2为系数，k1与双眼距离、显示屏像素大小相关，k2与观看距离、显示屏宽度相关。作为本专利技术的一种优选方案，步骤S3中，视差图转换为虚拟视点视差图按如下方式进行：dispα(i，jα)＝-α*disp(i，j)，其中α为归一化[-1，1]之间的虚拟视点位置参数，最左边虚拟视点图像位置对应-1，最右边虚拟视点位置对应1；hα＝j+α*disp(i，j)。作为本专利技术的一种优选方案，步骤S4中，虚拟视点图像生成按如下方式进行：Iα(i，j)＝I(i，j-dispα(i，j))，其中I为图像，Iα为虚拟视点图像。作为本专利技术的一种优选方案，虚拟视点图像生成在水平方向进行线性插值。本专利技术的有益效果在于：本专利技术提出的图像及深度3D影像格式，可用更多的数据来描述图像信息，而用更少的数据来描述深度信息，从而获得更高的3D图像分辨率。同时提出其对应的多视点裸眼3D显示方法，可以获得逼真的3D显示效果。附图说明图1为图像及深度3D影像格式示例。图2为本专利技术提出的图像及深度3D影像格式示例。图3为本专利技术提出的图像及深度3D影像格式的多视点裸眼3D显示流程。具体实施方式下面结合附图详细说明本专利技术的优选实施例。实施例一图像及深度3D影像格式是适合多视点/超多视点裸眼3D显示的3D影像格式，通常图像与深度信息大小一致，图像分辨率只有影像格式分辨率的一半，如图1所示；这不是3D影像格式所期望的，因为相对图像特性来说，深度信息的空间相关性强于图像信息且人眼的深度分辨能力也要低于图像，因此可以用更多的数据来描述图像信息，而用更少的数据来描述深度信息，这样可以显著提高3D图像分辨率，而3D深度感知效果几乎不变。根据裸眼3D显示的特点以及显示屏的三基色特点，图像与深度信息的水平宽度比例设置为2:1是合适的选择，如1920x1080全高清图像，左边1280x1080放置图像，右边640x1080放置深度信息，如图2所示。图像及深度3D影像格式是中间3D影像格式，在多视点裸眼3D显示设备上显示时，需要转换为多视点3D图像才能显示。本专利技术针对图像及深度3D影像格式，提出了一种优化的显示方法，邻域相关的深度图水平放大方法可以有效提高深度不连续区域的准确性；创造性地先转换视差图到虚拟视点再基于虚拟视点视差图生成虚拟视点图像，可有效提高虚拟视点图像的质量，改善视觉效果。本专利技术揭示一种图像及深度3D影像格式，由图像及深度信息组成，所述3D影像格式包括：(1)图像与深度信息按水平分列，且图像与深度信息水平宽度比例为2:1；(2)图像像素由R、G、B颜色分量组成，形成彩色图像；(3)深度信息由R、G、B颜色分量组成，R、G、B相等且都等于深度值，形成灰度深度图。具体地，本实施例中图像由原始图像按水平方向3:2下采样生成。深度图由与原始图像对应的原始深度图按水平方向3:1下采样生成。最大深度值对应最近点，最小深度值对应最远点。请参阅图3，本专利技术还揭示一种图像及深度3D影像格式的多视点裸眼3D显示方法，所述方法包括如下步骤：S1.基于邻域相关性将深度图水平放大至图像相等；S2.将深度图按预设参数转换为视差图；S3.将视差图按照虚拟视点位置转换为虚拟视点视差图；S4.基于虚拟视点视差补偿的虚拟视点图像生成；S5.将生成的多视点3D图像按照多视点裸眼3D显示设备参数进行显示。具体地，本实施例中，步骤S1中，基于邻域相关性将深度图水平放大按如下方式进行：j％2＝＝0，则j％2＝＝1，如果当前像素与左边像素相似与右边像素不相似，则如果当前像素与左边像素不相似与右边像素相似，则否则其中D为深度图，i为行坐标，j为列坐标。步骤S2中，将深度图转换为视差图按如下方式进行：d(i，j)＝D(i，j)*(dn+df)-df，其中dn对应最近距离，df对应最远距离；视差图其中，k1、k2为系数，k1与双眼距离、显示屏像素大小相关，k2与观看距离、显示屏宽度相关。步骤S3中，视差图转换为虚拟视点视差图按如下方式进行：dispα(i，本文档来自技高网...

【技术保护点】
一种图像及深度3D影像格式，由图像及深度信息组成，其特征在于，所述3D影像格式包括：图像与深度信息按水平分列，且图像与深度信息水平宽度比例为2:1；图像像素由R、G、B颜色分量组成，形成彩色图像；深度信息由R、G、B颜色分量组成，R、G、B相等且都等于深度值，形成灰度深度图。

【技术特征摘要】
1.一种图像及深度3D影像格式，由图像及深度信息组成，其特征在于，所述3D影像格式包括：图像与深度信息按水平分列，且图像与深度信息水平宽度比例为2:1；图像像素由R、G、B颜色分量组成，形成彩色图像；深度信息由R、G、B颜色分量组成，R、G、B相等且都等于深度值，形成灰度深度图。2.根据权利要求1所述的图像及深度3D影像格式，其特征在于：图像由原始图像按水平方向3:2下采样生成。3.根据权利要求1所述的图像及深度3D影像格式，其特征在于：深度图由与原始图像对应的原始深度图按水平方向3:1下采样生成。4.根据权利要求1所述的图像及深度3D影像格式，其特征在于：最大深度值对应最近点，最小深度值对应最远点。5.一种图像及深度3D影像格式的多视点裸眼3D显示方法，其特征在于，所述方法包括如下步骤：S1.基于邻域相关性将深度图水平放大至图像相等；S2.将深度图按预设参数转换为视差图；S3.将视差图按照虚拟视点位置转换为虚拟视点视差图；S4.基于虚拟视点视差补偿的虚拟视点图像生成；S5.将生成的多视点3D图像按照多视点裸眼3D显示设备参数进行显示。6.根据权利要求5所述的图像及深度3D影像格式的多视点裸眼3D显示方法，其特征在于：步骤S1中，基于邻域相关性将深度图水平放大按如下方式进行：j％2＝＝0，则j％2＝＝1，如...

【专利技术属性】
技术研发人员：方勇，石岩，
申请(专利权)人：无锡易维视显示技术有限公司，
类型：发明
国别省市：江苏;32