编译/解码包括多视图的视频的方法和设备技术

本发明专利技术提供一种用于编译和解码包括多视图的视频的方法。根据本发明专利技术的一个实施例的用于编译视频的方法包括下述步骤：确定是否在当前视图内的当前块要执行残留预测；在当前块执行残留预测的情况下，推导被用于当前块的残留预测的第一参考块和第二参考块；基于第一参考块的采样值和第二参考块的采样值之间的差值生成当前块的残留预测采样值；以及使用当前块的残留预测采样值推导当前块的预测采样值。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及视频编译技术，并且更加具体地，涉及3D视频图像编译技术。
技术介绍
近年来，对高分辨率和高质量视频的需要已经在各种应用领域中增长。然而，视频数据的分辨率和质量变得越来越高，视频数据的量变得越来越大。因此，当使用诸如现有的有线或者无线宽带线传输数据或者视频数据被存储在现有的存储介质中时，传输成本及其存储成本增加。高效率的视频压缩技术能够被使用以有效地传输、存储和再生高分辨率和高质量的视频数据。另一方面，通过处理高分辨率/大容量视频的能力的实现，使用3D视频的数字广播服务已经作为下一代广播服务引起注意。3D视频能够使用多视图信道提供真实感和沉浸感。3D视频能够在诸如自由视点视频(FVV)、自由视点TV(FTV)、3DTV、监视以及家庭娱乐的各种领域中使用。不同于单个视图视频，使用多视图的3D视频在具有相同的图片顺序计数POC的视图之间具有高的相关性。因为以多个邻近的相机拍摄相同的场景，即，除视差和微小的照度差值之外，多个视图、多视图视频具有几乎相同的信息，并且因此不同的视图在其间具有高的相关性。因此，在不同的视图之间的相关性能够被考虑用于编码/解码多视图视频，并且能够获得对于编码和/或解码当前视图的需求的信息。例如，能够参考在不同的视图中的块来预测或者解码在当前的视图中要解码的块。
技术实现思路
技术问题本专利技术提供一种用于编码/解码多视图视频的方法和设备。本专利技术提供一种用于在编码/解码包括多视图的视频中执行残留预测的方法和设备。本专利技术提供一种用于当在编码/解码包括多视图的视频中执行残留预测时缩放运动向量的方法和设备。技术方案根据本专利技术的实施例，提供一种用于编码包括多视图的视频的方法。视频编码方法包括：确定是否在当前视图内的当前块要执行残留预测；在当前块执行残留预测的情况下，推导被用于当前块的残留预测的第一参考块和第二参考块；基于第一参考块的采样值和第二参考块的采样值之间的差值生成当前块的残留预测采样值；以及使用当前块的残留预测采样值推导当前块的预测采样值。推导第一参考块和第二参考块的步骤可以包括：基于包括含当前块的当前图片的参考图片和第一参考块或者第二参考块之间的距离缩放被用于推导第一参考块和第二参考块之中的至少一个的运动向量。根据本专利技术的另一实施例，提供一种用于解码包括多视图的视频的方法。视频解码方法包括：获取表示是否对当前视图内的当前块执行残留预测的残留预测信息；基于残留预测信息推导被用于当前块的残留预测的第一参考块和第二参考块；基于在第一参考块的采样值和第二参考块的采样值之间的差值生成当前块的残留预测采样；以及使用当前块的残留预测采样值推导当前块的预测采样值。在推导第一参考块和第二参考块的步骤中，使用基于在包括含当前块的当前图片的参考图片和第一参考块或者第二参考块之间的距离缩放的运动向量可以推导第一参考块和第二参考块中的至少一个。可以从编码设备获取缩放的运动向量。有益效果根据本专利技术，当执行残留预测时通过考虑在当前图片和参考图片之间的距离通过缩放运动向量的大小能够增加编译速率。另外，当执行残留预测时，通过在编码器而不是解码器中执行缩放运动向量能够减少解码器的复杂性。并且因为要编码的运动向量的大小在编码器中变得更小，所以解码速率能够被增加。附图说明图1是示意性地描述3D视频的编码和解码过程的图。图2是示意性地描述视频编码设备的配置的图。图3是示意性地描述视频解码设备的配置的图。图4是用于示意性地描述本专利技术能够被应用的多视图视频编译的图。图5是用于示意性地描述使用能够应用本专利技术的深度图的多视图编译的图。图6是用于示意性地描述根据本专利技术的实施例的残留预测方法的图。图7是示意性地图示根据本专利技术的实施例的使用残留预测的编码方法的流程图。图8是示意性地图示根据本专利技术的实施例的使用残留预测的解码方法的流程图。具体实施方式能够以各种形式修改本专利技术，并且将会在附图中描述和示出其特定的实施例。然而，实施例不是旨在限制本专利技术。在下面的描述中使用的术语被用于仅描述特定的实施例，并且旨在不限制本专利技术。单数的表达包括复数的表达，只要其已经清楚地不同地理解。诸如“包括”和“具有”的术语旨在指示在下面的描述中使用的特征、数目、步骤、操作、要素、组件、或者其组合存在并且因此应理解一个或者多个不同特征、数目、步骤、操作、要素、组件、或者其组合的存在或者添加的可能性没有被排除。另一方面，为了图像编码/解码设备中的不同特定功能的解释的方便起见独立地绘制在本专利技术中描述的附图中的元件并且其没有意指通过独立的硬件或者独立的软件体现元件。例如，两个或更多个元件可以被组合以形成单个元件，或者一个元件可以被划分成多个元件。在没有脱离本专利技术的概念的情况下其中元件被组合和/或划分的实施例属于本专利技术的范围。在下文中，将会参考附图描述本专利技术的示例性实施例。通过相同的附图标记将会参考附图中的相同的组件并且将不会被重复地描述。如在此处使用的，术语“像素”或者“图像元素”意指组成单个图像的最小单元。术语“采样”可以用作表示特定的像素的值的术语。在这一点上，采样可以指示亮度分量的像素值和/或色度分量的像素值。如在此处使用的，术语“单元”意指用于图像处理和/或在图像中特定的位置的基本单元。单元与诸如“块”、“区域”等等的术语可以互换地使用。通常地，M×N块指的是以M列和N行排列的采样或者变换系数的集合。图1是描述3D视频的编码和解码过程的图。参考图1，3个视频编码器编码视频图片和深度图和相机参数以作为比特流输出。可以通过相对于对应视频图片(纹理图片)的像素在相机和主题之间的距离信息(深度信息)组成深度图。例如，深度图可以是通过根据比特深度标准化深度信息获得的图片。在这种情况下，可以通过在没有色度表达的情况下记录的深度信息构成深度图。通常，因为距主题的距离和视差相互成反比例，所以可以通过使用相机参数从深度图的深度信息中推导指示在视图之间的相关性的视差信息。包括深度图和相机信息以及常规的彩色图片，即，视频图片(纹理图片)的比特流可以通过网络或者存储介质被发送给解码器。解码器接收比特流以重建视频。当3D视频解码器用作解码器时，3D视频解码器可以从比特流解码本文档来自技高网...

【技术保护点】
一种用于编码包括多视图的视频的方法，包括：确定是否对当前视图内的当前块执行残留预测；在对所述当前块执行所述残留预测的情况下，推导被用于所述当前块的所述残留预测的第一参考块和第二参考块；基于所述第一参考块的采样值和所述第二参考块的采样值之间的差值生成所述当前块的残留预测采样值；以及使用所述当前块的所述残留预测采样值推导所述当前块的预测采样值，其中，推导所述第一参考块和所述第二参考块包括，基于包括所述第一参考块或者所述第二参考块的参考图片和包括所述当前块的当前图片之间的距离缩放被用于推导所述第一参考块和所述第二参考块中的至少一个的运动向量。

【技术特征摘要】
【国外来华专利技术】2013.10.18 US 61/892,4641.一种用于编码包括多视图的视频的方法，包括：
确定是否对当前视图内的当前块执行残留预测；
在对所述当前块执行所述残留预测的情况下，推导被用于所述当
前块的所述残留预测的第一参考块和第二参考块；
基于所述第一参考块的采样值和所述第二参考块的采样值之间的
差值生成所述当前块的残留预测采样值；以及
使用所述当前块的所述残留预测采样值推导所述当前块的预测采
样值，
其中，推导所述第一参考块和所述第二参考块包括，基于包括所
述第一参考块或者所述第二参考块的参考图片和包括所述当前块的当
前图片之间的距离缩放被用于推导所述第一参考块和所述第二参考块
中的至少一个的运动向量。
2.根据权利要求1所述的用于编码视频的方法，进一步包括编码
缩放的运动向量。
3.根据权利要求1所述的用于编码视频的方法，
在所述当前块被中间预测的情况下，其中，推导所述第一参考块
和所述第二参考块包括：
使用所述当前块的视差向量从参考视图内的对应图片推导所述第
一参考块；和
使用所述当前块的运动向量从所述参考视图内的参考图片推导所
述第二参考块，并且
其中，在推导所述第二参考块的步骤中，通过基于在包括所述当
前图片的参考图片和所述第二参考块之间的距离缩放所述当前块的所
述运动向量推导所述第二参考块。
4.根据权利要求3所述的用于编码视频的方法，其中，所述对应

\t图片是在具有与所述当前图片相同的图片顺序计数(POC)值的所述参
考视图内的图片，并且
其中，所述参考图片是在具有与所述当前块的参考图片相同的
POC值的所述参考视图内的图片。
5.根据权利要求1所述的用于编码视频的方法，
在所述当前块被视图间预测的情况下，其中，推导所述第一参考
块和所述第二参考块包括：
使用所述当前块的视差向量从参考视图内的对应图片推导对应
块；和
使用所述对应块的运动向量从所述参考视图内的参考图片推导所
述第一参考块，并且
其中，在推导所述第一参考块的步骤中，通过基于在包括所述当
前图片的参考图片和所述第一参考块之间的距离缩放所述对应块的所
述运动向量推导所述第一参考块。
6.根据权利要求5所述的用于编码视频的方法，其中，所述对应
图片是在具有与所述当前图片相同的图片顺序计数(POC)值的所述参
考视图内的图片，并且
其中，所述参考视图内的所述参考图片是在具有与所述当前块的
参考图片相同的POC值的所述参考视图内的图片。
7.根据权利要求1所述的用于编码视频的方法，其中，通过将权
重因子应用于所述当前块的所述残留预测采样值推导所述当前块的所
述预测采样值，并且
其中，用于所述权重因子的信息被发送到解码设备。
8.一种用于解码包括多视图的视频的方法，...

【专利技术属性】
技术研发人员：许镇，芮世薰，金兑燮，南廷学，
申请(专利权)人：LG电子株式会社，
类型：发明
国别省市：韩国;KR