用于3D-HEVC的深度数据的深度译码模式信令制造技术

本发明专利技术描述用于使用不同于高效率视频译码HEVC译码模式的深度译码模式来编码及解码以多视图加上深度格式表示的三维3D视频数据的深度数据的技术。3D-HEVC过程中可用的额外深度帧内译码模式的实例包含深度模型化模式DMM、简化深度译码SDC模式及链译码模式CCM中的至少两者。另外，额外深度帧间译码模式的实例包含帧间SDC模式。在一个实例中，所述技术包含在与HEVC语法分开的深度模型化表中用信号通知用于译码3D视频数据的深度数据的深度帧内译码模式。在另一实例中，本发明专利技术的技术包含跨越所述深度译码模式中的两者或更多者而统一3D视频数据的深度数据的残差信息的信令。

【技术实现步骤摘要】
【国外来华专利技术】用于3D-HEVC的深度数据的深度译码模式信令本申请案主张2013年3月27日申请的第61/805,901号美国临时专利申请案、2013年3月27日申请的第61/805,922号美国临时专利申请案、2013年4月11日申请的第61/811,103号美国临时专利申请案、2013年10月14日申请的第61/890,629号美国临时专利申请案以及2013年10月16日申请的第61/891,816号美国临时专利申请案的权益，以上所有申请案的标题为“用于3D-HEVC的深度图的简化帧内模式信令(SimplifiedIntraModesSignalingofDepthMapsfor3D-HEVC)”，以上申请案中的每一者的整个内容以引用的方式并入本文中。
本专利技术涉及视频译码，并且更确切地说，涉及三维(3D)视频译码。
技术介绍
数字视频能力可并入到广泛范围的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子图书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话、所谓的“智能电话”、视频电话会议装置、视频流式传输装置及其类似者。数字视频装置实施视频压缩技术，例如由MPEG-2、MPEG-4、ITU-TH.263或ITU-TH.264/MPEG-4第10部分高级视频译码(AVC)、ITU-TH.265高效率视频译码(HEVC)界定的标准及这些标准的扩展中所描述的视频译码技术。视频装置可通过实施此类视频压缩技术而更有效率地传输、接收、编码、解码及/或存储数字视频信息。视频压缩技术执行空间(图片内)预测及/或时间(图片间)预测以减少或移除视频序列中固有的冗余。对于基于块的视频译码来说，视频切片(即，图片或图片的一部分)可以分割成视频块，视频块还可被称作树块、译码单元(CU)及/或译码节点。使用相对于同一图片中的相邻块中的参考样本的空间预测对图片的经帧内译码(I)切片中的视频块进行编码。图片的经帧间编码(P或B)切片中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或相对于其它参考图片中的参考样本的时间预测。空间或时间预测导致对块的预测块进行译码。残差数据表示待译码的原始块与预测块之间的像素差。经帧间译码块是根据指向形成预测块的参考样本块的运动向量及指示经译码块与预测块之间的差的残差数据编码的。经帧内译码块是根据帧内译码模式及残差数据来编码。为了实现进一步压缩，可以将残差数据从像素域变换到变换域，从而产生残差变换系数，接着可以对残差变换系数进行量化。可扫描最初布置为二维阵列的经量化变换系数，以便产生变换系数的一维向量，且可应用熵译码以实现更多压缩。可例如从多个视角编码视图来产生多视图译码位流。已经开发利用多视图译码方面的一些三维(3D)视频标准。举例来说，不同视图可传输左眼及右眼视图以支持3D视频。或者，一些3D视频译码过程可应用所谓的多视图加深度译码。在多视图加深度译码中，3D视频位流可不仅含有纹理视图分量而且含有深度视图分量。举例来说，每一视图可包括一个纹理视图分量及一个深度视图分量。
技术实现思路
一般来说，本专利技术涉及用于使用不同于高效率视频译码(HEVC)译码模式的深度译码模式编码及解码以多视图加深度格式表示的三维(3D)视频数据的深度数据的技术。3D视频译码过程(例如3D-HEVC过程)中可用的额外深度帧内译码模式的实例包含深度模型化模式(DMM)、简化深度译码(SDC)模式及链译码模式(CCM)中的至少两者。另外，额外深度帧间译码模式的实例包含帧间SDC模式。在一个实例中，本专利技术的技术包含用信号通知用于在与HEVC语法分开的深度模型化表中译码3D视频数据的深度数据的深度帧内译码模式。在另一实例中，本专利技术的技术包含跨越包含深度帧内译码模式及深度帧间译码模式的深度译码模式中的两者或更多者统一3D视频数据的深度数据的残差信息的信令。本专利技术的技术可通过在与HEVC帧内译码模式分开的深度模型化表语法中用信号通知深度帧内译码模式且统一用于所述深度译码模式的残差信息译码机构而减少解码器解析负担且减小所需的上下文模型的数目及二进制化方法。在一个实例中，本专利技术针对一种解码视频数据的方法，所述方法包括：解码指示是否针对视频数据启用多个深度帧内译码模式中的任一者的语法元素，其中所述深度帧内译码模式不同于HEVC帧内译码模式。在解码指示启用深度帧内译码模式的语法元素之后，解码深度模型化表，基于所述深度模型化表中的一或多个语法元素而选择深度帧内译码模式中的一者，及使用选定的深度帧内译码模式解码视频数据的深度数据。在另一实例中，本专利技术针对一种视频解码装置，其包括经配置以存储视频数据的存储器，及一或多个处理器。所述视频解码装置的所述处理器经配置以：解码指示是否启用多个深度帧内译码模式中的任一者的语法元素，其中所述深度帧内译码模式不同于HEVC帧内译码模式；在解码指示针对视频数据启用所述深度帧内译码模式的语法元素之后，解码深度模型化表；基于深度模型化表中的一或多个语法元素而选择深度帧内译码模式中的一者；及使用选定的深度帧内译码模式解码视频数据的深度数据。在另一个实例中，本专利技术针对一种视频解码装置，其包括：用于解码指示是否启用多个深度帧内译码模式中的任一者的语法元素的装置，其中所述深度帧内译码模式不同于HEVC帧内译码模式；在解码指示针对视频数据启用所述深度帧内译码模式的语法元素之后，用于解码深度模型化表的装置；用于基于深度模型化表中的一或多个语法元素而选择深度帧内译码模式中的一者的装置；及用于使用选定的深度帧内译码模式解码视频数据的深度数据的装置。在额外实例中，本专利技术针对一种计算机可读媒体，其包括在被执行时致使一或多个处理器进行以下操作的用于解码视频数据的指令：解码指示是否启用多个深度帧内译码模式中的任一者的语法元素，其中所述深度帧内译码模式不同于HEVC帧内译码模式；在解码指示针对视频数据启用所述深度帧内译码模式的语法元素之后，解码深度模型化表；基于深度模型化表中的一或多个语法元素而选择深度帧内译码模式中的一者；及使用选定的深度帧内译码模式解码视频数据的深度数据。在另一实例中，本专利技术针对一种编码视频数据的方法，所述方法包括：使用多个深度帧内译码模式中的选定一者编码视频数据的深度数据，其中所述深度帧内译码模式不同于HEVC帧内译码模式；编码指示针对所述视频数据启用深度帧内译码模式的语法元素；及编码包含指示所述选定的深度帧内译码模式的一或多个语法元素的深度模型化表。在另一个实例中，本专利技术针对一种视频编码装置，其包括经配置以存储视频数据的存储器，及一或多个处理器。所述视频编码装置的处理器经配置以：使用多个深度帧内译码模式中的选定一者编码视频数据的深度数据，其中所述深度帧内译码模式不同于HEVC帧内译码模式；编码指示针对所述视频数据启用深度帧内译码模式的语法元素；及编码包含指示所述选定的深度帧内译码模式的一或多个语法元素的深度模型化表。在一个实例中，本专利技术针对一种解码视频数据的方法，所述方法包括：解码指示所述视频数据的深度数据的残差信息的一组语法元素，其中相同组的语法元素指示多个深度译码模式中的任一者的残差信息；解码本文档来自技高网...

【技术保护点】
一种解码视频数据的方法，所述方法包括：解码指示是否针对所述视频数据启用多个深度帧内译码模式中的任一者的语法元素，其中所述深度帧内译码模式不同于高效率视频译码HEVC帧内译码模式；在解码指示启用所述深度帧内译码模式的所述语法元素之后，解码深度模型化表；基于所述深度模型化表中的一或多个语法元素而选择所述深度帧内译码模式中的一者；及使用所述选定的深度帧内译码模式解码所述视频数据的深度数据。

【技术特征摘要】
【国外来华专利技术】2013.03.27 US 61/805,901;2013.03.27 US 61/805,922;1.一种解码视频数据的方法，所述方法包括：解码指示是否针对所述视频数据启用所有多个深度帧内译码模式或不启用所述多个深度帧内译码模式的语法元素，其中所述深度帧内译码模式不同于高效率视频译码HEVC帧内译码模式；在解码指示启用所有所述深度帧内译码模式的所述语法元素之后，解码包含用于所述深度帧内译码模式的语法元素的深度模型化表，其中所述深度模型化表与包含用于所述HEVC帧内译码模式的语法元素的语法表分开；基于所述深度模型化表中的一或多个语法元素而选择所述深度帧内译码模式中的一者；及使用所述选定的深度帧内译码模式解码所述视频数据的深度数据。2.根据权利要求1所述的方法，其中所述深度帧内译码模式包含深度模型化模式DMM、简化深度译码SDC模式或链译码模式CCM中的至少两者。3.根据权利要求2所述的方法，其中所述深度帧内译码模式包含所述DMM的至少一个子模式及所述SDC模式的至少三个子模式。4.根据权利要求1所述的方法，其中所述深度模型化表中的所述一或多个语法元素指示以下各者中的一者：深度模型化模式DMM的子模式、简化深度译码SDC模式的子模式，或用于解码所述深度数据的链译码模式CCM。5.根据权利要求1所述的方法，其中所述深度模型化表包含指示用于所述选定的深度帧内译码模式的所述深度数据的残差信息的一组语法元素，其中所述组语法元素包含指示所述深度数据的残差值是否存在的语法元素，且在所述深度数据的所述残差值存在的情况下，所述组语法元素进一步包含指示所述深度数据的所述残差值的绝对值及正负号的语法元素。6.根据权利要求5所述的方法，其中相同组语法元素指示用于所述深度帧内译码模式中的任一者的残差信息。7.根据权利要求5所述的方法，其中解码所述深度数据包括根据所述选定的深度帧内译码模式基于所述深度数据的所述残差值及相邻参考样本而重构所述视频数据的深度值，而不对所述相邻参考样本进行滤波。8.根据权利要求1所述的方法，其中不同于所述深度帧内译码模式的所述HEVC帧内译码模式包含以下各者中的一或多者：HEVC帧内译码模式、HEVC帧内脉码调制I_PCM模式、被界定为HEVC帧内译码模式的深度模型化模式DMM的子模式，或被界定为HEVC帧内译码模式的链译码模式CCM。9.根据权利要求1所述的方法，其进一步包括，在解码指示不针对所述视频数据启用所述深度帧内译码模式的所述语法元素之后，选择不同于所述深度帧内译码模式的所述HEVC帧内译码模式中的一者，而不解码所述深度模型化表，且使用所述选定的HEVC帧内译码模式解码所述视频数据的所述深度数据。10.根据权利要求9所述的方法，其中所述选定的HEVC帧内译码模式包含被界定为HEVC帧内译码模式的链译码模式CCM，所述方法进一步包括解码链译码表，所述链译码表包含指示用于所述CCM的所述深度数据的残差信息的一或多个语法元素。11.根据权利要求1所述的方法，其中指示是否启用所有所述深度帧内译码模式或不启用所述深度帧内译码模式的所述语法元素包含在所述视频数据的视频参数集VPS、序列参数集SPS或图片参数集PPS中的一者中。12.根据权利要求1所述的方法，其中解码所述深度模型化表包括在所述视频数据的译码单元CU层级或预测单元PU层级中的一者处解码所述深度模型化表。13.一种视频解码装置，其包括：存储器，其经配置以存储视频数据；及一或多个处理器，其经配置以：解码指示是否启用所有多个深度帧内译码模式或不启用所述多个深度帧内译码模式的语法元素，其中所述深度帧内译码模式不同于高效率视频译码HEVC帧内译码模式，在解码指示针对所述视频数据启用所有所述深度帧内译码模式的所述语法元素之后，解码包含用于所述深度帧内译码模式的语法元素的深度模型化表，其中所述深度模型化表与包含用于所述HEVC帧内译码模式的语法元素的语法表分开，基于所述深度模型化表中的一或多个语法元素而选择所述深度帧内译码模式中的一者，及使用所述选定的深度帧内译码模式解码所述视频数据的深度数据。14.根据权利要求13所述的装置，其中所述深度帧内译码模式包含深度模型化模式DMM、简化深度译码SDC模式或链译码模式CCM中的至少两者。15.根据权利要求14所述的装置，其中所述深度帧内译码模式包含所述DMM的至少一个子模式及所述SDC模式的至少三个子模式。16.根据权利要求13所述的装置，其中所述深度模型化表中的所述一或多个语法元素指示以下各者中的一者：深度模型化模式DMM的子模式、简化深度译码SDC模式的子模式，或用于解码所述深度数据的链译码模式CCM。17.根据权利要求13所述的装置，其中所述深度模型化表包含指示用于所述选定的深度帧内译码模式的所述深度数据的残差信息的一组语法元素，其中所述组语法元素包含指示所述深度数据的残差值是否存在的语法元素，且在所述深度数据的所述残差值存在的情况下，所述组语法元素进一步包含指示所述深度数据的所述残差值的绝对值及正负号的语法元素。18.根据权利要求17所述的装置，其中相同组语法元素指示用于所述深度帧内译码模式中的任一者的残差信息。19.根据权利要求17所述的装置，其中所述一或多个处理器进一步经配置以根据所述选定的深度帧内译码模式基于所述深度数据的所述残差值及相邻参考样本而重构所述视频数据的深度值，而不对所述相邻参考样本进行滤波。20.根据权利要求13所述的装置，其中不同于所述深度帧内译码模式的所述HEVC帧内译码模式包含以下各者中的一或多者：HEVC帧内译码模式、HEVC帧内脉码调制I_PCM模式、被界定为HEVC帧内译码模式的深度模型化模式DMM的子模式，或被界定为HEVC帧内译码模式的链译码模式CCM。21.根据权利要求13所述的装置，其中，在解码指示不针对所述视频数据启用所述深度帧内译码模式的所述语法元素之后，所述一或多个处理器进一步经配置以选择不同于所述深度帧内译码模式的所述HEVC帧内译码模式中的一者，而不解码所述深度模型化表，且使用所述选定的HEVC帧内译码模式解码所述视频数据的所述深度数据。22.根据权利要求21所述的装置，其中所述选定的HEVC帧内译码模式包含被界定为HEVC帧内译码模式的链译码模式CCM，且其中所述一或多个处理器进一步经配置以解码链译码表，所述链译码表包含指示用于所述CCM的所述深度数据的残差信息的一或多个语法元素。23.根据权利要求13所述的装置，其中指示是否启用所有所述深度帧内译码模式或不启用所述深度帧内译码模...

【专利技术属性】
技术研发人员：张莉，陈颖，赵欣，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国;US