在三维编码系统中深度区块的帧内编码方法及装置制造方法及图纸

技术编号:13270573 阅读:52 留言:0更新日期:2016-05-18 20:15
本发明专利技术提供一种直接简化深度编码的方法及装置。该方法及装置直接得到每一个分片的预测值,而不需要得到深度预测采样或深度预测子采样。直接简化深度编码方法实质上通过基于重建的相邻深度采样直接得到预测值,减少了与得到预测采样或预测子采样并计算预测采样或子采样的平均值相关的计算量。直接简化深度编码可被应用以得到两个预测值,P0和P1,以用于简化深度编码的深度模型模式1编码的深度区块的两个分片。

【技术实现步骤摘要】
【国外来华专利技术】【专利说明】 交叉引用 本专利技术主张在2013年4月12日提出的申请号为PCT/CN2013/074161、标题为 "Direct Simplified Depth Coding"的PCT专利申请的优先权。因此在全文中合并参考该 PCT专利申请案。
本专利技术是有关于三维和多视图视频编码,特别是有关于利用简化深度编码 (Simplified Depth Coding)技术的深度编码。
技术介绍
三维(Three-dimensional,以下简称为3D)电视为近年来的技术发展趋势,并且三 维电视给观众带来震撼的视觉体验。多视图视频为捕获和显现3D视频的技术。多视图视频 通常通过利用多个摄像机同时捕获场景来产生。其中,适当地放置多个摄影机,以使得每一 个摄影机能够自一个视点来捕获场景。具有与视图相关的大量的视频序列的多视图视频意 味着大量的数据。相应地,多视图视频要求大存储空间来存储及/或高带宽来传输。因此,在 相关领域中已开发多视图视频编码技术,来降低需要的存储空间和传输带宽。在三维和多 视图编码系统中,纹理数据和深度数据一样被编码。 在基于HEVC的测试模式(HEVC based Test Model,HTM)中采用简化深度编码 (implified depth coding,SDC)和深度查找表(depth lookup table,DLT)。对于每一个深 度编码单元来说,若简化深度编码被选择,则三个不同预测模式(即,直流模式DC、平面模式 以及深度模型模式KDepth Modelling Mode 1,DMM-1))中的一个被选择。在预测之后,简 化深度编码的已编码残余不是编码为量化的转换系数,而是根据深度区块是否分为一个或 两个分片,而通过一个或两个常数残差值来表示。此外,深度查找表用于将简化深度编码中 已编码的深度值映射至原始深度图的有效深度值中。 -种两步法用于在简化深度编码预测阶分片中获得预测值。首先,利用相邻重建 采样的常规帧内预测(Intra-predict ion)过程被调用,以得到在已编码区块中的所有的 预测采样。在此步骤中,直流模式DC、平面模式、以及深度模型模式1为三种可能的预测模 式。其次,在一个分片(segment)中的预测采样的平均值被计算,以作为此分片的预测值。对 于直流模式DC和平面模式来说,在已编码区块中仅有一个分片,对于深度模型模式1来说, 如深度模型模式1所定义,在已编码区块中有两个分片。为求简化,zhang等人提出的子采样 方法仅利用每四个预测采样中的一个来得到平均值(CE6.H related:Reference samples sub-sampling for SDC and DMM,',Document of Joint Collaborative Team on 3D Video Coding Extension 〇6¥61〇^11^1^,<1(^3¥-〇0154,如11.2013)。此方法可以有效地减少 求平均过程中的求和操作。 图1为用于直流模式的简化深度编码预测的两步法。当前深度区块(110)的相邻重 建深度值(112)用作参考采样,以形成当前区块的预测采样。自预测值得到平均值。两步法 在产生预测采样和计算这些采样的平均值过程中引起高计算开销。因此,求平均过程需要 较高位宽(bit-width)。为降低求平均中涉及的预测采样的数目,Zheng等人提出的子采样 方法,保留四个相邻采样(120)中的一个。然后,用于要被编码或解码的区块(130)的预测值 P被得到。对于解码端来说,将得到的预测值与接收的残差相加,以形成重建的区块(140)。 在简化深度编码中,多达64x64/4的预测采样可相加在一起,并由此通过用于8比特采样的 累加器得到18比特,该18比特大于通过常规帧内预测所需要的。 图2为用于深度模型模式1的简化深度编码预测的两步法。当前深度区块(210)的 相邻重建采样(212)用于形成预测。子采样预测区块(220)用于预测。每一个分片的平均值 (平均值PO和平均值Pl)被得到,以形成预测区块(230)。如图2所示,对于解码来说,各自的 残差(残差RO和残差Rl)被接收并加至对应的预测值以形成重建区块(240)。 需要开发一种用于每一个分片的预测值推导的方法,其能减少需要的操作或减轻 执行大量采样求和需要的比特深度。
技术实现思路
本专利技术提供一种置直接得到每一个分片的预测值,而不需要得到深度预测采样或 深度预测子采样的直接简化深度编码的方法及装置。根据本专利技术的实施方式实质上通过基 于重建的相邻深度采样直接得到预测值,减少了与得到预测采样或预测子采样并计算预测 采样或子采样的平均值相关的计算量。举例来说,直接简化深度编码可被应用以得到两个 预测值,PO和Pl,以用于通过简化深度编码的深度模型模式1编码的深度区块的两个分片。 预测值可基于已重建相邻深度采样的线性函数而得到。对于不同分片,预测值可基于已重 建相邻深度采样的不同函数来得到。对于不同的简化深度编码模式,预测值可基于已重建 相邻深度采样的不同函数来得到。每一个分片的预测值可被剪切于最小深度采样值和最大 深度采样值之间的范围内。若已重建相邻深度采样不可用,则已重建相邻深度采样通过可 用的另一个已重建相邻深度采样来代替。可选地,预测值可基于剩余的可用已重建向量深 度采样来得到。 本专利技术一方面描述了预测值的简化推导。该推导基于少量的已重建相邻深度采 样。举例来说,在简化深度编码的直流模式中,少量的已重建相邻深度采样可包括相邻于当 前深度区块的左上角深度采样的左侧的已重建相邻深度采样和相邻于当前深度区块的左 上角深度采样的另一已重建向量深度采样。根据这两个采样的可用性,预测值可被设置为 这两个采样的平均值、这两个采样中的一个、或预定值。预定值可对应于最大深度值的一 半、最大深度值和最小深度值的平均值、或128。对于简化深度编码平面模式来说,预测值可 为当前深度区块的左下角深度采样的对角位置的已重建相邻深度采样和当前深度区块的 右上角深度采样的对角位置的另一已重建相邻深度采样的平均值。【附图说明】 图1为基于简化深度编码的直流模式下的深度区块解码处理步骤的示意图,其中 深度区块包括一个分片。图2为基于简化深度编码的深度模型模式Umodelling mode 1,DMM-1)下的深度 区块解码处理步骤的示意图,其中深度区块被分为两个分片。 图3为根据本专利技术实施方式的直接简化深度编码的直流模式下的深度区块解码处 理步骤的示意图。 图4为根据本专利技术实施方式的直接简化深度编码的深度模型模式1下的深度区块 解码处理步骤的示意图。 图5为根据本专利技术实施方式的自已重建相邻深度采样的已选择的采样得到预测值 的示例的示意图。 图6为根据本专利技术实施方式的包括直接简化深度编码的系统的流程图。【具体实施方式】 在现有的简化深度编码(之后被称为分片式深度编码(Segment-wise DC coding, SDC))中,要编码的输入信号为深度区块的原始深度值的平均值,以及输出为深度区块的预 测的深度值,其自深度区块的预测的深度值的平均值来得到。根据现有的简化深度当前第1页1 2 3&n本文档来自技高网
...

【技术保护点】
一种在三维编码系统中深度区块的帧内编码方法,其特征在于,该方法包括:接收与当前深度区块相关的输入数据,其中该当前深度区块被分割为一个或多个分片;接收该当前深度区块的已重建相邻深度采样;直接基于该已重建相邻深度采样来得到用于每一个分片的预测值,而不需要得到每一个分片的深度预测采样或深度预测子采样;以及利用该预测值来编码或解码该当前深度区块的每一个分片。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员:林建良张凯陈渏纹安基程
申请(专利权)人:联发科技股份有限公司
类型:发明
国别省市:中国台湾;71

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1