在4:4:4色度格式和单树的情况下针对所有通道的MIP制造技术

技术编号:36068562 阅读:20 留言:0更新日期:2022-12-24 10:36
一种基于块的解码器,被配置为:使用划分方案将具有多于一个颜色分量(101、102)和具有颜色采样格式的图片(10)划分成块,根据该颜色采样格式对每个颜色分量(101、102)等同地采样,根据该划分方案针对每个颜色分量(101、102)等同地划分图片(10)。另外,该基于块的解码器被配置为:通过针对图片(10)的帧内预测的第一颜色分量块(18

【技术实现步骤摘要】
【国外来华专利技术】在4:4:4色度格式和单树的情况下针对所有通道的MIP


[0001]根据本专利技术的实施例涉及用于在4:4:4色度格式和单树的情况下针对所有通道使用基于矩阵的帧内预测(MIP)来编码或解码图片或视频的装置和方法。

技术介绍

[0002]在当前的VTM中,MIP仅用于亮度分量[3]。如果在色度帧内块上帧内模式是直接模式(DM),并且如果位于同一位置的亮度块的帧内模式是MIP模式,则色度块必须使用平面模式来产生帧内预测信号。断言在MIP的情况下对DM模式进行这种处理的主要原因是:对于4:2:0的情况或双树的情况,位于同一位置的亮度块可能会具有与色度块不同的形状。因此,由于不能对所有块形状应用MIP模式,所以在这种情况下位于同一位置的亮度块的MIP模式可能不适用于色度块。
[0003]因此,期望提供用于更有效地呈现图片编码和/或视频编码以支持针对所有通道的基于矩阵的帧内预测的构思。附加地或备选地,期望减少比特流并因此减少信号通知(signalization)成本。
[0004]这通过本申请的独立权利要求的主题来实现
[000本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种基于块的解码器,被配置为:使用划分方案(11
’1)将具有多于一个颜色分量(101、102)并具有颜色采样格式的图片(10)划分成块,其中根据所述颜色采样格式对每个颜色分量(101、102)等同地采样,根据所述划分方案(11
’1)针对每个颜色分量(101、102)等同地划分所述图片(10),通过针对所述图片(10)的帧内预测的第一颜色分量块(18

11
至18

1n
)中的每一个选择帧内预测模式的第一集合(508)中的一个帧内预测模式,以块为单位解码所述图片(10)的第一颜色分量(101),所述第一集合(508)包括基于矩阵的帧内预测模式(5101至510
m
),其中根据每个基于矩阵的帧内预测模式,通过以下方式来预测块内部(18):从与所述块内部(18)相邻的参考样本(17)导出样本值向量(514),计算所述样本值向量(514)和与相应的基于矩阵的帧内预测模式(5101至510
m
)相关联的预测矩阵(516)之间的矩阵

向量乘积(512),以便获得预测向量(518),以及基于所述预测向量(518)来预测所述块内部(18)中的样本,通过使用针对位于同一位置的帧内预测的第一颜色分量块(181)而选择的基于矩阵的帧内预测模式对所述图片的预定的第二颜色分量块(182)进行帧内预测,以块为单位解码所述图片(10)的第二颜色分量(102)。2.根据权利要求1所述的基于块的解码器,其中,所述预测向量(518)的分量的数量小于所述块内部(18)中的样本的数量,并且所述基于块的解码器被配置为:通过基于分配给所述块内部(18)中的支持样本位置的预测向量(518)的分量对所述块内部(18)中的样本进行插值,来基于所述预测向量(518)预测所述块内部(18)中的样本。3.根据权利要求1或2所述的基于块的解码器,被配置为:针对所述图片的帧内预测的第二颜色分量块(18

21
至18

2n
)中的每个第二颜色分量块选择以下之一:第一选项,根据所述第一选项,基于针对位于同一位置的帧内预测的第一颜色分量块(181)而选择的帧内预测模式,导出针对相应的帧内预测的第二颜色分量块(182)的帧内预测模式,使得在针对所述位于同一位置的帧内预测的第一颜色分量块(181)而选择的帧内预测模式是所述基于矩阵的帧内预测模式(5101至510m)之一的情况下针对所述相应的帧内预测的第二颜色分量块(182)的帧内预测模式等于针对所述位于同一位置的帧内预测的第一颜色分量块(181)而选择的帧内预测模式,以及第二选项,根据所述第二选项,基于数据流中存在的针对相应的帧内预测的第二颜色分量块(182)的帧内模式索引,来选择针对所述相应的帧内预测的第二颜色分量块(182)的帧内预测模式。4.根据权利要求1至3之一所述的基于块的解码器,被配置为使得:取决于相应的帧内预测的第一颜色分量块的块尺寸来选择由帧内预测模式的第一集合(508)所包括的基于矩阵的帧内预测模式(5101至510
m
),以便作为基于矩阵的帧内预测模式(5101至510
m
)的互不相交子集的集合之中的基于矩阵的帧内预测模式(5101至510
m
)的一个子集。5.根据权利要求4所述的基于块的解码器,其中,与基于矩阵的帧内预测模式(5101至510
m
)的互不相交的子集的集合相关联的预测矩阵是机器学习的,由基于矩阵的帧内预测模式的一个子集包括的预测矩阵具有互等的大小,并且由针对不同块大小选择的基于矩阵的帧内预测模式的两个子集所包括的预测矩阵具有相互不同的大小。6.根据前述权利要求中任一项所述的基于块的解码器,被配置为使得:与由帧内预测
模式的第一集合(508)所包括的基于矩阵的帧内预测模式(5101至510
m
)相关联的预测矩阵具有互等的大小并且是机器学习的。7.根据前述权利要求中任一项所述的基于块的解码器,被配置为使得:除了由帧内预测模式的第一集合(508)所包括的基于矩阵的帧内预测模式(5101至510
m
)之外,由帧内预测模式的第一集合(508)所包括的帧内预测模式还包括DC模式、平面模式和定向模式。8.根据前述权利要求中任一项所述的基于块的解码器,被配置为:从划分方案集合(11

)中选择所述划分方案(11
’1、11
’2),划分方案集合(11

)包括其他划分方案(11
’2),其中根据所述其他划分方案(11
’2),使用数据流中的第一划分信息(11

2a
)针对所述第一颜色分量(101)对所述图片进行划分,并且使用数据流中存在的与所述第一划分信息分开的第二划分信息(11

2b
)针对所述第二颜色分量(102)对所述图片进行划分。9.根据权利要求8所述的基于块的解码器,被配置为:针对所述图片(10a)的帧内预测的第二颜色分量块(18

21
至18

2n
)中的每个第二颜色分量块选择以下之一:第一选项,根据所述第一选项,基于针对位于同一位置的帧内预测的第一颜色分量块(18a1)而选择的帧内预测模式,导出针对相应的帧内预测的第二颜色分量块(18a2)的帧内预测模式,使得在针对所述位于同一位置的帧内预测的第一颜色分量块(18a1)而选择的帧内预测模式是所述基于矩阵的帧内预测模式(5101至510
m
)之一的情况下,针对所述相应的帧内预测的第二颜色分量块(18a2)的帧内预测模式等同于针对所述位于同一位置的帧内预测的第一颜色分量块(18a1)而选择的帧内预测模式,以及第二选项,根据所述第二选项,基于所述数据流中存在的针对所述相应的帧内预测的第二颜色分量块(18a2)的帧内模式索引(509),来选择针对所述相应的帧内预测的第二颜色分量块(18a2)的帧内预测模式,使用所述其他划分方案(11
’2)将具有多于一个颜色分量(10b1、10b2)并具有颜色采样格式的其他图片(10b)划分成其他块,其中根据所述颜色采样格式对每个颜色分量(10b2、10b2)等同地采样,通过针对所述其他图片(10b)的帧内预测的其他第一颜色分量块(18b1)中的每一个选择帧内预测模式的第一集合(508)中的一个帧内预测模式,以其他块为单位解码所述其他图片(10b)的第一颜色分量(10b1),针对所述其他图片(10b)的帧内预测的其他第二颜色分量块(18b2)中的每个其他第二颜色分量块选择以下之一:第一选项,根据所述第一选项,基于针对位于同一位置的其他第一颜色分量块(18b1)而选择的帧内预测模式,导出针对相应的帧内预测的其他第二颜色分量块(18b2)的帧内预测模式,使得在针对所述位于同一位置的其他第一颜色分量块(18b1)而选择的帧内预测模式是所述基于矩阵的帧内预测模式(5101至510
m
)之一的情况下,针对所述相应的帧内预测的其他第二颜色分量块(18b2)的帧内预测模式等同于平面帧内预测模式,以及第二选项,根据所述第二选项,基于所述数据流中存在的针对所述相应的帧内预测的其他第二颜色分量块(18b2)的帧内模式索引,来选择针对所述相应的帧内预测的其他第二颜色分量块(18b2)的帧内预测模式。
10.根据前述权利要求中任一项所述的基于块的解码器,被配置为:针对所述图片(10a)的帧内预测的第二颜色分量块(18

21
至18

2n
)中的每个第二颜色分量块选择以下之一:第一选项,根据所述第一选项,基于针对位于同一位置的帧内预测的第一颜色分量块(18a1)而选择的帧内预测模式,导出针对相应的帧内预测的第二颜色分量块(18a2)的帧内预测模式,使得在针对所述位于同一位置的帧内预测的第一颜色分量块(18a1)而选择的帧内预测模式是所述基于矩阵的帧内预测模式(5101至510
m
)之一的情况下,针对所述相应的帧内预测的第二颜色分量块(18a2)的帧内预测模式等同于针对所述位于同一位置的帧内预测的第一颜色分量块(18a1)而选择的帧内预测模式,以及第二选项,根据所述第二选项,基于所述数据流中存在的针对所述相应的帧内预测的第二颜色分量块(18a2)的帧内模式索引,来选择针对相应的帧内预测的第二颜色分量块(18a2)的帧内预测模式,对具有多于一个颜色分量(10c1、10c2)并具有不同颜色采样格式的又其他图片(10c)进行划分,其中根据所述不同颜色采样格式,对所述多于一个颜色分量(10c1、10c2)不同地采样,通过针对所述又其他图片(10c)的帧内预测的又其他第一颜色分量块(18c1)中的每一个选择帧内预测模式的第一集合(508)中的一个帧内预测模式,以又其他块为单位解码所述又其他图片(10c)的第一颜色分量(10c1),针对所述又其他图片(10c)的帧内预测的又其他第二颜色分量块(18c2)中的每个又其他第二颜色分量块选择以下之一:第一选项,根据所述第一选项,基于针对位于同一位置的又其他第一颜色分量块(18c1)而选择的帧内预测模式,导出针对相应的帧内预测的又其他第二颜色分量块(18c2)的帧内预测模式,使得在针对所述位于同一位置的又其他第一颜色分量块(18c1)而选择的帧内预测模式是所述基于矩阵的帧内预测模式(5101至510
m
)之一的情况下,针对所述相应的帧内预测的又其他第二颜色分量块(18c2)的帧内预测模式等同于平面帧内预测模式,以及第二选项,根据所述第二选项,基于所述数据流中存在的针对所述相应的帧内预测的又其他第二颜色分量块(18c2)的帧内模式索引,来选择针对所述相应的帧内预测的又其他第二颜色分量块(18c2)的帧内预测模式。11.根据权利要求10所述的基于块的解码器,被配置为:从划分方案集合(11

)中选择所述划分方案(11
’1、11
’2),划分方案集合(11

)包括其他划分方案(11
’2),其中根据所述其他划分方案(11
’2),使用数据流中的第一划分信息(11
’2a)针对所述第一颜色分量(101)对所述图片进行划分,并且使用数据流中存在的与所述第一划分信息分开的第二划分信息(11

2b
),针对所述第二颜色分量(102)对所述图片进行划分;使用所述划分方案(11
’1)或所述其他划分方案(11
’2)对具有多于一个颜色分量(101、102)的所述又其他图片(10c)进行划分。12.根据权利要求3至11所述的基于块的解码器,被配置为:如果数据流中将残差编码颜色变换模式信号通知为针对相应的帧内预测的第二颜色分量块(182)是去激活的,则取决于所述数据流中存在的针对所述相应的帧内预测的第二
颜色分量块(182)的信号通知来从所述第一选项和所述第二选项中执行选择,并且如果所述数据流中将所述残差编码颜色变换模式信号通知为针对所述相应的帧内预测的第二颜色分量块(182)是激活的,则通过推断要选择所述第一选项来从所述第一选项和所述第二选项中执行选择。13.一种基于块的编码器,被配置为:使用划分方案(11
’1)将具有多于一个颜色分量(101、102)并具有颜色采样格式的图片(10)划分成块,其中根据所述颜色采样格式对每个颜色分量(101、102)等同地采样,根据所述划分方案(11
’1)针对每个颜色分量(101、102)等同地划分所述图片(10),通过针对所述图片(10)的帧内预测的第一颜色分量块(18

11
至18

1n
)中的每一个选择帧内预测模式的第一集合(508)中的一个帧内预测模式,以块为单位将所述图片(10)的第一颜色分量(101)编码到数据流中,所述第一集合(508)包括基于矩阵的帧内预测模式(5101至510
m
),其中根据每个基于矩阵的帧内预测模式,通过以下方式来预测块内部(18):从与所述块内部(18)相邻的参考样本(17)导出样本值向量(514),计算所述样本值向量(514)和与相应的基于矩阵的帧内预测模式(5101至510
m
)相关联的预测矩阵(516)之间的矩阵

向量乘积(512),以便获得预测向量(518),以及基于所述预测向量(518)来预测所述块内部(18)中的样本,通过使用针对位于同一位置的帧内预测的第一颜色分量块(181)而选择的基于矩阵的帧内预测模式,对所述图片的预定的第二颜色分量块(182)进行帧内预测,来以块为单位编码所述图片(10)的第二颜色分量(102)。14.根据权利要求13所述的基于块的编码器,其中,所述预测向量(518)的分量的数量小于所述块内部(18)中的样本的数量...

【专利技术属性】
技术研发人员:乔纳森
申请(专利权)人:弗劳恩霍夫应用研究促进协会
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1