参考图像管理方法及装置制造方法及图纸

本发明专利技术提供一种参考图像管理方法及装置，其中，该参考图像管理方法适用于视频序列的视频编码，该参考图像管理方法包括下列步骤：接收与视频序列的当前图像单元有关的输入数据，其中当前图像单元对应于当前图像、当前图像的当前条带或当前图像的当前区域；确定当前图像单元的一或多个参考图像，其中一或多个参考图像使用与一或多个参考图像的编码顺序索引有关的信息表示；利用一或多个参考图像，将图像间编码或译码应用于该输入数据；确定未被当前图像或后续图像参考的一或多个无效图像；以及在输出一或多个无效图像之后，将一或多个无效图像从已译码图像缓存中移除。本发明专利技术提供的参考图像管理方法可对参考图像实现系统而有效的管理。

【技术实现步骤摘要】
参考图像管理方法及装置
本专利技术有关于一种参考图像管理方法。更具体地，本专利技术有关于一种参考图像管理方法及装置。
技术介绍
运动估测是一种有效的帧间编码技术，用于在视频序列中使用时间冗余（temporalredundancy）。运动补偿帧间编码技术已广泛运用于各种国际视频编码标准。对包括帧间或图像间编码的视频编码系统而言，当前图像的处理可使用先前已编码图像(或条带（slice）或区域（region）)的信息。这些先前已编码图像在用于进行预测之前被译码且将已译码图像称为”参考图像”。在较新的视频编码标准中，例如高阶视频编码(AdvancedVideoCoding，AVC)(也称为H.264)以及高效率视频编码(HEVC)等，通过使用非常详尽的参考图像可很好地利用图像间冗余。而参考图像必须存储在编码器端和译码器端的参考图像缓存中。由于使用的参考图像的数目可能相当大，因此编码系统如何有效地管理参考图像已成为关键问题。在HEVC标准中(Brossetal,“HighEfficiencyVideoCoding(HEVC)textSpecificationDraft9”,JointCollaborativeTeamonVideoCoding(JCT-VC)ofITU-TSG16WP3andISO/IECJTC1/SC29/WG11,JCTVC-K1003_v10,Oct.2012)，揭露了灵活的参考图像管理。编码器可选择参考参数(referenceparameter)来编码每个图像。参考参数可包括用于构建(construct)参考列表(referencelist)的参考图像的数目、参考列表中参考图像的顺序以及参考图像使用率。参考图像信息传输在视频比特流中，以使译码器可在译码器端恢复对应的参考图像。为了实现这些功能，将根据HEVC标准的参考图像管理设计描述如下。每个图像指定一个图像顺序计数(PictureOrderCount，POC)，并且POC传输在条带标头中，从编码器端传输至译码器。POC表示图像的输出顺序(即显示顺序)。对于一个条带，使用参考图像集合(ReferencePictureSet，RPS)来定义当前条带所使用的参考图像。在RPS中，参考图像可透过当前图像与参考图像的POC之间的差来进行定位（locate）。图1为根据HEVC的基于POC的短程（short-term）RPS语法的示意图。由于输出顺序可能会与编码顺序不同，参考图像的POC可小于或大于当前图像的POC。存在两种方式（即直接模式与预测模式）来根据HEVC编码POC，以标志inter_ref_pic_set_prediction_flag表示该两种方式。当前述标志等于0时，当前图像的参考图像集合是以直接模式表示。当前述标志等于1时，当前图像的参考图像集合是以预测模式表示。在直接模式中，参考图像的POC是分别编码为对应低于当前图像的POC的设置s0以及对应高于当前图像的POC的设置s1。这些参考图像可在标志used_by_curr_pic_sx_flag等于1时被当前图像使用，或者可在used_by_curr_pic_sx_flag等于0时被后续图像使用而不被当前图像使用。在预测模式中，参考图像的POC是可透过标志delta_idx_minus1所表示的一个先前已编码RPS来进行预测。图2为根据HEVC所定义的包括在序列参数集合（SequecneParameterSet，SPS）中的RPS语法表的示意图。如图2所示，多个参考图像集合可传输在SPS中，以num_short_term_ref_pic_sets表示。一个条带可选择传输在SPS中的RPS中，如short_term_ref_pic_set_idx所表示，或者条带可使用新的RPS传输在条带标头中。条带标头中的对应语法结构显示在图3中。图3为根据HEVC所定义的包括在条带标头中的RPS语法表的示意图。对于已译码图像缓存(DecodedPictureBuffer，DPB)中的一个已译码图像，如果此图像未包括在当前图像的RPS中时，此图像将不再是参考图像且可在输出后从DPB中移除。可在规定用于当前图像的参考图像之后构建参考列表。图4为HEVC所定义的默认列表构建规则的示意图。对于列表0，具有低于当前图像的POC的参考图像是以大到小的POC顺序从DPB缓存列表的顶端放置在DPB中。接着，具有高于当前图像的POC的参考图像是以小到大的POC顺序放置在DPB中。因此，图4的实例中的列表0为2、1、4以及5。对于列表1，具有高于当前图像的POC的参考图像是以小到大的POC顺序从DPB缓存列表的顶端放置在DPB中。接着，具有低于当前图像的POC的参考图像是以大到小的POC顺序放置在DPB中。因此，图4的实例中的列表1为4、5、2以及1。编码器也可透过在条带标头中传输ref_pic_lists_modification()语法表来以明确方式指定参考列表，如图5所示。图5为根据HEVC的参考图像列表修改语法示意图。
技术实现思路
有鉴于此，本专利技术提供一种参考图像管理方法及装置。本专利技术提供一种参考图像管理方法，适用于视频序列的视频编码，该参考图像管理方法包括下列步骤：接收与该视频序列的当前图像单元有关的输入数据，其中该当前图像单元对应于当前图像、该当前图像的当前条带或该当前图像的当前区域；确定该当前图像单元的一或多个参考图像，其中该一或多个参考图像使用与该一或多个参考图像的编码顺序索引有关的信息表示；利用该一或多个参考图像，将图像间编码或译码应用于该输入数据；确定未被该当前图像或后续图像参考的一或多个无效图像，其中该一或多个无效图像使用与该一或多个无效图像的编码顺序索引有关的信息表示；以及在输出该一或多个无效图像之后，将该一或多个无效图像从已译码图像缓存中移除。本专利技术还提供一种参考图像管理装置，适用于视频序列的视频编码，该参考图像管理装置包括一或多个电子电路，其中该多个电子电路用于：接收与该视频序列的当前图像单元有关的输入数据，其中该当前图像单元对应于当前图像、该当前图像的当前条带或该当前图像的当前区域；使用与该一或多个参考图像的编码顺序索引有关的信息表示；利用该一或多个参考图像，将图像间编码或译码应用于该输入数据；确定未被该当前图像或后续图像参考的一或多个无效图像，其中该一或多个无效图像使用与该一或多个无效图像的编码顺序索引有关的信息表示；以及在输出该一或多个无效图像之后，将该一或多个无效图像从已译码图像缓存中移除。本专利技术提供的参考图像管理方法可对参考图像实现系统而有效的管理。附图说明图1为根据HEVC的基于POC的短程RPS语法的示意图。图2为根据HEVC所定义的包括在序列参数集合中的RPS语法表的示意图。图3为根据HEVC所定义的包括在条带标头中的RPS语法表的示意图。图4为HEVC所定义的默认列表构建规则的示意图。图5为根据HEVC的参考图像列表修改语法示意图。图6为根据本专利技术一个实施例的图像或条带标头中的coi的实例示意图。图7为根据本专利技术一个实施例的COI与POI推导的实例示意图。图8为根据本专利技术一个实施例的用于传输参考图像列表的语法设计实例示意图。图9为根据本专利技术一个实施例的用于指示可从DP本文档来自技高网...

【技术保护点】
一种参考图像管理方法，适用于视频序列的视频编码，该参考图像管理方法包括下列步骤：接收与该视频序列的当前图像单元有关的输入数据，其中该当前图像单元对应于当前图像、该当前图像的当前条带或该当前图像的当前区域；确定该当前图像单元的一或多个参考图像，其中该一或多个参考图像使用与该一或多个参考图像的编码顺序索引有关的信息表示；利用该一或多个参考图像，将图像间编码或译码应用于该输入数据；确定未被该当前图像或后续图像参考的一或多个无效图像，其中该一或多个无效图像使用与该一或多个无效图像的编码顺序索引有关的信息表示；以及在输出该一或多个无效图像之后，将该一或多个无效图像从已译码图像缓存中移除；其中，该编码顺序索引由已编码的编码顺序索引加1表示，且其中，该已编码的编码顺序索引限制在0至MAX_COI‑1的范围且MAX_COI‑1为正整数；其中，在译码器端，该编码顺序索引由该已编码的编码顺序索引以及COI_MSB确定，其中，COI_MSB对应于该编码顺序索引的最高位部分，且其中该编码顺序索引的最高位部分超过该已编码的编码顺序索引；其中，当在该译码器端接收到该视频序列中的第一图像或刷新图像时，在该译码器端将该COI_MSB初始化为0。...

【技术特征摘要】
2012.12.13 CN PCT/CN2012/0865541.一种参考图像管理方法，适用于视频序列的视频编码，该参考图像管理方法包括下列步骤：接收与该视频序列的当前图像单元有关的输入数据，其中该当前图像单元对应于当前图像、该当前图像的当前条带或该当前图像的当前区域；确定该当前图像单元的一或多个参考图像，其中该一或多个参考图像使用与该一或多个参考图像的编码顺序索引有关的信息表示；利用该一或多个参考图像，将图像间编码或译码应用于该输入数据；确定未被该当前图像或后续图像参考的一或多个无效图像，其中该一或多个无效图像使用与该一或多个无效图像的编码顺序索引有关的信息表示；以及在输出该一或多个无效图像之后，将该一或多个无效图像从已译码图像缓存中移除；其中，该编码顺序索引由已编码的编码顺序索引加1表示，且其中，该已编码的编码顺序索引限制在0至MAX_COI-1的范围且MAX_COI-1为正整数；其中，在译码器端，该编码顺序索引由该已编码的编码顺序索引以及COI_MSB确定，其中，COI_MSB对应于该编码顺序索引的最高位部分，且其中该编码顺序索引的最高位部分超过该已编码的编码顺序索引；其中，当在该译码器端接收到该视频序列中的第一图像或刷新图像时，在该译码器端将该COI_MSB初始化为0。2.如权利要求1所述的参考图像管理方法，其特征在于，该与该编码顺序索引有关的信息包括在与该视频序列有关的比特流的条带标头或图像标头中。3.如权利要求1所述的参考图像管理方法，其特征在于，当该译码器端所接收的当前已编码的编码顺序索引小于最近已译码图像的该已编码的编码顺序索引时，将该COI_MSB增加MAX_COI。4.如权利要求1所述的参考图像管理方法，其特征在于，参考设置集合用于定义与该一或多个参考图像有关的参考图像参数。5.如权利要求4所述的参考图像管理方法，其特征在于，该参考图像参数包括Δ播放顺序索引，该Δ播放顺序索引对应于该编码顺序索引与该当前图像的播放顺序索引的差。6.如权利要求5所述的参考图像管理方法，其特征在于，在译码器端根据该编码顺序索引与该Δ播放顺序索引恢复该当前图像的播放顺序索引。7.如权利要求5所述的参考图像管理方法，其特征在于，该参考图...

【专利技术属性】
技术研发人员：张凯，安基程，余琴，马思伟，
申请(专利权)人：联发科技新加坡私人有限公司，
类型：发明
国别省市：新加坡,SG