改进的屏幕内容编码方法技术

技术编号:15189186 阅读:281 留言:0更新日期:2017-04-19 17:26
屏幕内容编码包括确定一个或多个先前已编码帧中的对应区域以对当前帧中的不变区域编码。通过从一个先前已编码帧或若干先前已编码帧中复制对应区域,对当前帧中的不变区域编码。在编码比特流中标识应用于所述不变区域的复制模式使用。可为每个不变区域标识所述复制模式,或者为一组不变区域标识一个复制模式。在无需进一步标识所述复制模式的情况下,将所述复制模式自动应用到与所述一组不变区域邻接的一个或多个不变区域。从所述先前已编码帧中复制所述对应区域包括从所述先前已编码帧中复制调色板项。根据出现频率重排序从所述先前已编码帧中复制的调色板项。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术大体上涉及高效率视频编码中的屏幕内容编码。
技术介绍
随着近来基于云的业务的增长以及智能手机、平板电脑等移动设备取代传统计算机,出现了新的场景,其中计算机产生的内容,或者屏幕内容(screencontent,SC)在一个设备上生成但在另一个设备上显示。一种可能场景是:应用在远程服务器上运行,而显示输出在用户的本地工作站上显示。另一种场景是:将智能手机或者平板电脑屏幕复制到电视设备屏幕,目的可以是在大屏幕上而不是在小的移动设备屏幕上观看电影。这些场景伴随着对SC有效传输的需求,SC应该能够表示具有足够视觉质量的SC视频同时能够观测现有传输系统的数据速率限制。针对这种挑战的合适方案可以是使用视频编码技术来压缩SC。在过去几十年里已经充分研究了这些视频编码技术(参见[1].D.Salomon和G.Motta,HandbookofDataCompression,第五版,伦敦:施普林格,2010年),并得出一些常用的视频编码标准,比如:MPEG-2(参见[2].ISO/IEC13818-2,Genericcodingofmovingpicturesandassociatedaudioinformation—第二部分:Video/ITU-TRecommendationH.262,1994年;[3].B.G.Haskell,A.Puri和A.N.Netravali,DigitalVideo:AnIntroductiontoMPEG-2,纽约:查普曼与霍尔,1997年);MPEG-4(参见[4].ISO/IEC14496:MPEG-4Codingofaudio-visualobjects;[5].F.Pereira和T.Ebrahimi,TheMPEG-4book,上萨德尔里弗,新泽西,美国:普伦蒂斯霍尔出版社PTR,2002年;[6].A.Puri和T.Chen,MultimediaSystems,Standards,andNetworks,纽约:马塞尔·德克尔公司,2000);以及高级视频编码(advancedvideocoding,AVC)(参见[7].ISO/IEC14496-10,CodingofAudiovisualObjects—第10部分:AdvancedVideoCoding/ITU-TRecommendationH.264Advancedvideocodingforgenericaudiovisualservices,2003年)。近来,运动图像专家组(MovingPicturesExpertGroup,MPEG)和视频编码专家组(VideoCodingExpertsGroup,VCEG)的视频编码联合小组(JointCollaborativeTeamonVideoCoding,JCT-VC)开发了AVC的后继标准,称为高效率视频编码(HighEfficiencyVideoCoding,HEVC)(参见[8].ITU-TRecommendationH.265/ISO/IEC23008-2:2013MPEG-H第二部分:HighEfficiencyVideoCoding(HEVC),2013年)。HEVC与AVC基于相同的混合视频编码概念,但是通过改进现有编码工具和增加新编码工具实现的压缩性能是前任标准的两倍(参见[9].P.Hanhart,M.Rerabek,F.DeSimone和T.Ebrahimi,SPIE光工程和应用中的“SubjectivequalityevaluationoftheupcomingHEVCvideocompressionstandard”,2012年,p.84990V)。然而,已经开发HEVC用来压缩普通内容(naturalcontent,NC),即摄像机捕获的内容。结果是HEVC为NC提供高品质压缩性能,但有可能不是压缩SC的最佳方案。因此,在最终确定HEVC版本1之后,JCT-VC在2014年1月发起一个号召,建议研究屏幕内容编码(ScreenContentCoding,SCC)。响应于该号召,提供了具体针对SC设计的更复杂压缩方法(参见[10].Chen,Y.Chen,T.Hsieh,R.Joshi,M.Karczewicz,W.-S.Kim,X.Li,C.Pang,W.Pu,K.Rapaka,J.Sole,L.Zhang和F.Zou,JCT-VCQ0031:DescriptionofscreencontentcodingtechnologyproposalbyQualcomm,ITU-TSG16WP3和ISO/IECJTC1/SC29/WG11的视频编码联组(JCT-VC)第17届会议,瓦伦西亚,ES,2014年3月27日至4月4日;[11].C.-C.Chen,T.-S.Chang,R.-L.Liao,C.-W.Kuo,W.-H.Peng,H.-M.Hang,Y.-J.Chang,C.-H.Hung,C.-C.Lin,J.-S.Tu,K.Erh-Chung,J.-Y.Kao,C.-L.Lin和F.-D.Jou,JCT-VCQ0032:DescriptionofscreencontentcodingtechnologyproposalbyNCTUandITRIInternational,ITU-TSG16WP3和ISO/IECJTC1/SC29/WG11的视频编码联组(JCT-VC)第17届会议,瓦伦西亚,ES,2014年3月27日至4月4日;[12].P.Lai,T.-D.Chuang,Y.-C.Sun,X.Xu,J.Ye,S.-T.Hsiang,Y.-W.Chen,K.Zhang,X.Zhang,S.Liu,Y.-W.Huang和S.Lei,JCT-VCQ0033:DescriptionofscreencontentcodingtechnologyproposalbyMediaTek,ITU-TSG16WP3和ISO/IECJTC1/SC29/WG11的视频编码联组(JCT-VC)第17届会议,瓦伦西亚,ES,2014年3月27日至4月4日;[13].Z.Ma,W.Wang,M.Xu,X.Wang和H.Yu,JCT-VCQ0034:DescriptionofscreencontentcodingtechnologyproposalbyHuawei,ITU-TSG16WP3和ISO/IECJTC1/SC29/WG11的视频编码联组(JCT-VC)第17届会议,瓦伦西亚,ES,2014年3月27日至4月4日;以及[14].B.Li,J.Xu,F.Wu,X.Guo和G.J.Sullivan,JCT-VCQ0035:DescriptionofscreencontentcodingtechnologyproposalbyMicrosoft,ITU-TSG16WP3和ISO/IECJTC1/SC29/WG11的视频编码联组(JCT-VC)第17届会议,瓦伦西亚,ES,2014年3月27日至4月4日)。图1A和图1B所示为包含屏幕内容和普通内容的屏幕显示的示例。值得说明的是,NC和SC视频可具有在边缘锐度本文档来自技高网...
改进的屏幕内容编码方法

【技术保护点】
一种用于屏幕内容编码的方法,其特征在于,包括:在一个或多个先前已编码帧中确定对应于当前帧中的不变区域的区域,以对所述当前帧中的所述不变区域编码,其中,通过从一个先前已编码帧或若干先前已编码帧中复制所述已识别对应区域对所述当前帧中的所述不变区域编码;以及标识复制模式使用以应用于所述当前帧中的所述不变区域。

【技术特征摘要】
【国外来华专利技术】2014.03.13 US 61/952,158;2014.10.06 US 62/060,4321.一种用于屏幕内容编码的方法,其特征在于,包括:在一个或多个先前已编码帧中确定对应于当前帧中的不变区域的区域,以对所述当前帧中的所述不变区域编码,其中,通过从一个先前已编码帧或若干先前已编码帧中复制所述已识别对应区域对所述当前帧中的所述不变区域编码;以及标识复制模式使用以应用于所述当前帧中的所述不变区域。2.根据权利要求1所述的方法,其特征在于,还包括:选择先前已编码帧作为参考图像,其中,所述参考图像中的所述对应区域与所述当前帧中的所述不变区域位于相同位置。3.根据权利要求1所述的方法,其特征在于,为所述当前帧中的每个不变区域标识所述复制模式。4.根据权利要求1所述的方法,其特征在于,为一组不变区域标识一个复制模式。5.根据权利要求4所述的方法,其特征在于,所述复制模式包括持续长度值,所述持续长度值确定应用了所述复制模式的不变区域的数目。6.根据权利要求4所述的方法,其特征在于,还包括:在无需进一步标识所述复制模式的情况下,将所述复制模式自动应用到与所述一组不变区域邻接的一个或多个不变区域。7.根据权利要求1所述的方法,其特征在于,还包括:基于前一帧的所述复制模式使用,标识所述当前帧的所述复制模式使用。8.根据权利要求1所述的方法,其特征在于,所述不变区域包含整个所述当前帧,所述标识确定所述复制模式使用的连续帧的数目。9.一种非瞬时性计算机可读介质,其特征在于,包括用于屏幕内容编码的代码,所述代码在执行时可用于:在一个或多个先前已编码帧中确定当前帧中的不变区域对应的区域,以对所述当前帧中的不变区域编码,其中,通过从一个先前已编码帧或若干先前已编码帧中复制所述确定的对应区域,对所述当前帧中的不变区域编码;以及标识复制模式使用以应用到所述当前帧中的所述不变区域。10.根据权利要求9所述的非瞬时性计算机可读介质,其特征在于,所述代码还可用于:选择先前已编码帧作为参考图像,其中,所述参考图像中的所述对应区域与所述当前帧中的所述不变区域位于相同位置。11.根据权利要求9所述的非瞬时性计算机介质,其特征在于,为所述当前帧中的每个不变区域标识所述复制模式。12.根据权利要求9所述...

【专利技术属性】
技术研发人员:索斯藤·罗德约恩·奥斯特曼马可·莫德兰于浩平
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1