【技术实现步骤摘要】
【国外来华专利技术】优先权声明本申请要求于2014年4月15提交的题为“FALLBACK DETECTION IN MOTION ESTIMATION(运动估计中的回退检测)”的美国专利申请序号14/252,944的优先权,该美国专利申请以其全部内容通过引用结合在此。
技术介绍
对视频序列的运动估计是如帧率上变频(FRC)和视频压缩等视频处理技术中的重要组成部分。例如,帧率上变频可以在视频序列中提供附加的帧(例如,被添加于现有帧之间的帧)以提高视频质量。例如,帧率上变频可以用于在视频序列中改进平滑度以及去除颤动(例如,电影电视颤动)。视频压缩可以用于减小用于存储在存储器中或传输至另一个设备等的视频数据的大小。例如,可以部分地通过使用运动估计和运动压缩技术对帧进行预测来压缩视频序列,以便在设备(具体为手持式设备)中使用更少的存储器或者以在通信介质上使用更少的带宽。然而,FRC和视频压缩可能在使用运动估计和运动压缩技术生成或压缩的帧中引起令人讨厌的伪像。这种伪像会使用户在视频播放过程中的体验降级。伪像可以包括例如方块伪像、边缘或边界伪像或者噪声等。这种伪像可能在特定的视频环境中更加流行,如,在场景变化过程中、当没有或极少运动存在时、在快速运动场景过程中、或在视觉上复杂的场景中。由此,当应用运动估计和/或运动压缩时,现有技术并不提供高质量、无伪像的视频序列。随着视频处理和播放在广泛的设备中变得更加流行,这种问题可能变得关键。附图说明在附图中通过举例而非限制的方式展示了在此所描述的材料。为了展示的简单和清楚,图中所展示的元件不一定按比例绘制。例如,为清楚起见,某些元件的尺寸相对于其他元件可 ...
【技术保护点】
一种用于在视频处理中管理运动估计的计算机实现的方法,所述方法包括:将视频序列的第一视频帧划分为第一区域并且将所述视频序列的第二视频帧划分为与所述第一区域相对应的第二区域;生成多个相平面相关性,其中,所述多个相平面相关性中的每个相平面相关性基于相应的一对第一区域和第二区域;至少部分地基于所述多个相平面相关性判定所述第一视频帧与所述第二视频帧是否为运动估计相关;以及至少部分地基于所述判定提供视频帧预测模式指示符。
【技术特征摘要】
【国外来华专利技术】2014.04.15 US 14/252,9441.一种用于在视频处理中管理运动估计的计算机实现的方法,所述方法包括:将视频序列的第一视频帧划分为第一区域并且将所述视频序列的第二视频帧划分为与所述第一区域相对应的第二区域;生成多个相平面相关性,其中,所述多个相平面相关性中的每个相平面相关性基于相应的一对第一区域和第二区域;至少部分地基于所述多个相平面相关性判定所述第一视频帧与所述第二视频帧是否为运动估计相关;以及至少部分地基于所述判定提供视频帧预测模式指示符。2.如权利要求1所述的方法,其中,判定所述第一视频帧与所述第二视频帧是否为运动估计相关包括:评估在所述多个相平面相关性中的一个或多个峰值。3.如权利要求1所述的方法,进一步包括在生成所述多个相平面相关性之前:缩小所述第一区域和所述第二区域的尺寸。4.如权利要求1所述的方法,其中,判定所述第一视频帧与所述第二视频帧是否为运动估计相关包括基于以下中的至少一者判定所述相平面相关性中的一个或多个相平面相关性是否指示强相关性或弱相关性:所述第一相平面相关性的最大峰值与所述第一相平面相关性的平均值之差同第一阈值的比较;或者所述第一相平面相关性的所述最大峰值与所述第一相平面相关性的第二大峰值之差同第二阈值的比较。5.如权利要求1所述的方法,其中,所述第一区域和所述第二区域包括全局区域,其中,当所述多个相平面相关性中的每个相平面相关性指示弱相关性时,确定所述第一视频帧与所述第二视频帧为非运动估计相关,并且其中,针对所述多个相平面相关性中的第一相平面相关性的第一弱相关性是基于以下中的至少一者确定的:所述第一相平面相关性的最大峰值与所述第一相平面相关性的平均值之差同第一阈值的比较;或者所述第一相平面相关性的所述最大峰值与所述第一相平面相关性的第二大峰值之差同第二阈值的比较。6.如权利要求1所述的方法,其中,所述第一区域和所述第二区域包括全局区域,其中,当所述多个相平面相关性中的任一个相平面相关性指示快速运动时,确定所述第一视频帧与所述第二视频帧为非运动估计相关,并且其中,针对所述多个相平面相关性中的第一相平面相关性的第一快速运动是基于与所述第一相平面相关性的最大峰值相关联的运动向量同阈值的比较确定的。7.如权利要求1所述的方法,其中,所述第一区域和所述第二区域包括局部区域,并且其中,判定所述第一视频帧与所述第二视频帧是否为运动估计相关是基于指示弱相关性的所述多个局部相平面相关性的数量与阈值的比较。8.如权利要求7所述的方法,其中,所述阈值至少部分地基于所述第一视频帧与所述第二视频帧是否为运动估计相关而是自适应的。9.如权利要求8所述的方法,其中,所述帧预测模式指示符包括回退模式并且所述阈值在第一值处,其中,指示弱相关性的所述多个全局相平面相关性与所述多个局部相平面相关性的总数小于所述阈值,所述方法进一步包括:将所述帧预测模式指示符设置为运动估计模式;以及将所述阈值从所述第一值增加至比所述第一值大的第二值。10.如权利要求1所述的方法,其中,所述第一区域和所述第二区域包括全局区域,并且其中,所述多个相平面相关性包括全局相平面相关性,所述方法进一步包括:将所述第一视频帧划分为第三区域并且将所述第二视频帧划分为与所述第三区域相对应的第四区域,其中,第一区域少于第三区域;以及生成多个局部相平面相关性,其中,所述多个局部相平面相关性中的每个局部相平面相关性基于相应的一对第三区域和第四区域,其中,判定所述第一视频帧与所述第二视频帧是否为运动估计兼容是至少部分地基于所述多个局部相平面相关性。11.如权利要求10所述的方法,其中,基于与所述多个全局相平面相关性和所述多个局部相平面相关性中的每一个的每个最大峰值相关联的每个运动向量同阈值的比较来确定所述第一视频帧与所述第二视频帧为非运动估计相关。12.如权利要求1所述的方法,进一步包括:基于判定所述第一视频帧与所述第二视频帧是否为运动估计相关来确定回退类型指示符,其中,所述回退类型指示符包括以下各项中的至少一项:无回退指示符、场景变化指示符、无动作指示符、快速运动指示符或困难场景指示符,其中,提供所述帧预测模式指示符至少部分地基于所述回退类型指示符。13.如权利要求12所述的方法,进一步包括:至少部分地基于所述回退类型指示符和前一个回退计数器值来确定当前回退计数器值,其中:如果所述回退类型指示符是所述场景变化指示符,则所述当前回退计数器值被重置为零,如果所述回退类型指示符是所述无回退指示符,则所述当前回退计数器值是相对于所述前一个回退计数器值确定的,并且如果所述回退类型指示符是所述无运动指示符、所述快速运动指示符或所述困难场景指示符中的任一项,则所述当前回退计数器值相对于所述前一个回退计数器值增大,以及基于所述当前回退计数器值确定所述帧预测模式指示符,其中:如果所述回退计数器在第一阈值处,则所述帧预测模式指示符被设置为回退模式,如果所述回退计数器在小于所述第一阈值的第二阈值处,则所述帧预测模式指示符被设置为运动估计模式,并且如果所述回退计数器在所述第一阈值与所述第二阈值之间,则所述帧预测模式指示符不变。14.如权利要求1所述的方法,其中,确定所述多个相平面相关性中的个体相平面相关性包括:对个体第一区域和相应的第二区域应用离散傅立叶变换;确定所述经变换的个体第一区域与所述经变换的相应的第二区域之间的互功率谱;对所述互功率谱应用离散傅立叶逆变换;以及对所述经逆变换的互功...
【专利技术属性】
技术研发人员:V·科瓦塞维奇,Z·潘迪奇,A·贝里克,M·马尔克维奇,V·伊里奇,
申请(专利权)人:英特尔公司,
类型:发明
国别省市:美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。