当前位置: 首页 > 专利查询>华侨大学专利>正文

基于相似性度量的沉浸式视频质量评价方法及装置制造方法及图纸

技术编号:42503327 阅读:30 留言:0更新日期:2024-08-22 14:17
本发明专利技术公开了一种基于相似性度量的沉浸式视频质量评价方法及装置,涉及视频处理领域,为了尽可能地解决视频中所存在的冗余信息问题,首先采用随机抽样的方式筛选视频帧;然后考虑到卷积神经网络能够很好地模拟人类视觉感知过程充分捕捉从低层次到高层次的视觉信息进而提取纹理和结构特征,采用预训练的ResNet50模型进行特征提取;并考虑到人类的视觉感知系统在观看视频时不仅会受视频内容的影响还会受到记忆时间的影响,利用一个受主观启发的时间池化策略得到纹理和深度视频的质量分数;最后根据人眼视觉的偏好对纹理和深度视频质量评分进行权重调整得到最终的沉浸式视频质量分数。本发明专利技术具有较好的沉浸式视频质量评价效果。

【技术实现步骤摘要】

本专利技术涉及视频编码领域,特别涉及一种基于纹理和结构相似性度量的沉浸式视频质量评价方法及装置。


技术介绍

1、随着高速网络传输、视频采集、视频处理和显示技术的迅猛发展,以及人类对沉浸式体验需求的日益增长,沉浸式视频迎来爆发期,成为视频技术研究热点,在远程办公,智能交通、商业广播等领域广泛应用。相较于传统视频,沉浸式视频具备超广视角、高自由度、高分辨率等特性,具有极高的沉浸感和交互感。其中高自由度体现在当人观看视频时能够提供三个主轴上的平移以及三个辅助轴上的旋转运动,给用户带来一种身临其境的感觉。

2、沉浸式视频主要是采用多视点纹理加深度的视频格式,可由计算机生成或相机拍摄而成。其在视频处理过程中会受到各种失真的干扰,削弱了沉浸式场景的视觉表达效果,影响到用户的体验和降低主观感知质量。因此提出一种符合人眼视觉特性并能准确快速地对沉浸式视频的质量做出评价的算法是非常重要的。

3、现阶段大部分视频质量评价算法都主要集中在自然视频领域,但由于沉浸式视频在内容与视频格式上和自然视频都具有不同的时空特性导致了直接将自然视频相关的质量评价算法迁本文档来自技高网...

【技术保护点】

1.一种基于相似性度量的沉浸式视频质量评价方法,其特征在于,包括:

2.根据权利要求1所述的基于相似性度量的沉浸式视频质量评价方法,其特征在于,S101中,将输入的参考沉浸式视频中的纹理视频和深度视频按照每预设帧选一帧来筛选视频帧,具体包括:将输入的参考沉浸式视频中的纹理视频和深度视频按照每12帧选一帧来筛选视频帧;

3.根据权利要求1所述的基于相似性度量的沉浸式视频质量评价方法,其特征在于,S102中,采用预训练好ResNet50的模型分别对参考纹理视频帧、失真纹理视频帧、参考深度视频帧和失真深度视频帧进行多尺度特征提取,获得各视频帧的特征,具体如下:

<...

【技术特征摘要】

1.一种基于相似性度量的沉浸式视频质量评价方法,其特征在于,包括:

2.根据权利要求1所述的基于相似性度量的沉浸式视频质量评价方法,其特征在于,s101中,将输入的参考沉浸式视频中的纹理视频和深度视频按照每预设帧选一帧来筛选视频帧,具体包括:将输入的参考沉浸式视频中的纹理视频和深度视频按照每12帧选一帧来筛选视频帧;

3.根据权利要求1所述的基于相似性度量的沉浸式视频质量评价方法,其特征在于,s102中,采用预训练好resnet50的模型分别对参考纹理视频帧、失真纹理视频帧、参考深度视频帧和失真深度视频帧进行多尺度特征提取,获得各视频帧的特征,具体如下:

4...

【专利技术属性】
技术研发人员:曾焕强柯雯瑶蔡磊林琦郑惠洁曹九稳杨慰民廖昀夏至贤
申请(专利权)人:华侨大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1