视频质量评估的方法、装置、电子设备及存储介质制造方法及图纸

本申请实施例公开了视频质量评估的方法、装置、电子设备及存储介质，涉及图像处理技术领域。其中方法包括：对待评视频的各个视频帧进行图像质量客观评估，得到待评视频的各个视频帧的客观评估指标值；以及，根据参考视频的各个视频帧的空间感知信息和时间感知信息，确定参考视频的各个视频帧的权重；根据待评视频的各个视频帧的客观评估指标值和参考视频的各个视频帧的权重，确定待评视频的质量值；其中，待评视频为对参考视频进行处理后得到的视频。本申请实施例能够提高视频质量评估的准确度。

【技术实现步骤摘要】
视频质量评估的方法、装置、电子设备及存储介质
本申请涉及图像处理领域，尤其涉及视频质量评估领域。
技术介绍
近年来，视频用户呈现爆发式增长，视频类应用程序层出不穷。因此，准确评估视频质量，提升用户的观看体验，成为视频行业从业者重点关注的领域。目前普遍采用的视频质量评估方案为对视频逐帧计算客观评估指标值，通过均值法来对视频进行客观评估，即逐帧累加求平均以评估视频质量。但是现有的评估方案所得到的结果往往无法和人眼看到的视觉品质完全一致，有可能质量分数较高的视频看起来反而比质量分数较低的视频差。
技术实现思路
为了解决现有技术中至少一个问题，本申请实施例提供一种视频质量评估的方法、装置、电子设备及存储介质。第一方面，本申请实施例提供一种视频质量评估的方法，包括：对待评视频的各个视频帧进行图像质量客观评估，得到待评视频的各个视频帧的客观评估指标值；以及，根据参考视频的各个视频帧的空间感知信息和时间感知信息，确定参考视频的各个视频帧的权重；根据待评视频的各个视频帧的客观评估指标值和参考视频的各个视频帧的权重，确定待评视频的质量值；其中，待评视频为对参考视频进行处理后得到的视频。第二方面，本申请实施例提供一种视频质量评估的装置，包括：评估及权重确定模块，用于对待评视频的各个视频帧进行图像质量客观评估，得到待评视频的各个视频帧的客观评估指标值；以及根据参考视频的各个视频帧的空间感知信息和时间感知信息，确定参考视频的各个视频帧的权重；其中，待评视频为对参考视频进行处理后得到的视频；质量确定模块，用于根据待评视频的各个视频帧的客观评估指标值和参考视频的各个视频帧的权重，确定待评视频的质量值。第三方面，本申请实施例提出一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行第一方面中任一项的方法。第四方面，本申请实施例提出一种存储有计算机指令的非瞬时计算机可读存储介质，计算机指令用于使计算机执行第一方面中任一的方法。上述申请中的一个实施例具有如下优点或有益效果：本申请实施例在基于各个视频帧的客观评估指标值计算待评视频的质量值时，引入各个视频帧由空间感知信息和时间感知信息所确定的权重值进行加权，考虑了不同帧之间的差异性对视频评估结果的影响，使得质量评估结果更加贴近人眼视觉对视频质量的评估，提高视频质量评估的准确性。上述可选方式所具有的其他效果将在下文中结合具体实施例加以说明。附图说明附图用于更好地理解本方案，不构成对本申请的限定。其中：图1是根据本申请实施例的一种视频质量评估的方法的流程图一；图2是根据本申请实施例的一种视频质量评估的方法的流程框图；图3是根据本申请实施例的一种视频质量评估的方法的流程图二；图4是根据本申请实施例的PSNR变化曲线的示例图；图5是根据本申请实施例的SI变化曲线和TI变化曲线的示例图；图6是根据本申请实施例的加权前后的PSNR变化曲线的示例图；图7是根据本申请实施例的视频质量评估装置的结构示意图一；图8是根据本申请实施例的视频质量评估装置的结构示意图二；图9为用来实现本申请实施例的视频质量评估的方法的电子设备的框图。具体实施方式以下结合附图对本申请的示范性实施例做出说明，其中包括本申请实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本申请的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。本申请实施例提供一种视频质量评估的方法，参见图1，图1是视频质量评估的方法的流程图，该方法包括下述步骤：S101、对待评视频的各个视频帧进行图像质量客观评估，得到待评视频的各个视频帧的客观评估指标值；以及，根据参考视频的各个视频帧的空间感知信息和时间感知信息，确定参考视频的各个视频帧的权重；S102、根据待评视频的各个视频帧的客观评估指标值和参考视频的各个视频帧的权重，确定待评视频的质量值；其中，待评视频为对参考视频进行处理后得到的视频。此方法适用于处理前后帧率(例如，帧率以fps为单位)和分辨率保持不变的处理场景。对待评视频的处理方式可以包括压缩、格式转换和模糊处理中的至少一种。空间感知信息(SpatialperceptualInformation，SI)可以表征图像的空间细节量；图像的空间细节越复杂，图像的SI值越高。时间感知信息(TI，TemporalperceptualInformation)表征图像的时间变化量，图像的运动程度较高，图像的TI值越高。本申请实施例在基于各个视频帧的客观评估指标值计算待评视频的质量值时，引入各个视频帧由空间感知信息和时间感知信息所确定的权重值，提高了对不同帧之间的差异性的重视，使得质量评估结果更加贴近人眼视觉对视频品质的评估，提高视频质量评估的准确性。参见图2，图2给出了本申请实施例如何进行视频质量评估的流程。首先，将参考视频X和待评视频Y分别解析为M帧视频帧；然后，基于参考视频X的M帧视频帧，计算SI时间序列(SI1，SI2，……，SIM)和TI时间序列(TI1，TI2，……，TIM)，利用SI时间序列和TI时间序列计算帧维度权重；以及，确定待评视频Y的帧维度客观评估指标值；最后，利用帧维度权重加权帧维度客观评估指标值，计算最终的待评视频的质量值Qx,y。在一种实施方式中，步骤S101可以采用全参考的图像质量评估方法评估各个视频帧。对应的，对待评视频的各个视频帧进行图像质量客观评估，得到待评视频的各个视频帧的客观评估指标值，包括：采用预设的客观指标，计算待评视频的各个视频帧和参考视频对应的视频帧的相似程度，得到待评视频的各个视频帧的客观评估指标值。通过上述方式，将待评视频处理前的视频作为参考视频，计算待评视频的视频帧和参考视频的对应帧的相似程度，可以衡量视频帧图像失真或噪声水平，因此该相似程度可以有效体现图像质量结果。在一种实施方式中，预设的客观指标为结构相似性(structuralsimilarityindex，SSIM)、多尺度结构相似性(Multiple-scalestructuralsimilarityindex，MS-SSIM)或峰值信噪比(PeakSignaltoNoiseRatio，PSNR)。上述实施方式中所采用的客观指标，便于计算，并且能够较大程度反映图像质量。一般情况下，客观指标的值高的图像质量相对较高。在一种实施方式中，参见图3，参考视频的视频帧的空间感知信息的确定方式，包括：S301、采用滤波器对参考视频的视频帧进行滤波，得到滤波后的视频帧；可选地，滤波器为索贝尔(sobel)滤波器。...

【技术保护点】
1.一种视频质量评估的方法，其特征在于，包括：/n对待评视频的各个视频帧进行图像质量客观评估，得到所述待评视频的各个视频帧的客观评估指标值；以及，根据参考视频的各个视频帧的空间感知信息和时间感知信息，确定所述参考视频的各个视频帧的权重；/n根据所述待评视频的各个视频帧的客观评估指标值和所述参考视频的各个视频帧的权重，确定所述待评视频的质量值；/n其中，所述待评视频为对所述参考视频进行处理后得到的视频。/n

【技术特征摘要】
1.一种视频质量评估的方法，其特征在于，包括：
对待评视频的各个视频帧进行图像质量客观评估，得到所述待评视频的各个视频帧的客观评估指标值；以及，根据参考视频的各个视频帧的空间感知信息和时间感知信息，确定所述参考视频的各个视频帧的权重；
根据所述待评视频的各个视频帧的客观评估指标值和所述参考视频的各个视频帧的权重，确定所述待评视频的质量值；
其中，所述待评视频为对所述参考视频进行处理后得到的视频。


2.根据权利要求1所述的方法，其特征在于，所述参考视频的视频帧的空间感知信息的确定方式，包括：
采用滤波器对所述参考视频的视频帧进行滤波，得到滤波后的视频帧；
计算所述滤波后的视频帧中像素的亮度或灰度的标准差，得到所述参考视频的视频帧的空间感知信息。


3.根据权利要求1所述的方法，其特征在于，所述参考视频的视频帧的时间感知信息的确定方式，包括：
计算所述参考视频的视频帧与前一个视频帧的相同位置上像素的亮度或灰度的差值的标准差，得到所述参考视频的视频帧的时间感知信息。


4.根据权利要求1所述的方法，其特征在于，所述根据参考视频的各个视频帧的空间感知信息和时间感知信息，确定所述参考视频的各个视频帧的权重，包括：
获取所述空间感知信息对应的第一比重调整值和所述时间感知信息对应的第二比重调整值；
根据所述第一比重调整值、所述第二比重调整值以及所述参考视频的各个视频帧的空间感知信息和时间感知信息，确定所述参考视频的各个视频帧的权重。


5.根据权利要求4所述的方法，其特征在于，所述根据所述第一比重调整值、所述第二比重调整值以及所述参考视频的各个视频帧的空间感知信息和时间感知信息，确定所述参考视频的各个视频帧的权重，包括：
计算所述参考视频的各个视频帧的空间感知信息占所述参考视频的所有视频帧的空间感知信息总和的第一比重，以及计算所述参考视频的各个视频帧的时间感知信息占所述参考视频的各个视频帧的时间感知信息总和的第二比重；
根据所述第一比重调整值、所述第二比重调整值以及所述参考视频的各个视频帧的第一比重和第二比重，确定所述参考视频的各个视频帧的权重。


6.根据权利要求1所述的方法，其特征在于，所述对待评视频的各个视频帧进行图像质量客观评估，得到所述待评视频的各个视频帧的客观评估指标值，包括：
采用预设的客观指标，计算所述待...

【专利技术属性】
技术研发人员：王伟，刘一卓，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：北京;11