System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 场景转换检测方法、装置、电子设备及存储介质制造方法及图纸_技高网

场景转换检测方法、装置、电子设备及存储介质制造方法及图纸

技术编号:40520326 阅读:9 留言:0更新日期:2024-03-01 13:38
本申请涉及一种场景转换检测方法、装置、电子设备及存储介质,所述方法包括:获取待检测视频,并确定所述待检测视频中的多个镜头转换帧;针对任一所述镜头转换帧,提取所述镜头转换帧中的高维特征;根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧。如此先检测待检测视频中的多个镜头转换帧,然后根据镜头转换帧中的高维特征,从多个镜头转换帧中检测场景转换帧,可以提高场景转换帧的检测精度,并有效区分场景转换和镜头转换。

【技术实现步骤摘要】

本申请涉及视频处理,尤其涉及一种场景转换检测方法、装置、电子设备及存储介质


技术介绍

1、qoe(quality of experience,体验质量)是现在评价网络服务质量的重要指标之一,它能够从用户的角度出发来考虑服务质量,所以更加的可靠以及人性化。而由于视频服务已经成为当今网络服务的主要组成部分,视频qoe的评估也相应的成为当今qoe研究的热点问题。影响视频qoe的因素有很多,其中一个较为受人们关注的是视频的内容类型因素,这是因为在相同的网络损伤条件下,不同的内容类型的视频qoe结果会差异很大,这使得在qoe领域中,视频内容类型的研究显得至关重要。

2、而视频的内容类型在视频的播放过程中也是不尽相同的,视频的类型变换往往发生在视频场景变换的时刻,视频的场景变换往往会导致视频的内容类型变化。在现有技术中,对于一段已经存储在服务器中的视频,可以做到根据视频的内容类型分类,并且利用场景变换检测算法对整段视频的场景变换进行检测,以期能够得到较准确的场景变换结果,来有效分析视频内容类型的变化及对视频qoe的影响。然而,目前的场景变换检测算法依赖于视频中相邻帧之间的像素信息的相似性,导致无法对场景转换和镜头转换进行有效的区分。


技术实现思路

1、为了解决上述目前的场景变换检测算法依赖于视频中相邻帧之间的像素信息的相似性,导致无法对场景转换和镜头转换进行有效的区分的技术问题,本申请提供了一种场景转换检测方法、装置、电子设备及存储介质。具体技术方案如下:

2、第一方面,本申请提供了一种场景转换检测方法,所述方法包括:

3、获取待检测视频,并确定所述待检测视频中的多个镜头转换帧;

4、针对任一所述镜头转换帧,提取所述镜头转换帧中的高维特征;

5、根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧。

6、在一个可选的实施方式中,所述确定所述待检测视频中的多个镜头转换帧,包括:

7、对所述待检测视频进行抽帧处理,得到所述待检测视频的全量帧;

8、将所述全量帧输入至镜头检测模型,获取所述镜头检测模型输出的所述全量帧中每一帧的概率,所述概率表征每一帧为镜头转换帧的概率;

9、根据所述概率,从所述全量帧中筛选出所述待检测视频中的多个镜头转换帧。

10、在一个可选的实施方式中,所述针对任一所述镜头转换帧,提取所述镜头转换帧中的高维特征,包括:

11、针对任一所述镜头转换帧,调整所述镜头转换帧的尺寸,提取调整后的所述镜头转换帧中的高维特征。

12、在一个可选的实施方式中,所述提取调整后的所述镜头转换帧中的高维特征,包括:

13、将所述调整后的所述镜头转换帧输入至clip模型,获取所述clip模型输出的高维特征,所述clip模型中的骨干网络为卷积神经网络。

14、在一个可选的实施方式中,所述根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧,包括:

15、对多个所述镜头转换帧执行以下遍历操作:

16、确定当前遍历的所述镜头转换帧,并查找当前遍历的所述镜头转换帧之后的第n个所述镜头转换帧,所述n为正整数;

17、确定第n个所述镜头转换帧的所述高维特征与所述当前遍历的所述镜头转换帧的所述高维特征之间的相似度;

18、在所述相似度小于预设相似度阈值的情况下,将第n个所述镜头转换帧确定为场景转换帧;

19、将第n个所述镜头转换帧确定为下一次遍历的镜头转换帧。

20、在一个可选的实施方式中,所述方法还包括:

21、在所述相似度未小于所述预设相似度阈值的情况下,执行n=n+1,并跳转至所述查找当前遍历的所述镜头转换帧之后的第n个所述镜头转换帧的步骤。

22、在一个可选的实施方式中,所述根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧,包括:

23、针对多个所述镜头转换帧中任一相邻的所述镜头转换帧,确定相邻的所述镜头转换帧的所述高维特征之间的相似度;

24、在所述相似度小于预设相似度阈值的情况下,将相邻的所述镜头转换帧中的后一所述镜头转换帧确定为场景转换帧。

25、第二方面,本申请提供了一种场景转换检测装置,所述装置包括:

26、视频获取模块,用于获取待检测视频;

27、转换帧确定模块,用于确定所述待检测视频中的多个镜头转换帧;

28、特征提取模块,用于针对任一所述镜头转换帧,提取所述镜头转换帧中的高维特征;

29、转换帧检测模块,用于根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧。

30、第三方面,还提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

31、存储器,用于存放计算机程序;

32、处理器,用于执行存储器上所存放的程序时,实现上述第一方面中任一所述的场景转换检测方法。

33、第四方面,还提供了一种存储介质,所述存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述第一方面中任一所述的场景转换检测方法。

34、第五方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的场景转换检测方法。

35、本申请实施例提供的上述技术方案与现有技术相比具有如下优点:本申请实施例提供的该方法,获取待检测视频,确定待检测视频中的多个镜头转换帧,针对任一镜头转换帧,提取镜头转换帧中的高维特征,根据高维特征,从多个镜头转换帧中检测场景转换帧。

36、通过确定待检测视频中的多个镜头转换帧,针对任一镜头转换帧,提取镜头转换帧中的高维特征,根据高维特征,从多个镜头转换帧中检测场景转换帧,如此先检测待检测视频中的多个镜头转换帧,然后根据镜头转换帧中的高维特征,从多个镜头转换帧中检测场景转换帧,可以提高场景转换帧的检测精度,并有效区分场景转换和镜头转换。

本文档来自技高网...

【技术保护点】

1.一种场景转换检测方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述确定所述待检测视频中的多个镜头转换帧,包括:

3.根据权利要求1所述的方法,其特征在于,所述针对任一所述镜头转换帧,提取所述镜头转换帧中的高维特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述提取调整后的所述镜头转换帧中的高维特征,包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧,包括:

6.根据权利要求5所述的方法,其特征在于,所述方法还包括:

7.根据权利要求1所述的方法,其特征在于,所述根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧,包括:

8.一种场景转换检测装置,其特征在于,所述装置包括:

9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

10.一种存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的方法。

...

【技术特征摘要】

1.一种场景转换检测方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述确定所述待检测视频中的多个镜头转换帧,包括:

3.根据权利要求1所述的方法,其特征在于,所述针对任一所述镜头转换帧,提取所述镜头转换帧中的高维特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述提取调整后的所述镜头转换帧中的高维特征,包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述高维特征,从多个所述镜头转换帧中检测场景转换帧,包括:

【专利技术属性】
技术研发人员:尹天舒
申请(专利权)人:北京奇艺世纪科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1