System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及视频播放,更具体地涉及一种视频播放方法、电子设备和计算机可读介质。
技术介绍
1、目前需要在播放视频的同时叠加显示人脸跟踪框等目标信息时,所采用的方式主要包括以下几种:
2、1、通过嵌入浏览器的插件进行视频画面显示和目标信息的绘制,该方式只支持具备ie引擎的浏览器,不能在chrome引擎下的浏览器中使用,通用性差;
3、2、浏览器使用webassembly进行软解码,解码后进行视频画面的显示和目标信息的绘制,该方式资源消耗大,且实时性差;
4、3、浏览器将接收到的h264格式的视频数据封装成fragment mp4,使用扩展mse的video标签进行视频播放,该方式只适用于h264视频编码格式;
5、4、基于后台服务进行视频解码和叠加目标信息,然后进行编码和封装并发送给浏览器,浏览器基于video标签进行视频播放,该方式需要对视频流进行二次处理,造成了资源消耗和播放延迟的问题。
技术实现思路
1、在
技术实现思路
部分中引入了一系列简化形式的概念,这将在具体实施方式部分中进一步详细说明。本专利技术的
技术实现思路
部分并不意味着要试图限定出所要求保护的技术方案的关键特征和必要技术特征,更不意味着试图确定所要求保护的技术方案的保护范围。
2、根据本专利技术一方面,提供了一种视频播放方法,用于视频播放组件,所述方法包括:
3、从浏览器获取播放请求信息,所述播放请求信息至少包括待播放视频的视频流地址和目标信息集
4、根据所述视频流地址获取视频流,以及根据所述目标信息集地址获取多个目标信息集,每个所述目标信息集包含时间戳和所述视频流中目标对象的信息;
5、对所述视频流进行视频解码,以得到多个视频帧;
6、根据所述视频帧的时间戳和所述目标信息集的时间戳,选取时间匹配的视频帧和目标信息集;
7、将所述时间匹配的视频帧和目标信息集发送至所述浏览器,以使所述浏览器对所述时间匹配的视频帧和目标信息集进行叠加显示。
8、在一些实施例中,在选取时间匹配的视频帧和目标信息集之前,所述方法还包括:
9、判断所述目标信息集是否满足数据扩充条件;
10、当所述目标信息集满足数据扩充条件时,根据相邻两个目标信息集生成新的目标信息集,以对所述目标信息集进行数据扩充。
11、在一些实施例中,所述目标信息集是对所述视频流中的目标信息帧进行目标识别得到的,所述目标信息集的频率与所述目标信息帧的帧率相对应;
12、所述数据扩充条件包括:所述目标信息集的频率小于所述视频帧的帧率。
13、在一些实施例中,所述数据扩充条件还包括:当前目标信息集的时间戳与前一个目标信息集的时间戳之间的差异小于第一目标阈值。
14、在一些实施例中,所述根据所述视频帧的时间戳和所述目标信息集的时间戳,选取时间匹配的视频帧和目标信息集,包括:
15、获取视频帧队列头部的视频帧的第一时间戳,所述视频帧队列中包括按照时间戳先后顺序排列的多个视频帧;
16、根据所述第一时间戳,在多个目标信息集查找与所述视频帧队列头部的视频帧时间匹配的目标信息集,所述与所述视频帧队列头部的视频帧时间匹配的目标信息集具有第二时间戳,所述第二时间戳与所述第一时间戳之间的差异小于第二目标阈值。
17、在一些实施例中,所述从浏览器获取播放请求信息,包括:
18、与所述浏览器进行websocket通信,通过所述websocket通信获取所述播放请求信息;
19、所述将所述时间匹配的视频帧和目标信息集发送至所述浏览器包括通过所述websocket通信向浏览器发送所述时间匹配的视频帧和目标信息集。
20、在一些实施例中,所述方法还包括:从所述浏览器获取控制指令,基于所述控制指令开始或停止向所述浏览器发送所述时间匹配的视频帧和目标信息集。
21、本专利技术实施例第二方面提供一种电子设备,所述电子设备包括存储器和处理器,所述存储器上存储有由所述处理器运行的计算机程序,所述计算机程序在被所述处理器运行时执行如上所述的视频播放方法。
22、本专利技术实施例第三方面提供一种计算机可读介质,所述计算机可读介质上存储有计算机程序,所述计算机程序在运行时执行如上所述的视频播放方法。
23、本专利技术实施例第四方面提供一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现如上所述的视频播放方法。
24、根据本专利技术实施例的视频播放方法、电子设备、计算机可读介质和计算机程序产品对获取到的视频流进行视频解码以及对视频帧和目标信息集进行匹配,之后将时间匹配的视频帧和目标信息集返回给浏览器进行叠加播放,不依赖于插件、webassembly、video标签或后台服务,能够提高浏览器通用性和视频流兼容性,提高视频播放的实时性,减少资源消耗。
本文档来自技高网...【技术保护点】
1.一种视频播放方法,用于视频播放组件,其特征在于,所述视频播放方法包括:
2.根据权利要求1所述的视频播放方法,其特征在于,在选取时间匹配的视频帧和目标信息集之前,所述方法还包括:
3.根据权利要求2所述的视频播放方法,其特征在于,所述目标信息集是对所述视频流中的目标信息帧进行目标识别得到的,所述目标信息集的频率与所述目标信息帧的帧率相对应;
4.根据权利要求2或3所述的视频播放方法,其特征在于,所述数据扩充条件还包括:当前目标信息集的时间戳与前一个目标信息集的时间戳之间的差异小于第一目标阈值。
5.根据权利要求1所述的视频播放方法,其特征在于,所述根据所述视频帧的时间戳和所述目标信息集的时间戳,选取时间匹配的视频帧和目标信息集,包括:
6.根据权利要求1所述的视频播放方法,其特征在于,所述从浏览器获取播放请求信息,包括:
7.根据权利要求1所述的视频播放方法,其特征在于,所述方法还包括:
8.一种电子设备,其特征在于,所述电子设备包括存储器和处理器,所述存储器上存储有由所述处理器运行的计算机程
9.一种计算机可读介质,其特征在于,所述计算机可读介质上存储有计算机程序,所述计算机程序在运行时执行如权利要求1-7中的任一项所述的视频播放方法。
10.一种计算机程序产品,包括计算机程序/指令,其特征在于,该计算机程序/指令被处理器执行时实现权利要求1-7中的任一项所述的视频播放方法。
...【技术特征摘要】
1.一种视频播放方法,用于视频播放组件,其特征在于,所述视频播放方法包括:
2.根据权利要求1所述的视频播放方法,其特征在于,在选取时间匹配的视频帧和目标信息集之前,所述方法还包括:
3.根据权利要求2所述的视频播放方法,其特征在于,所述目标信息集是对所述视频流中的目标信息帧进行目标识别得到的,所述目标信息集的频率与所述目标信息帧的帧率相对应;
4.根据权利要求2或3所述的视频播放方法,其特征在于,所述数据扩充条件还包括:当前目标信息集的时间戳与前一个目标信息集的时间戳之间的差异小于第一目标阈值。
5.根据权利要求1所述的视频播放方法,其特征在于,所述根据所述视频帧的时间戳和所述目标信息集的时间戳,选取时间匹配的视频帧和目标信息集,包括:
【专利技术属性】
技术研发人员:王志超,
申请(专利权)人:北京旷视科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。