System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 视频解析方法、装置和存储介质制造方法及图纸_技高网

视频解析方法、装置和存储介质制造方法及图纸

技术编号:40601909 阅读:5 留言:0更新日期:2024-03-12 22:06
本申请涉及一种视频解析方法、装置和存储介质。该方法包括:处理器获取视频数据;获取一个或多个视频解析卡的执行引擎状态信息;处理器根据视频数据和执行引擎状态信息,生成数据流信息,数据流信息包括插件实例的调用顺序和视频数据;处理器根据插件实例的调用顺序,将数据流信息发送至视频解析卡;视频解析卡根据插件实例的调用顺序,通过插件实例调用相应的执行引擎对视频数据进行处理,得到视频解析结果。根据本申请实施例,可以提高各视频解析卡上的硬件资源的利用率,灵活、充分地利用不同视频解析卡上的硬件资源,提高了视频解析的效率。

【技术实现步骤摘要】

本申请涉及人工智能,尤其涉及一种视频解析方法、装置和存储介质


技术介绍

1、随着人工智能(artificial intelligence,ai)技术的不断发展,也推动了视频智能分析的飞速发展。由于现代智慧城市对数据所反应的内容要求越来越高,要求我们对这些视频数据做更加完善的规整和分析。当前通常是利用视频解析卡等来对视频数据进行处理。

2、然而,在大规模视频解析中可能会涉及混合业务流的场景,当前技术手段中通常是对视频解析卡的硬件资源进行虚拟化算力切分以适应该场景,这种方式无法充分地利用视频解析卡上的硬件资源。因此,亟需新型的视频解析方法以更加高效地利用底层硬件资源对视频数据进行解析,提高视频解析效率。


技术实现思路

1、有鉴于此,提出了一种视频解析方法、装置和存储介质。

2、第一方面,本申请的实施例提供了一种视频解析方法。该方法包括:

3、获取视频数据;

4、获取一个或多个视频解析卡的执行引擎状态信息;

5、根据视频数据和执行引擎状态信息,生成数据流信息,数据流信息包括插件实例的调用顺序和视频数据;

6、根据插件实例的调用顺序,将数据流信息发送至视频解析卡,数据流信息用于视频解析卡根据插件实例的调用顺序,通过插件实例调用相应的执行引擎对视频数据进行处理,得到视频解析结果。

7、根据本申请实施例,通过处理器在视频解析卡上部署插件实例,并通过插件实例调用底层的执行引擎,可以实现插件实例和底层执行引擎的分离,针对于不同视频数据解析的需求,可以灵活的调用不同视频解析卡上的插件实例以实现对视频的解析,以得到视频解析的结果。同时,通过获取各视频解析卡的执行引擎状态信息,以生成相应的数据流信息,确定解析视频时插件实例的调用顺序,可以提高各视频解析卡上的硬件资源的利用率,灵活、充分地利用不同视频解析卡上的硬件资源,提高了视频解析的效率。

8、根据第一方面,在视频解析方法的第一种可能的实现方式中,执行引擎状态信息包括一个或多个视频解析卡的一个或多个执行引擎的资源空闲状态,根据视频数据和执行引擎状态信息,生成数据流信息,包括:

9、根据视频数据的业务类型信息,确定业务类型对应的一个或多个插件,插件在视频解析卡上实例化为对应的一个或多个插件实例;

10、根据一个或多个插件对应的执行引擎的资源消耗信息和执行引擎的资源空闲状态,确定数据流信息中插件实例的调用顺序。

11、根据本申请实施例,通过根据满足业务需求的插件对应的执行引擎的资源消耗信息和执行引擎的资源空闲状态,来确定视频数据对应的插件实例的调用顺序,可以实现利用处理器对视频的解析流程进行动态的调度,以满足不同业务类型的需要,且在视频解析过程中可以充分利用底层硬件资源,实现硬件资源利用率的最大化,提高了视频解析效率。

12、根据第一方面的第一种可能的实现方式,在视频解析方法的第二种可能的实现方式中,根据一个或多个插件对应的执行引擎的资源消耗信息和执行引擎的资源空闲状态,确定数据流信息中插件实例的调用顺序,包括:

13、根据一个或多个插件对应的执行引擎的资源消耗信息和执行引擎的资源空闲状态,确定候选的调用顺序;

14、在候选的调用顺序的数量为多个的情况下,确定候选的调用顺序中插件实例跨视频解析卡进行交互的数据量最小的一个候选的调用顺序为插件实例的调用顺序。

15、根据本申请实施例,通过处理器根据插件对应的执行引擎的资源消耗信息和当前的执行引擎的资源空闲状态,确定候选的调用顺序,并在存在多条候选的调用顺序中,以跨视频解析卡交互的数据量最小的候选的调用顺序作为最终确定的调用顺序,可以通过动态调度提高底层硬件资源的利用率,且可以减少视频解析过程中的数据传输代价,总体提高了数据解析的效率。

16、根据第一方面的第一种或第二种可能的实现方式,在视频解析方法的第三种可能的实现方式中,根据一个或多个插件对应的执行引擎的资源消耗信息和执行引擎的资源空闲状态,确定数据流信息中插件实例的调用顺序,包括:

17、根据一个或多个插件对应的执行引擎的资源消耗信息和执行引擎的资源空闲状态,确定候选的调用顺序;

18、在候选的调用顺序的数量为零的情况下,根据执行引擎的资源空闲状态,在视频解析卡上部署新的插件实例;

19、根据执行引擎的资源空闲状态和新的插件实例,确定插件实例的调用顺序。

20、根据本申请实施例,通过处理器根据插件对应的执行引擎的资源消耗信息和当前的执行引擎的资源空闲状态,确定候选的调用顺序,并在不存在可行的调用顺序时,通过部署新的插件实例以对调用路径进行动态扩容,从而可以满足动态解析的需求,提高视频解析的实时性。

21、根据第一方面或第一方面的第一种或第二种或第三种可能的实现方式,在视频解析方法的第四种可能的实现方式中,视频解析卡根据插件实例的调用顺序,通过插件实例调用相应的执行引擎对视频数据进行处理,得到视频解析结果,包括:

22、视频解析卡根据数据流信息,确定第一插件实例对应的数据输入队列,第一插件实例为插件实例的调用顺序中的第一个插件实例;

23、视频解析卡通过第一插件实例,调用相应的执行引擎对数据输入队列进行处理,得到数据输出队列;

24、视频解析卡以第一插件实例之后的第二插件实例作为新的第一插件实例,根据数据输出队列确定新的数据输入队列,重复执行视频解析卡通过第一插件实例调用相应的执行引擎,对数据输入队列进行处理,得到数据输出队列及之后的步骤,直至第二插件实例为插件实例的调用顺序中的最后一个插件实例,得到视频解析结果。

25、根据本申请实施例,通过确定插件实例对应的数据输入队列,并按照插件实例的调用顺序依次调用插件实例对数据输入队列中的各项数据进行处理,该处理过程通过插件实例调用相应的执行引擎实现,可以实现对各视频解析卡上各插件实例的统一管理,以充分地利用视频解析卡上的硬件资源,实现高效的视频解析过程。

26、根据第一方面的第四种可能的实现方式,在视频解析方法的第五种可能的实现方式中,数据输入队列包括数据输入队列中一项或多项数据对应的优先级信息,视频解析卡通过第一插件实例,调用相应的执行引擎对数据输入队列进行处理,得到数据输出队列,包括:

27、视频解析卡根据优先级信息,通过第一插件实例,调用相应的执行引擎对数据输入队列中的一项或多项数据进行处理,得到数据输出队列。

28、根据本申请实施例,通过在插件实例对应的数据输入队列中引入优先级信息,可以满足存在紧急业务的情况下视频解析的需要,在存在紧急业务的情况下可以使插件实例优先处理相应的视频数据,保证视频解析的实时性。

29、根据第一方面的第四种或第五种可能的实现方式,在视频解析方法的第六种可能的实现方式中,视频解析卡通过第一插件实例,调用相应的执行引擎对数据输入队列进行处理,得到数据输出队列,包括本文档来自技高网...

【技术保护点】

1.一种视频解析方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述执行引擎状态信息包括一个或多个视频解析卡的一个或多个执行引擎的资源空闲状态,所述根据所述视频数据和所述执行引擎状态信息,生成数据流信息,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述一个或多个插件对应的执行引擎的资源消耗信息和所述执行引擎的资源空闲状态,确定所述数据流信息中所述插件实例的调用顺序,包括:

4.根据权利要求2或3所述的方法,其特征在于,所述根据所述一个或多个插件对应的执行引擎的资源消耗信息和所述执行引擎的资源空闲状态,确定所述数据流信息中所述插件实例的调用顺序,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述视频解析卡根据所述插件实例的调用顺序,通过插件实例调用相应的执行引擎对所述视频数据进行处理,得到视频解析结果,包括:

6.根据权利要求5所述的方法,其特征在于,所述数据输入队列包括所述数据输入队列中一项或多项数据对应的优先级信息,所述视频解析卡通过所述第一插件实例,调用相应的执行引擎对所述数据输入队列进行处理,得到数据输出队列,包括:

7.根据权利要求5或6所述的方法,所述视频解析卡通过所述第一插件实例,调用相应的执行引擎对所述数据输入队列进行处理,得到数据输出队列,包括:

8.一种视频解析方法,其特征在于,所述方法包括:

9.根据权利要求8所述的方法,其特征在于,所述根据所述插件实例的调用顺序,通过插件实例调用相应的执行引擎对所述视频数据进行处理,得到视频解析结果,包括:

10.根据权利要求9所述的方法,其特征在于,所述数据输入队列包括所述数据输入队列中一项或多项数据对应的优先级信息,所述通过所述第一插件实例,调用相应的执行引擎对所述数据输入队列进行处理,得到数据输出队列,包括:

11.根据权利要求9或10所述的方法,所述通过所述第一插件实例,调用相应的执行引擎对所述数据输入队列进行处理,得到数据输出队列,包括:

12.根据权利要求8-11任一项所述的方法,其特征在于,所述执行引擎状态信息包括一个或多个视频解析卡的一个或多个执行引擎的资源空闲状态,所述数据流信息中所述插件实例的调用顺序根据一个或多个插件对应的执行引擎的资源消耗信息和所述执行引擎的资源空闲状态确定,所述插件在视频解析卡上实例化为对应的一个或多个插件实例,所述一个或多个插件根据所述视频数据的业务类型信息确定。

13.根据权利要求12所述的方法,其特征在于,在候选的调用顺序的数量为多个的情况下,确定所述插件实例的调用顺序为候选的调用顺序中插件实例跨视频解析卡进行交互的数据量最小的一个候选的调用顺序,所述候选的调用顺序根据所述一个或多个插件对应的执行引擎的资源消耗信息和所述执行引擎的资源空闲状态确定。

14.根据权利要求12或13所述的方法,其特征在于,在候选的调用顺序的数量为零的情况下,所述插件实例的调用顺序根据所述执行引擎的资源空闲状态和新的插件实例确定,所述新的插件实例为根据所述执行引擎的资源空闲状态,在视频解析卡上部署的,所述候选的调用顺序根据所述一个或多个插件对应的执行引擎的资源消耗信息和所述执行引擎的资源空闲状态确定。

15.一种视频解析装置,其特征在于,所述装置包括:

16.一种视频解析装置,其特征在于,所述装置包括:

17.一种视频解析装置,其特征在于,包括:

18.一种非易失性计算机可读存储介质,其上存储有计算机程序指令,其特征在于,所述计算机程序指令被处理器执行时实现权利要求1-7中任意一项所述的方法,或者,实现权利要求8-14中任意一项所述的方法。

19.一种计算机程序产品,包括计算机可读代码,或者承载有计算机可读代码的非易失性计算机可读存储介质,当所述计算机可读代码在电子设备中运行时,所述电子设备中的处理器执行权利要求1-7中任意一项所述的方法,或者,执行权利要求8-14中任意一项所述的方法。

...

【技术特征摘要】

1.一种视频解析方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述执行引擎状态信息包括一个或多个视频解析卡的一个或多个执行引擎的资源空闲状态,所述根据所述视频数据和所述执行引擎状态信息,生成数据流信息,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述一个或多个插件对应的执行引擎的资源消耗信息和所述执行引擎的资源空闲状态,确定所述数据流信息中所述插件实例的调用顺序,包括:

4.根据权利要求2或3所述的方法,其特征在于,所述根据所述一个或多个插件对应的执行引擎的资源消耗信息和所述执行引擎的资源空闲状态,确定所述数据流信息中所述插件实例的调用顺序,包括:

5.根据权利要求1-4任一项所述的方法,其特征在于,所述视频解析卡根据所述插件实例的调用顺序,通过插件实例调用相应的执行引擎对所述视频数据进行处理,得到视频解析结果,包括:

6.根据权利要求5所述的方法,其特征在于,所述数据输入队列包括所述数据输入队列中一项或多项数据对应的优先级信息,所述视频解析卡通过所述第一插件实例,调用相应的执行引擎对所述数据输入队列进行处理,得到数据输出队列,包括:

7.根据权利要求5或6所述的方法,所述视频解析卡通过所述第一插件实例,调用相应的执行引擎对所述数据输入队列进行处理,得到数据输出队列,包括:

8.一种视频解析方法,其特征在于,所述方法包括:

9.根据权利要求8所述的方法,其特征在于,所述根据所述插件实例的调用顺序,通过插件实例调用相应的执行引擎对所述视频数据进行处理,得到视频解析结果,包括:

10.根据权利要求9所述的方法,其特征在于,所述数据输入队列包括所述数据输入队列中一项或多项数据对应的优先级信息,所述通过所述第一插件实例,调用相应的执行引擎对所述数据输入队列进行处理,得到数据输出队列,包括:

11.根据权利要求9或10所述的方法,所述通过所述第一插件实例,调用相应的执...

【专利技术属性】
技术研发人员:彭席汉
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1