System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于图像识别的动态视频目标嵌入方法、装置及设备制造方法及图纸_技高网

基于图像识别的动态视频目标嵌入方法、装置及设备制造方法及图纸

技术编号:40700788 阅读:6 留言:0更新日期:2024-03-22 10:58
本申请公开了基于图像识别的动态视频目标嵌入方法、装置及设备,方法包括:基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和目标物体对应的目标视频资源;根据目标坐标信息对当前通话视频流中的目标物体进行实时描边处理,并生成透明UI组件;依据透明UI组件将目标视频资源以小窗口的形式在当前通话视频流中播放,透明UI组件与目标视频资源绑定。此过程可以在不影响视频通话的情况下满足用户对视频帧中感兴趣对象的深入了解,提升了视频通话的交互灵活性和用户体验感。本申请能解决现有视频通话模式较为简单,交互上缺乏灵活性,导致用户体验感较差的技术问题。

【技术实现步骤摘要】

本申请涉及图像处理,尤其涉及基于图像识别的动态视频目标嵌入方法、装置及设备


技术介绍

1、视频通话拉进了人们之间的距离,一瞬间即可查看到万里之外的景象、人物。人们在日常生活中可以通过视频与远方的亲朋好友交流,也可以通过视频直播等方式介绍景点、商品等。但是人们在视频通话的过程中,如果对对方对视频中出现的某件或某人比较感兴趣时,需要依赖对方进行一系列调整操作才能满足对方的需求。比如:在视频通话过程中,对某个花瓶感兴趣,想多角度查看花瓶细节,必须让对方手动控制拍摄花瓶的角度才进一步满足需求。又或者在通话的过程中,想让对方看到家中小朋友的成长历史视频,只能通过其它设备播放视频,在用手机进行拍摄屏幕,才能分享。

2、也就是说,现阶段视频通话还是处于较为简单的模式,无法提供更丰富的互动操作,于用户而言视频通话过程缺乏灵活性,极度不便利;影响用户的视频通话体验感。


技术实现思路

1、本申请提供了基于图像识别的动态视频目标嵌入方法、装置及设备,用于解决现有视频通话模式较为简单,交互上缺乏灵活性,导致用户体验感较差的技术问题。

2、有鉴于此,本申请第一方面提供了基于图像识别的动态视频目标嵌入方法,包括:

3、基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源;

4、根据所述目标坐标信息对所述当前通话视频流中的所述目标物体进行实时描边处理,并生成透明ui组件;

5、依据所述透明ui组件将所述目标视频资源以小窗口的形式在所述当前通话视频流中播放,所述透明ui组件与所述目标视频资源绑定。

6、优选地,所述基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源,包括:

7、采用预设特征提取技术在当前通话视频流的帧图像中提取目标物体的特征数据,得到目标特征数据;

8、根据所述目标特征数据在所述预设视频资源库中查找所述目标物体对应的目标坐标信息和目标视频资源。

9、优选地,所述基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源,之前还包括:

10、获取多种目标对象的初始视频资源;

11、对所述初始视频资源中的帧图像进行特征提取,得到初始特征数据;

12、建立所述初始特征数据、所述目标对象和所述初始视频资源之间的关联关系,生成预设视频资源库。

13、优选地,所述建立所述初始特征数据、所述目标对象和所述初始视频资源之间的关联关系,生成预设视频资源库,之后还包括:

14、将所述预设视频资源库上传至云端保存,或者进行本地存储处理。

15、优选地,所述根据所述目标坐标信息对所述当前通话视频流中的所述目标物体进行实时描边处理,并生成透明ui组件,包括:

16、根据所述目标坐标信息对所述当前通话视频流中的所述目标物体进行边缘检测,并对所述目标物体进行实时描边处理,得到目标轮廓信息;

17、基于所述目标轮廓信息生成透明ui组件,并将所述透明ui组件与所述目标视频资源绑定关联。

18、优选地,所述依据所述透明ui组件将所述目标视频资源以小窗口的形式在所述当前通话视频流中播放,之后还包括:

19、接收用户下载请求,从所述预设视频资源库中获取所述目标视频资源,供用户下载。

20、本申请第二方面提供了基于图像识别的动态视频目标嵌入装置,包括:

21、目标识别单元,用于基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源;

22、描边凸显单元,用于根据所述目标坐标信息对所述当前通话视频流中的所述目标物体进行实时描边处理,并生成透明ui组件;

23、嵌入播放单元,用于依据所述透明ui组件将所述目标视频资源以小窗口的形式在所述当前通话视频流中播放,所述透明ui组件与所述目标视频资源绑定。

24、优选地,所述目标识别单元,具体用于:

25、采用预设特征提取技术在当前通话视频流的帧图像中提取目标物体的特征数据,得到目标特征数据;

26、根据所述目标特征数据在所述预设视频资源库中查找所述目标物体对应的目标坐标信息和目标视频资源。

27、优选地,所述描边凸显单元,具体用于:

28、根据所述目标坐标信息对所述当前通话视频流中的所述目标物体进行边缘检测,并对所述目标物体进行实时描边处理,得到目标轮廓信息;

29、基于所述目标轮廓信息生成透明ui组件,并将所述透明ui组件与所述目标视频资源绑定关联。

30、本申请第三方面提供了基于图像识别的动态视频目标嵌入设备,所述设备包括处理器以及存储器;

31、所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;

32、所述处理器用于根据所述程序代码中的指令执行第一方面所述的基于图像识别的动态视频目标嵌入方法。

33、从以上技术方案可以看出,本申请实施例具有以下优点:

34、本申请中,提供了基于图像识别的动态视频目标嵌入方法,包括:基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和目标物体对应的目标视频资源;根据目标坐标信息对当前通话视频流中的目标物体进行实时描边处理,并生成透明ui组件;依据透明ui组件将目标视频资源以小窗口的形式在当前通话视频流中播放,透明ui组件与目标视频资源绑定。

35、本申请提供的基于图像识别的动态视频目标嵌入方法,提前配置通话视频流中多种物体的视频资源,生成预设视频资源库;在实时视频通话过程,对视频帧中的目标物体进行检测识别,找到绑定的目标视频资源;然后通过描边生成的透明ui组件将目标视频资源以小窗口的形式在当前通话视频流中播放。此过程可以在不影响视频通话的情况下满足用户对视频帧中感兴趣对象的深入了解,提升了视频通话的交互灵活性和用户体验感。因此,本申请能够解决现有视频通话模式较为简单,交互上缺乏灵活性,导致用户体验感较差的技术问题。

本文档来自技高网...

【技术保护点】

1.基于图像识别的动态视频目标嵌入方法,其特征在于,包括:

2.根据权利要求1所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源,包括:

3.根据权利要求1所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源,之前还包括:

4.根据权利要求3所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述建立所述初始特征数据、所述目标对象和所述初始视频资源之间的关联关系,生成预设视频资源库,之后还包括:

5.根据权利要求1所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述根据所述目标坐标信息对所述当前通话视频流中的所述目标物体进行实时描边处理,并生成透明UI组件,包括:

6.根据权利要求1所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述依据所述透明UI组件将所述目标视频资源以小窗口的形式在所述当前通话视频流中播放,之后还包括:

7.基于图像识别的动态视频目标嵌入装置,其特征在于,包括:

8.根据权利要求7所述的基于图像识别的动态视频目标嵌入装置,其特征在于,所述目标识别单元,具体用于:

9.根据权利要求7所述的基于图像识别的动态视频目标嵌入装置,其特征在于,所述描边凸显单元,具体用于:

10.基于图像识别的动态视频目标嵌入设备,其特征在于,所述设备包括处理器以及存储器;

...

【技术特征摘要】

1.基于图像识别的动态视频目标嵌入方法,其特征在于,包括:

2.根据权利要求1所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源,包括:

3.根据权利要求1所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述基于预设视频资源库对当前通话视频流的帧图像中的目标物体进行检测识别,得到目标坐标信息和所述目标物体对应的目标视频资源,之前还包括:

4.根据权利要求3所述的基于图像识别的动态视频目标嵌入方法,其特征在于,所述建立所述初始特征数据、所述目标对象和所述初始视频资源之间的关联关系,生成预设视频资源库,之后还包括:

5.根据权利要求1所述的基于图...

【专利技术属性】
技术研发人员:霍飞龙
申请(专利权)人:天翼数字生活科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1