视频图像处理方法、装置和电子设备制造方法及图纸

技术编号:35557698 阅读:12 留言:0更新日期:2022-11-12 15:39
本发明专利技术提供了一种视频图像处理方法、装置和电子设备;其中,该方法包括:从直播视频中获取待处理的视频图像;确定待添加的第一特效以及第一特效的交互目标,从视频图像中提取包含交互目标的区域图像以及交互目标的位置;基于交互目标的位置,控制第一特效的特效元素与包含交互目标的区域图像进行物理交互模拟,得到物理交互模拟后,第一特效的形态图像;其中,第一特效的特效元素与区域图像位于同一二维空间;基于形态图像,生成添加有第一特效的视频图像。该方式中,特效随着交互目标实时变化,因而特效可以对交互目标的变化做出实时反馈,提高了特效与交互目标的互动感和反馈感,从而提高了直播特效的视觉效果。高了直播特效的视觉效果。高了直播特效的视觉效果。

【技术实现步骤摘要】
视频图像处理方法、装置和电子设备


[0001]本专利技术涉及直播
,尤其是涉及一种视频图像处理方法、装置和电子设备。

技术介绍

[0002]在直播间中,主播提供丰富的视觉内容,以吸引用户观看。为了提高直播间的观看视觉效果,直播平台通常提供直播特效功能。直播平台在视频流上叠加特效画面,得到具有特效效果的直播画面,例如,火焰特效随着主播的后背移动。该方式中,特效画面与视频流中的视频图像叠加显示,二者相互分立,因而仅能实现粗略的特效的模拟和跟随,特效的表现效果也有限。其他方式中,通过缩影变换形成抖动的动画滤镜特效,该滤镜特效通过对某一帧直播图像进行缩影变换,从而得到短时的滤镜特效效果,该特效效果难以维持较长时间。对于主播而言,这些直播特效给与主播的交互感和反馈感有限,对于用户而言,直播特效提供的视觉效果也有限。

技术实现思路

[0003]有鉴于此,本专利技术的目的在于提供一种视频图像处理方法、装置和电子设备,以提高特效与交互目标的互动感和反馈感,从而提高直播特效的视觉效果。
[0004]第一方面,本专利技术实施例提供了一种视频图像处理方法,方法包括:从直播视频中获取待处理的视频图像;确定待添加的第一特效以及第一特效的交互目标,从视频图像中提取包含交互目标的区域图像以及交互目标的位置;基于交互目标的位置,控制第一特效的特效元素与包含交互目标的区域图像进行物理交互模拟,得到物理交互模拟后,第一特效的形态图像;其中,第一特效的特效元素与区域图像位于同一二维空间;基于形态图像,生成添加有第一特效的视频图像。
[0005]上述确定第一特效的交互目标的步骤,包括:从视频图像中识别交互目标,和/或,获取视频图像携带的交互指令,将交互指令对应的交互区域确定为交互目标。
[0006]上述基于交互目标的位置,控制第一特效的特效元素与包含交互目标的区域图像进行物理交互模拟,得到物理交互模拟后,第一特效的形态图像的步骤,包括:基于交互目标的位置,将交互目标的区域图像保存在二维渲染空间中;控制第一特效的特效元素在二维渲染空间中的指定位置生成,并按照预设的物理移动方式移动;当特效元素与交互目标的区域图像发生物理交互模拟,获取特效元素的形态信息,基于形态信息生成第一特效的形态图像。
[0007]上述当特效元素与交互目标的区域图像发生物理交互模拟,获取特效元素的形态信息,基于形态信息生成第一特效的形态图像的步骤,包括:从直播视频中确定交互目标的运动趋势;当特效元素与交互目标的区域图像发生物理交互模拟,基于交互目标的运动趋势,确定特效元素的形态信息;基于形态信息生成第一特效的形态图像。
[0008]上述从直播视频中确定交互目标的运动趋势的步骤,包括:从直播视频中获取视频图像的至少一张前序图像;其中,按照直播视频的图像采集顺序,前序图像位于视频图像
之前;前序图像与视频图像具有第一指定距离;从前序图像中确定交互目标的历史位置;基于历史位置以及交互目标的位置,确定交互目标的运动趋势。
[0009]上述基于形态图像,生成添加有第一特效的视频图像的步骤,包括:将包含交互目标的区域图像保存在指定的二维存储空间;其中,二维存储空间的尺寸与视频图像的尺寸相匹配;将形态图像填充在二维存储空间中区域图像以外的空间中,得到添加有第一特效的视频图像。
[0010]上述基于形态图像,生成添加有第一特效的视频图像的步骤,包括:将形态图像叠加显示在视频图像中,区域图像以外的图像上。
[0011]上述从直播视频中获取待处理的视频图像的步骤,包括:将直播视频中的每帧图像逐一确定为待处理的视频图像;基于形态图像,生成添加有第一特效的视频图像的步骤之后,方法还包括:将添加有第一特效的视频图像发送至直播视频对应的客户端。
[0012]第二方面,本专利技术实施例提供了一种视频图像处理装置,装置包括:图像获取模块,用于从直播视频中获取待处理的视频图像;信息提取模块,用于确定待添加的第一特效以及第一特效的交互目标,从视频图像中提取包含交互目标的区域图像以及交互目标的位置;交互模块,用于基于交互目标的位置,控制第一特效的特效元素与包含交互目标的区域图像进行物理交互模拟,得到物理交互模拟后,第一特效的形态图像;其中,第一特效的特效元素与区域图像位于同一二维空间;图像生成模块,用于基于形态图像,生成添加有第一特效的视频图像。
[0013]第三方面,本专利技术实施例提供了一种电子设备,包括处理器和存储器,存储器存储有能够被处理器执行的机器可执行指令,处理器执行机器可执行指令以实现上述视频图像处理方法。
[0014]第四方面,本专利技术实施例提供了一种机器可读存储介质,机器可读存储介质存储有机器可执行指令,机器可执行指令在被处理器调用和执行时,机器可执行指令促使处理器实现上述视频图像处理方法。
[0015]本专利技术实施例带来了以下有益效果:
[0016]上述视频图像处理方法、装置和电子设备,从直播视频中获取待处理的视频图像;确定待添加的第一特效以及第一特效的交互目标,从视频图像中提取包含交互目标的区域图像以及交互目标的位置;基于交互目标的位置,控制第一特效的特效元素与包含交互目标的区域图像进行物理交互模拟,得到物理交互模拟后,第一特效的形态图像;其中,第一特效的特效元素与区域图像位于同一二维空间;基于形态图像,生成添加有第一特效的视频图像。该方式中,在处理视频图像时,在二维空间中控制特效元素与交互目标的区域图像进行物理交互模拟,得到特效的形态图像,进而基于该形态图像生成添加有特效的视频图像。该方式可以对直播视频逐帧添加特效,特效随着交互目标实时变化,因而图像可以对交互目标的变化做出实时反馈,提高了特效与交互目标的互动感和反馈感,从而提高了直播特效的视觉效果。
[0017]本专利技术的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
[0018]为使本专利技术的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合
所附附图,作详细说明如下。
附图说明
[0019]为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施方式,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0020]图1为本专利技术实施例提供的一种视频图像处理方法的流程图;
[0021]图2为本专利技术实施例提供的一种特效元素与交互目标进行物理交互模拟的示意图;
[0022]图3为本专利技术实施例提供的另一种特效元素与交互目标进行物理交互模拟的示意图;
[0023]图4为本专利技术实施例提供的一种特意元素与交互区域进行物理交互模拟的示意图;
[0024]图5为本专利技术实施例提供的一种视频图像处理装置的结构示意图;
[0本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频图像处理方法,其特征在于,所述方法包括:从直播视频中获取待处理的视频图像;确定待添加的第一特效以及所述第一特效的交互目标,从所述视频图像中提取包含所述交互目标的区域图像以及所述交互目标的位置;基于所述交互目标的位置,控制所述第一特效的特效元素与包含所述交互目标的区域图像进行物理交互模拟,得到所述物理交互模拟后,所述第一特效的形态图像;其中,所述第一特效的特效元素与所述区域图像位于同一二维空间;基于所述形态图像,生成添加有所述第一特效的视频图像。2.根据权利要求1所述的方法,其特征在于,确定所述第一特效的交互目标的步骤,包括:从所述视频图像中识别交互目标,和/或,获取所述视频图像携带的交互指令,将所述交互指令对应的交互区域确定为交互目标。3.根据权利要求1所述的方法,其特征在于,基于所述交互目标的位置,控制所述第一特效的特效元素与包含所述交互目标的区域图像进行物理交互模拟,得到所述物理交互模拟后,所述第一特效的形态图像的步骤,包括:基于所述交互目标的位置,将所述交互目标的区域图像保存在二维渲染空间中;控制所述第一特效的特效元素在所述二维渲染空间中的指定位置生成,并按照预设的物理移动方式移动;当所述特效元素与所述交互目标的区域图像发生物理交互模拟,获取所述特效元素的形态信息,基于所述形态信息生成所述第一特效的形态图像。4.根据权利要求3所述的方法,其特征在于,当所述特效元素与所述交互目标的区域图像发生物理交互模拟,获取所述特效元素的形态信息,基于所述形态信息生成所述第一特效的形态图像的步骤,包括:从所述直播视频中确定所述交互目标的运动趋势;当所述特效元素与所述交互目标的区域图像发生物理交互模拟,基于所述交互目标的运动趋势,确定所述特效元素的形态信息;基于所述形态信息生成所述第一特效的形态图像。5.根据权利要求4所述的方法,其特征在于,从所述直播视频中确定所述交互目标的运动趋势的步骤,包括:从所述直播视频中获取所述视频图像的至少一张前序图像;其中,按照所述直播视频的图像采集顺序,所述前序图像位于所述视频图像之前;所述前序图像与所述视频图像具有第一指定距离;从所述前序图像中确定所述交互目标的历史位置;基...

【专利技术属性】
技术研发人员:卢胜栋
申请(专利权)人:广州博冠信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1