直播背景的切换方法和装置、存储介质及电子设备制造方法及图纸

本发明专利技术公开了一种直播背景的切换方法和装置、存储介质及电子设备。其中，该方法包括：在检测到直播数据流中的目标对象当前处于目标行为状态的情况下，确定目标对象的目标行为动作的动作特征、直播数据流的音频特征和目标对象的对象特征，其中，目标行为动作为目标对象处于目标行为状态的行为动作；利用动作特征、音频特征和对象特征，计算目标背景特征，其中，目标背景特征用于指示与目标对象的目标行为状态匹配的直播背景；在从背景数据库中确定出与目标背景特征匹配的目标直播背景的情况下，将直播背景切换为目标直播背景。本发明专利技术解决了直播背景不能动态变化而导致的直播效果欠佳的技术问题。欠佳的技术问题。欠佳的技术问题。

【技术实现步骤摘要】
直播背景的切换方法和装置、存储介质及电子设备


[0001]本专利技术涉及图像处理领域，具体而言，涉及一种直播背景的切换方法和装置、存储介质及电子设备。

技术介绍

[0002]目前，直播间的背景图像主要通过主播自主设置背景图，还可以是服务器在推流时，通过人像抠图利用虚拟背景替换主播使用的背景图。
[0003]但无论是主播自主设置的背景图还是服务器用于替换的虚拟背景，都是静态的二维图像，并不能自动跟随主播直播过程的改变，例如动作的改变、风格的改变，而进行变化。由此会使得在主播在直播过程中发生改变时，由于背景不能动态变换导致直播背景与主播并不匹配，使得直播效果欠佳。
[0004]针对上述的问题，目前尚未提出有效的解决方案。

技术实现思路

[0005]本专利技术实施例提供了一种直播背景的切换方法和装置、存储介质及电子设备，以至少解决直播背景不能动态变化而导致的直播效果欠佳的技术问题。
[0006]根据本专利技术实施例的一个方面，提供了一种直播背景的切换方法，包括：在检测到直播数据流中的目标对象当前处于目标行为状态的情况下，确定上述目标对象的目标行为动作的动作特征、上述直播数据流的音频特征和上述目标对象的对象特征，其中，上述目标行为动作为上述目标对象处于上述目标行为状态的行为动作；利用上述动作特征、上述音频特征和上述对象特征，计算目标背景特征，其中，上述目标背景特征用于指示与上述目标对象的上述目标行为状态匹配的直播背景；在从背景数据库中确定出与上述目标背景特征匹配的目标直播背景的情况下，将直播背景切换为上述目标直播背景。
[0007]根据本专利技术实施例的另一方面，还提供了一种直播背景的切换装置，包括：确定单元，用于在检测到直播数据流中的目标对象当前处于目标行为状态的情况下，确定上述目标对象的目标行为动作的动作特征、上述直播数据流的音频特征和上述目标对象的对象特征，其中，上述目标行为动作为上述目标对象处于上述目标行为状态的行为动作；计算单元，用于利用上述动作特征、上述音频特征和上述对象特征，计算目标背景特征，其中，上述目标背景特征用于指示与上述目标对象的上述目标行为状态匹配的直播背景；切换单元，用于在从背景数据库中确定出与上述目标背景特征匹配的目标直播背景的情况下，将直播背景切换为上述目标直播背景。
[0008]根据本专利技术实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述直播背景的切换方法。
[0009]根据本专利技术实施例的又一方面，还提供了一种电子设备，包括存储器和处理器，上述存储器中存储有计算机程序，上述处理器被设置为通过所述计算机程序执行上述的直播
背景的切换方法。
[0010]在本专利技术实施例中，采用在检测到直播数据流中的目标对象处于目标行为状态的情况下，利用目标行为动作的动作特征、直播数据流的音频特征和目标对象的对象特征计算得到目标背景特征，从背景数据库中确定出与目标背景特征匹配的目标直播背景，从而将直播背景切换为目标直播背景的方式，通过检测直播数据流中目标对象的行为状态，在目标对象处于目标行为状态时，基于动作特征、音频特征和对象特征确定出当前匹配的目标直播背景并进行背景切换，达到了基于目标对在目标行为状态下的动作特征、直播音频特征和对象特征动态确定匹配的直播背景的目的，从而实现了基于直播动态进行直播背景切换的技术效果，进而解决了直播背景不能动态变化而导致的直播效果欠佳的技术问题。
附图说明
[0011]此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：
[0012]图1是根据本专利技术实施例的一种可选的直播背景的切换方法的应用环境的示意图；
[0013]图2是根据本专利技术实施例的一种可选的直播背景的切换方法的流程示意图；
[0014]图3是根据本专利技术实施例的一种可选的直播背景的切换方法的流程示意图；
[0015]图4是根据本专利技术实施例的一种可选的直播背景的切换方法的流程示意图；
[0016]图5是根据本专利技术实施例的一种可选的直播背景的切换方法的流程示意图；
[0017]图6是根据本专利技术实施例的一种可选的直播背景的切换方法的流程示意图；
[0018]图7是根据本专利技术实施例的一种可选的直播背景的切换装置的结构示意图；
[0019]图8是根据本专利技术实施例的一种可选的电子设备的结构示意图。
具体实施方式
[0020]为了使本
的人员更好地理解本专利技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分的实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。
[0021]需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0022]根据本专利技术实施例的一个方面，提供了一种直播背景的切换方法，可选地，上述直播背景的切换方法可以但不限于应用于如图1所示的环境中。推流终端100为直播数据流的产生端，观看终端130为请求观看直播数据流的观看端，推送终端100通过网络110将直播数
据流发送给服务器120，以使服务器120将直播数据流推送至观看终端130。服务器120不限于可以对直播数据流中的直播背景进行切换调整，以使直播背景与目标对象的行为状态相匹配。服务器120通过网络110接收推流终端100发送的原始直播流数据，对原始直播流中的直播背景进行切换得到目标直播流，并将目标直播流通过网络110推送观看终端130，以实现直播背景的切换。
[0023]服务器120中运行有数据库122和处理引擎124，数据库122用于存储接收到的原始直播流和切换直播背景得到的目标直播流，处理引擎124用于对原始直播流中的原始帧进行直播背景的切换，得到包括目标直播背景的目标直播流。服务器120进行直播背景的切换不限于通过依次执行S102至S106。S102，确定动作特征、音频特征和对象特征。在检测到直播数据流中的目标对象当前处于目标行为状态的情况下，确定目标对象的目标行为动作的动作特征、直播数据流的音频特征和目标对象的对象特征，其中，目标行为动作为目标对象处于目标行为状态的行为动作。S104，计算目标背景特征。利用动作特征本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种直播背景的切换方法，其特征在于，包括：在检测到直播数据流中的目标对象当前处于目标行为状态的情况下，确定所述目标对象的目标行为动作的动作特征、所述直播数据流的音频特征和所述目标对象的对象特征，其中，所述目标行为动作为所述目标对象处于所述目标行为状态的行为动作；利用所述动作特征、所述音频特征和所述对象特征，计算目标背景特征，其中，所述目标背景特征用于指示与所述目标对象的所述目标行为状态匹配的直播背景；在从背景数据库中确定出与所述目标背景特征匹配的目标直播背景的情况下，将直播背景切换为所述目标直播背景。2.根据权利要求1所述的方法，其特征在于，在确定所述目标对象的目标行为动作的动作特征、所述直播数据流的音频特征和所述目标对象的对象特征之前，还包括：从所述直播数据流中获取当前视频帧组；利用视频识别算法，对所述当前视频帧组中所述目标对象的行为动作进行行为类型识别；在识别结果指示所述目标对象的行为动作的行为类型属于目标行为类型的情况下，确定所述直播数据流中的所述目标对象当前处于所述目标行为状态。3.根据权利要求2所述的方法，其特征在于，所述确定所述目标对象的目标行为动作的动作特征、所述直播数据流的音频特征和所述目标对象的对象特征包括：利用所述视频识别算法对所述当前视频帧组的所述识别结果，确定所述目标行为动作在所述目标行为类型中的目标动作类型；将所述目标动作类型的特征向量确定为所述动作特征。4.根据权利要求2所述的方法，其特征在于，所述确定所述目标对象的目标行为动作的动作特征、所述直播数据流的音频特征和所述目标对象的对象特征包括：提取所述当前视频帧组的背景音频特征，将所述背景音频特征的特征向量确定为所述音频特征，其中，所述背景音频特征包括以下至少之一：所述当前视频帧组的背景音频的类型特征、频率特征、响度特征；提取所述当前视频帧组的主播对象特征，将所述主播对象特征的特征向量确定为所述对象特征，其中，所述主播对象特征包括以下至少之一：所述主播对象的发型特征、衣着特征、面部表情特征。5.根据权利要求4所述的方法，其特征在于，所...

【专利技术属性】
技术研发人员：岑德炼，蔡海军，
申请(专利权)人：广州繁星互娱信息科技有限公司，
类型：发明
国别省市：