直播控制方法、装置、存储介质及电子设备制造方法及图纸

本公开涉及直播技术领域，具体涉及一种直播控制方法、装置、存储介质及电子设备。该直播控制方法包括：利用终端的图像获取设备采集主播在真实直播场景中的真实视频数据；通过真实视频数据中主播同步驱动虚拟直播场景中的虚拟对象得到虚拟对象的动作；识别虚拟对象的动作对应的目标常规动作，并基于常规动作与虚拟直播场景中虚拟摄像头的运镜信息之间的映射关系获取与目标常规动作对应的目标运镜信息；将真实视频数据中主播添加至虚拟直播场景，以将直播视频数据显示在直播界面中。本公开提供的直播控制方法，能够根据主播的动作改变运镜信息，提高直播运镜效果的丰富性。提高直播运镜效果的丰富性。提高直播运镜效果的丰富性。

【技术实现步骤摘要】
直播控制方法、装置、存储介质及电子设备


[0001]本公开涉及虚拟现实领域，具体涉及一种直播控制方法、直播控制装置、存储介质及电子设备。

技术介绍

[0002]随着直播行业的快速兴起，舞蹈类的直播逐渐增多，主播可以通过直播设备向观众展现自己最有魅力的一面。
[0003]通常在演唱会、舞台表演等大型直播活动中，有特定的实拍运镜配合拍摄舞蹈表演动作，从而突出舞蹈视觉冲击力。然而对于大多数个人主播而言，由于直播条件有限，主播通常只能通过定机位进行直播，运镜效果单一，直播画面丰富性较差。而有部分摄像头硬件是有自动跟踪或自动运镜的功能，通常是基于人物脸的位置进行镜头的跟踪，但最终直播效果也取决于主播的直播空间大小和装饰，如果直播间没有足够的施展移动的空间，摄像头的跟踪功能效果也将大打折扣，效果不佳。
[0004]需要说明的是，在上述
技术介绍
部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

技术实现思路

[0005]本公开的目的在于提供一种直播控制方法、直播控制装置、存储介质及电子设备，旨在根据主播的动作改变运镜信息，提高直播运镜效果的丰富性。
[0006]本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。
[0007]根据本公开实施例的一方面，提供了直播控制方法，通过终端的图形用户界面提供一直播界面，包括：利用所述终端的图像获取设备采集主播在真实直播场景中的真实视频数据；通过真实视频数据中所述主播同步驱动虚拟直播场景中的虚拟对象得到所述虚拟对象的动作；识别所述虚拟对象的动作对应的目标常规动作，并基于常规动作与虚拟直播场景中虚拟摄像头的运镜信息之间的映射关系获取与所述目标常规动作对应的目标运镜信息；将所述真实视频数据中所述主播添加至所述虚拟直播场景，并根据所述目标运镜信息利用所述虚拟摄像头对包含所述主播的虚拟直播场景进行拍摄生成直播视频数据，以将所述直播视频数据显示在所述直播界面中。
[0008]根据本公开的一些实施例，基于前述方案，所述通过真实视频数据中的所述主播同步驱动虚拟直播场景中的虚拟对象得到所述虚拟对象的动作，包括：利用预设的动作特征点对所述真实视频数据中所述主播进行动作识别得到所述主播各动作特征点的时间域动态轨迹序列；基于所述主播与所述虚拟对象动作特征点之间的对应关系，将所述主播各动作特征点的时间域动态轨迹序列分别配置为所述虚拟对象各动作特征点的时间域动态轨迹序列得到所述虚拟对象的动作。
[0009]根据本公开的一些实施例，基于前述方案，所述识别所述虚拟对象的动作对应的
目标常规动作，包括：将所述虚拟对象的动作与动作数据库中的常规动作进行匹配，以确定与所述动作对应的目标常规动作。
[0010]根据本公开的一些实施例，基于前述方案，基于常规动作与虚拟直播场景中虚拟摄像头的运镜信息之间的映射关系获取与所述目标常规动作对应的目标运镜信息，包括：从动作数据库提取所述目标常规动作的运镜触发条件；在检测到所述虚拟对象的动作满足所述运镜触发条件时提取所述目标运镜信息；其中，所述动作数据库包括常规动作、运镜信息及常规动作与运镜信息之间的映射关系。
[0011]根据本公开的一些实施例，基于前述方案，所述方法还包括：所述方法还包括创建所述动作数据库，所述创建所述动作数据库，包括：对历史视频数据进行动作分析以创建常规动作；配置所述常规动作对应的动作特征点的时间域动态轨迹序列以用于识别目标常规动作；以及配置所述常规动作对应的运镜触发条件和运镜信息以用于获取目标常规动作对应的目标运镜信息；创建存储常规动作的动作特征点的时间域动态轨迹序列、运镜触发条件和运镜信息的所述动作数据库。
[0012]根据本公开的一些实施例，基于前述方案，所述将所述真实视频数据中所述主播添加至所述虚拟直播场景，包括：对所述真实视频数据中的所述主播和所述真实直播场景进行抠图处理，以提取所述主播的视频数据；将所述主播的视频数据添加至所述虚拟直播场景中。
[0013]根据本公开的一些实施例，基于前述方案，在根据所述目标运镜信息利用所述虚拟摄像头对包含所述主播的虚拟直播场景进行拍摄生成直播视频数据之前，所述方法还包括：将所述虚拟对象渲染为不可见状态。
[0014]根据本公开实施例的第二方面，提供了一种直播控制装置，通过终端的图形用户界面提供一直播界面，包括：采集模块，用于利用所述终端的图像获取设备采集主播在真实直播场景中的真实视频数据；同步模块，用于通过真实视频数据中所述主播同步驱动虚拟直播场景中的虚拟对象得到所述虚拟对象的动作；获取模块，用于识别所述虚拟对象的动作对应的目标常规动作，并基于常规动作与虚拟直播场景中虚拟摄像头的运镜信息之间的映射关系获取与所述目标常规动作对应的目标运镜信息；拍摄模块，用于将所述真实视频数据中所述主播添加至所述虚拟直播场景，并根据所述目标运镜信息利用所述虚拟摄像头对包含所述主播的虚拟直播场景进行拍摄生成直播视频数据，以将所述直播视频数据显示在所述直播界面中。
[0015]根据本公开实施例的第三方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上述实施例中的直播控制方法。
[0016]根据本公开实施例的第四方面，提供了一种电子设备，其特征在于，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如上述实施例中的直播控制方法。
[0017]本公开示例性实施例可以具有以下部分或全部有益效果：
[0018]在本公开的一些实施例所提供的技术方案中，首先对主播的图像数据进行动作识别得到动作识别结果，再将动作识别结果同步至预设的虚拟对象得到虚拟对象的动作数据，从而实现主播与虚拟对象的动作联动，最后在检测到虚拟对象的动作数据满足目标动作的运镜触发条件时，获取对应的运镜信息进行虚拟拍摄得到视频画面。本公开提供的直
播控制方法，一方面，通过将真实的主播的动作与虚拟对象的动作进行同步，进而使用虚拟对象的动作进行检测，可以避免检测主播动作时识别精度低，误差范围大的问题，使得触发运镜的精准度较高；另一方面，通过预设常规动作与虚拟摄像头运镜信息之间的映射关系，能够自动调整运镜，并且实现丰富多样的镜头运镜，丰富了直播视频画面效果。
[0019]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
[0020]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
[0021]图1示意性示出本公开示例性实施例中一种直播控制方法的流程示意图；
[0022]图2示意性示出本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种直播控制方法，通过终端的图形用户界面提供一直播界面，其特征在于，包括：利用所述终端的图像获取设备采集主播在真实直播场景中的真实视频数据；通过真实视频数据中所述主播同步驱动虚拟直播场景中的虚拟对象得到所述虚拟对象的动作；识别所述虚拟对象的动作对应的目标常规动作，并基于常规动作与虚拟直播场景中虚拟摄像头的运镜信息之间的映射关系获取与所述目标常规动作对应的目标运镜信息；将所述真实视频数据中所述主播添加至所述虚拟直播场景，并根据所述目标运镜信息利用所述虚拟摄像头对包含所述主播的虚拟直播场景进行拍摄生成直播视频数据，以将所述直播视频数据显示在所述直播界面中。2.根据权利要求1所述的直播控制方法，其特征在于，所述通过真实视频数据中的所述主播同步驱动虚拟直播场景中的虚拟对象得到所述虚拟对象的动作，包括：利用预设的动作特征点对所述真实视频数据中所述主播进行动作识别得到所述主播各动作特征点的时间域动态轨迹序列；基于所述主播与所述虚拟对象动作特征点之间的对应关系，将所述主播各动作特征点的时间域动态轨迹序列分别配置为所述虚拟对象各动作特征点的时间域动态轨迹序列得到所述虚拟对象的动作。3.根据权利要求1所述的直播控制方法，其特征在于，所述识别所述虚拟对象的动作对应的目标常规动作，包括：将所述虚拟对象的动作与动作数据库中的常规动作进行匹配，以确定与所述动作对应的目标常规动作。4.根据权利要求1所述的直播控制方法，其特征在于，基于常规动作与虚拟直播场景中虚拟摄像头的运镜信息之间的映射关系获取与所述目标常规动作对应的目标运镜信息，包括：从动作数据库提取所述目标常规动作的运镜触发条件；在检测到所述虚拟对象的动作满足所述运镜触发条件时提取所述目标运镜信息；所述动作数据库包括常规动作、运镜信息及常规动作与运镜信息之间的映射关系。5.根据权利要求3或4所述的直播控制方法，其特征在于，所述方法还包括创建所述动作数据库，所述创建所述动作数据库，包括：对历史视频数据进行动作分析以创建常...

【专利技术属性】
技术研发人员：王毅，谭建明，刘旺，
申请(专利权)人：广州博冠信息科技有限公司，
类型：发明
国别省市：