视频生成方法、装置、电子设备及存储介质制造方法及图纸

本申请实施例公开了一种视频生成方法、装置、电子设备及存储介质。该方法包括：对剧本进行分镜处理，以得到分镜信息；根据分镜信息的画面信息从素材库获取目标素材；根据分镜信息中的文本信息及镜头时长确定音频信号；根据分镜信息的动作信息表征的运镜方式及镜头时长对目标素材进行预处理，以得到目标视频片段；对音频信号和目标视频片段进行融合，以得到目标视频。本申请实施例有利于得到风格迥异，内容丰富的视频，降低了用户创作视频的难度。降低了用户创作视频的难度。降低了用户创作视频的难度。

【技术实现步骤摘要】
视频生成方法、装置、电子设备及存储介质


[0001]本申请涉及人工智能
，具体涉及一种视频生成方法、装置、电子设备及存储介质。

技术介绍

[0002]现在短视频或者vlog是越来越受到人们的关注，并且很多人都参与短视频或者vlog的拍摄，因此到时短视频的产量大，同时视频风格雷同率特别高，对于一些用户很难创造出风格迥异的短视频或者vlog；并且对于一些用户在创造视频过程中，都是用户自己全程出镜，或者干脆自己全程不出镜，从而导致拍摄出来的视频内容不丰富，没有画面感。

技术实现思路

[0003]本申请实施例提供了一种视频生成方法、装置、电子设备及存储介质，采用本申请实施例提供的视频生成方法，实现了在输入一个剧本的情况下，就可以得到一个风格迥异，内容丰富的视频，降低了用户创作视频的难度。
[0004]第一方面，本申请实施例提供一种视频生成方法，包括：
[0005]对剧本进行分镜处理，以得到分镜信息；该分镜信息包括画面信息、动作信息、文本信息及镜头时长；画面信息用于表征人物信息及人物与空间背景的关系，动作信息用于表征人物的运动信息及运镜方式；根据画面信息从素材库获取目标素材；根据文本信息及镜头时长确定音频信号；音频信号的时长与镜头时长相同；根据动作信息表征的运镜方式及镜头时长对目标素材进行预处理，以得到目标视频片段；对音频信号和目标视频片段进行融合，以得到目标视频。
[0006]第二方面，本申请实施例提供一种视频生成装置，包括：分镜单元、获取单元、确定单元、预处理单元和融合单元；<br/>[0007]分镜单元，用于对剧本进行分镜处理，以得到分镜信息；该分镜信息包括画面信息、动作信息、文本信息及镜头时长；画面信息用于表征人物信息及人物与空间背景的关系，动作信息用于表征人物的运动信息及运镜方式；
[0008]获取单元，用于根据画面信息从素材库获取目标素材；
[0009]确定单元，用于根据文本信息及镜头时长确定音频信号；音频信号的时长与分镜信息的镜头时长相同；
[0010]预处理单元，用于根据动作信息表征的运镜方式及镜头时长对目标素材进行预处理，以得到目标视频片段；
[0011]融合单元，用于对音频信号和目标视频片段进行融合，以得到目标视频。
[0012]第三方面，本申请实施例提供一种电子设备，包括：处理器，所述处理器与存储器相连，所述存储器用于存储计算机程序，所述处理器用于执行所述存储器中存储的计算机程序，以使得所述电子设备执行如第一方面所述的方法。
[0013]第四方面，本申请实施例提供一种计算机可读存储介质，所述计算机可读存储介
质存储有计算机程序，所述计算机程序使得计算机执行如第一方面所述的方法。
[0014]第五方面，本申请实施例提供一种计算机程序产品，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，所述计算机可操作来使计算机执行如第一方面所述的方法。
[0015]实施本申请实施例，具有如下有益效果：
[0016]采用本申请的实施例，可以是只要输入一个剧本的情况下，就可以得到一个风格迥异，内容丰富的视频，降低了用户创作视频的难度。
附图说明
[0017]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0018]图1为本申请实施例提供的一种视频生成系统的示意图；
[0019]图2为本申请实施例提供的一种视频生成方法的流程示意图；
[0020]图3a为本申请实施例提供的一种图像裁剪示意图；
[0021]图3b为本申请实施例提供的另一种图像裁剪示意图；
[0022]图3c为本申请实施例提供的另一种图像裁剪示意图；
[0023]图4为本申请实施例提供的一种视频生成装置的功能单元组成框图；
[0024]图5为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
[0025]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0026]本申请的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0027]在本文中提及“实施例”意味着，结合实施例描述的特定特征、结果或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
[0028]本申请实施例可以基于人工智能技术对相关的数据进行获取、特征提取和处理等。其中，人工智能(Artificial Intelligence，AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。
[0029]人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、机器人技术、生物识别技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
[0030]本申请的方法可以应用于终端设备，比如智能手机、平板电脑，手环等，终端设备按照本申请的方法根据剧本得到目标视频。也可以应用于如图1所示的视频生成系统。如图1所示，该视频生成系统包括终端设备102和视频生成服务器101；
[0031]终端设备102向视频生成服务器101发送视频生成请求，该视频生成请求携带有剧本；视频生成服务器101接收到视频生成请求后，按照申请的方法根据剧本生成目标视频。视频生成服务器101向终端设备102发送用于响应视频生成请求的响应消息，该响应消息携带有上述目标视频。
[0032]可以看出，采用本申请的方案可以是只要输入一个剧本的情况下，就可以得到一个风格迥异，内容丰富的视频，降低了用户创作视频的难度和创作成本。
[0033]参阅图2，图2为本申请实施例提供的一种视频生成方法的流程示意图。该方法应用于视频生成装置，该视频生成装置可以为上述终端设备或者图1中所示的视频生成服务器101。该方法包括本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频生成方法，其特征在于，包括：对剧本进行分镜处理，得到分镜信息；所述分镜信息包括画面信息、动作信息、文本信息及镜头时长；所述画面信息用于表征人物信息及所述人物与空间背景的关系，所述动作信息用于表征所述人物的运动信息及运镜方式；根据所述画面信息从素材库获取目标素材；根据所述文本信息及镜头时长确定音频信号；所述音频信号的时长与所述分镜信息的镜头时长相同；根据所述分镜信息的动作信息表征的运镜方式及镜头时长对所述目标素材进行预处理，以得到目标视频片段；对所述音频信号和所述目标视频片段进行融合，以得到目标视频。2.根据权利要求1所述的方法，其特征在于，所述人物信息包括人物的数量、职业、性别和服装，所述根据所述画面信息素材库获取所述目标素材，包括：根据所述人物的职业、性别和服装从所述素材库中获取多个第一候选素材；所述多个第一候选素材中的每个第一候选素材中的人物信息与所述人物信息中的人物的职业、性别和服装相同；根据所述人物的数量及所述人物的数量与景别的对应关系从所述多个第一候选素材中确定出多个第二候选素材，所述多个第二候选素材中每个第二候选素材中人物的数量为所述人物信息中的人物的数量，且所述第二候选素材中包括景别为所述人物的数量对应的景别的图像；根据所述人物与空间背景的关系从所述多个第二候选素材中确定出所述目标素材，所述目标素材中的人物与空间背景的关系与所述画面信息所表征的人物与背景空间的关系相同。3.根据权利要求2所述的方法，其特征在于，所述人物的数量与景别的对应关系，包括：当所述人物的数量为1时，对应的景别为近景或者特写；当所述人物的数量大于1且小于或者等于3时，对应的景别为中景或者远景；当所述人物的数量大于3时，对应的景别为远景或者全景。4.根据权利要求1
‑
3任一项所述的方法，其特征在于，所述目标素材包括图像，所述根据所述分镜信息的动作信息表征的运镜方式及镜头时长对所述目标素材进行预处理，以得到目标视频片段，包括：根据所述音频信号对所述目标素材包括的图像进行插帧处理，以得到第一视频片段，所述第一视频片段的播放时长与所述镜头时长相等；根据所述动作信息表征的运镜方式对所述第一视频片段进行处理，以得到第二视频片段，所述第二视频片段的运镜方式与所述动作信息表征的运镜方式相同；其中，所述目标视频片段包括所述第二视频片段。5.根据权利要求1
‑
3任一项所述的方法，其特征在于，所述目标素材包括视频片段，所述根据所述分镜信息的动作信息表征的运镜方式及镜头时长对所述目标素材进行预处理，以得到目标视频片段，包括：根据所述目标素材包括的视频片段的播放时长与所述镜头时长对所述目标素材包括的视频片段进行处理，以得到第三视频片段；其中，所述第三视频片段的播放时长与所述镜
头时长相同；当所述目标素材包括的视频片段的播放时长小于所述镜头时长时，所述第三视频片段是对所述目标素材包括的视频片段进行采样操作得到的；当所述目标素材包括的视频片段的播放时长小于所述镜头时长时，所述第三视频片段是对所述目标素材包括的视频片段进行插帧操作...

【专利技术属性】
技术研发人员：涂必超，
申请(专利权)人：中国平安人寿保险股份有限公司，
类型：发明
国别省市：