一种基于视频脚本语义识别的视频生产方法及装置制造方法及图纸

本申请提供了一种基于视频脚本语义识别的视频生产方法及装置，所述方法包括获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述素材属性标签包括素材描述和/或素材展现形式；根据所述素材类型识别标签确定进行素材选取的素材库，在所述素材库中，根据所述素材属性标签确定素材和/或确定素材的运行方式，将所述素材按所述视频生产脚本中视频制作语句的顺序生成视频。通过上述方法或装置，本申请能够智能分析出海量视频素材，结合语义理解视频脚本，自动生成短视频。

【技术实现步骤摘要】
一种基于视频脚本语义识别的视频生产方法及装置
本申请属于视频处理
，特别涉及一种基于视频脚本语义识别的视频生产方法及装置。
技术介绍
传统的短视频人工生产方式的主要包括以下步骤：1、内容策划，编写视频脚本；2、拍摄素材或者将现有内容编辑为可用素材；3、使用视频编辑工具按照脚本将素材编辑为完整视频。这个过程每个步骤都需要消耗比较大的人力资源和时间在里面现有一种视频模板的自动生产方式，即事前针对某种特定场景编辑一组固定的视频素材，然后使用者输入的指定文本内容，进行字幕和文字展示内容与语音替换。这种方式生产的视频形式基本固定，除了文字内容部分，视频画面内容相对固定。相当于视频脚本是固定模式并且素材也只能在比较小的范围内选择。这种方式虽然解决了一部分人工与时间成本，但应用场景有局限性，但对于一些自定义的视频脚本并不能应用此种方式解决人力和时间的消耗。例如交通事故相关的模板就只能局限在生产交通事故相关的视频上，如果想生产其他内容的视频，一种方式是系统开发人员增加相关的模板，这样就增加了开发人员的工作，或者由视频编辑人员自己手动替换模板中的素材，这样的话就增加了视频编辑人员的工作量。
技术实现思路
为了解决上述技术问题至少之一，本申请提供了一种基于视频脚本语义识别的视频生产方法及装置。本申请的第一个方面，一种基于视频脚本语义识别的视频生产方法，包括：获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述素材属性标签包括素材描述和/或素材展现形式；根据所述素材类型识别标签确定进行素材选取的素材库，在所述素材库中，根据所述素材属性标签确定素材和/或确定素材的展现形式，将所述素材按所述视频AI生产脚本智能整合修改相关素材生成视频。优选的是，根据所述素材属性标签确定素材包括：解析所述素材属性标签对应的素材选取规则；根据所述素材选取规则在对应素材库中进行素材的检索与提取，其中，按照与素材选取规则对应的划分逻辑进行素材划分并标注的方式构建所述素材库。优选的是，构建所述素材库包括：将包含素材的视频进行片段划分；获取素材处理者对划分后的各素材片段进行的视频描述；将进行了视频描述后的素材片段按照预定的划分逻辑存入不同素材库，其中，所述预定的划分逻辑包括但不限于素材片段的时长，素材片段的分辨率，或者素材片段的视频描述。优选的是，将进行了视频描述后的素材片段存入素材库包括：计算待入库的素材片段的感知哈希值；确定与待入库的素材片段的视频描述一致的素材库中是否存在相似感知哈希值的素材片段，若存在相似感知哈希值的素材片段，且待入库的素材片段与所述具有相似感知哈希值的素材片段的md5值不同，则将待入库的素材片段存入该视频描述所对应的素材库中，否则，将待入库的素材片段提交人工处理，由人工确定所述待入库的素材片段是否存入该视频描述对应的素材库；其中，所述相似感知哈希值是指两个感知哈希值的汉明距离小于预设值。优选的是，根据所述素材属性标签确定素材的运行方式包括：校验所述素材属性标签与预制的素材处理命令是否一致，若一致，则按照预制的素材处理命令对所述素材进行处理。本申请的第二个方面，一种基于视频脚本语义识别的视频生产装置，包括：视频生产脚本获取模块，用于获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述素材属性标签包括素材描述和/或素材展现形式；视频生产模块，用于根据所述素材类型识别标签确定进行素材选取的素材库，在所述素材库中，根据所述素材属性标签确定素材和/或确定素材的展现形式，将所述素材按所述视频生产脚本中视频制作语句的顺序生成视频。优选的是，所述视频生产模块包括：选取规则解析单元，用于解析所述素材属性标签对应的素材选取规则；素材检索单元，用于根据所述素材选取规则在对应素材库中进行素材的检索与提取，其中，按照与素材选取规则对应的划分逻辑进行素材划分并标注的方式构建所述素材库。优选的是，所述素材检索单元所依赖的素材库的构建包括：素材片段划分模块，用于将包含素材的视频进行片段划分；视频描述获取模块，用于获取素材处理者对划分后的各素材片段进行的视频描述；入库模块，用于将进行了视频描述后的素材片段按照预定的划分逻辑存入不同素材库，其中，所述预定的划分逻辑包括但不限于素材片段的时长，素材片段的分辨率，或者素材片段的视频描述。优选的是，所述入库模块包括：哈希值计算单元，用于计算待入库的素材片段的感知哈希值；入库判断单元，用于确定与待入库的素材片段的视频描述一致的素材库中是否存在相似感知哈希值的素材片段，若存在相似感知哈希值的素材片段，且待入库的素材片段与所述具有相似感知哈希值的素材片段的md5值不同，则将待入库的素材片段存入该视频描述所对应的素材库中，否则，将待入库的素材片段提交人工处理，由人工确定所述待入库的素材片段是否存入该视频描述对应的素材库；其中，所述相似感知哈希值是指两个感知哈希值的汉明距离小于预设值。优选的是，所述视频生产模块还包括：命令识别单元，用于校验所述素材属性标签与预制的素材处理命令是否一致，若一致，则按照预制的素材处理命令对所述素材进行处理。本申请的第三个方面，一种计算机系统，包括处理器、存储器以及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序用于实现如上的基于视频脚本语义识别的视频生产方法。本申请的第四个方面，一种可读存储介质，可读存储介质存储有计算机程序，计算机程序被处理器执行时用于实现上述的基于视频脚本语义识别的视频生产方法。通过上述方法或装置，本申请能够智能分析出海量视频素材，结合语义理解视频脚本，自动生成短视频。附图说明图1是本申请基于视频脚本语义识别的视频生产方法的一实施方式的流程图。图2是本申请图1所示实施方式的素材库构建流程图。图3是本申请图1所示实施方式的音频素材库构建流程图。图4适于用来实现本申请实施方式的终端或服务器的计算机设备的结构示意图。具体实施方式为使本申请实施的目的、技术方案和优点更加清楚，下面将结合本申请实施方式中的附图，对本申请实施方式中的技术方案进行更加详细的描述。在附图中，自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。所描述的实施方式是本申请一部分实施方式，而不是全部的实施方式。下面通过参考附图描述的实施方式是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。基于本申请中的实施方式，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式，都属于本申请保护的范围。下面结合附图对本申请的实施方式进行详细说明。根据本申请第一方面，提供了一种基于视频脚本语义识别的视频生产方法，包括：步骤S100、获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述本文档来自技高网...

【技术保护点】
1.一种基于视频脚本语义识别的视频生产方法，其特征在于，包括：/n获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述素材属性标签包括素材描述和/或素材展现形式；/n根据所述素材类型识别标签确定进行素材选取的素材库，在所述素材库中，根据所述素材属性标签确定素材和/或确定素材的展现形式，将所述素材按所述视频生产脚本智能整合修改相关素材生成视频。/n

【技术特征摘要】
1.一种基于视频脚本语义识别的视频生产方法，其特征在于，包括：
获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述素材属性标签包括素材描述和/或素材展现形式；
根据所述素材类型识别标签确定进行素材选取的素材库，在所述素材库中，根据所述素材属性标签确定素材和/或确定素材的展现形式，将所述素材按所述视频生产脚本智能整合修改相关素材生成视频。


2.如权利要求1所述的基于视频脚本语义识别的视频生产方法，其特征在于，根据所述素材属性标签确定素材包括：
解析所述素材属性标签对应的素材选取规则；
根据所述素材选取规则在对应素材库中进行素材的检索与提取，其中，按照与素材选取规则对应的划分逻辑进行素材划分并标注的方式构建所述素材库。


3.如权利要求2所述的基于视频脚本语义识别的视频生产方法。其特征在于，构建所述素材库包括：
将包含素材的视频进行片段划分；
获取素材处理者对划分后的各素材片段进行的视频描述；
将进行了视频描述后的素材片段按照预定的划分逻辑存入不同素材库，其中，所述预定的划分逻辑包括但不限于素材片段的时长，素材片段的分辨率，或者素材片段的视频描述。


4.如权利要求3所述的基于视频脚本语义识别的视频生产方法。其特征在于，将进行了视频描述后的素材片段存入素材库包括：
计算待入库的素材片段的感知哈希值；
确定与待入库的素材片段的视频描述一致的素材库中是否存在相似感知哈希值的素材片段，若存在相似感知哈希值的素材片段，且待入库的素材片段与所述具有相似感知哈希值的素材片段的md5值不同，则将待入库的素材片段存入该视频描述所对应的素材库中，否则，将待入库的素材片段提交人工处理，由人工确定所述待入库的素材片段是否存入该视频描述对应的素材库；
其中，所述相似感知哈希值是指两个感知哈希值的汉明距离小于预设值。


5.如权利要求1所述的基于视频脚本语义识别的视频生产方法，其特征在于，根据所述素材属性标签确定素材的运行方式包括：
校验所述素材属性标签与预制的素材处理命令是否一致，若一致，则按照预制的素材处理命令对所述素材进行处理。


6.一种基于视频脚本语义识别的视频生产装置，其特征在于，包括：
...

【专利技术属性】
技术研发人员：王鹤，林洪祥，何俊华，王雅萍，
申请(专利权)人：北京风平科技有限公司，
类型：发明
国别省市：北京;11