视频处理方法、装置、电子设备及可读存储介质制造方法及图纸

本发明专利技术实施例提供了一种视频处理方法、装置、电子设备及可读存储介质。该方法包括：响应于对待处理视频的指定操作，获取待处理视频的音频数据对应的文本数据；基于预设的待选素材以及文本数据中包括的候选词，从候选词中确定存在相匹配的待选素材的候选词，作为关键词；从与关键词相匹配的待选素材中确定目标素材；将待处理视频中与关键词的播放时间对应的视频帧作为目标视频帧，并将目标素材添加至目标视频帧中。通过从与关键词相匹配的待选素材中选择目标素材，并将目标素材添加至与关键词的播放时间相对应的目标视频帧中，可以无需人工手动添加素材，从而提高为视频添加素材的效率，进而一定程度上提高了视频制作的效率。进而一定程度上提高了视频制作的效率。进而一定程度上提高了视频制作的效率。

【技术实现步骤摘要】
视频处理方法、装置、电子设备及可读存储介质


[0001]本专利技术涉及视频
，特别是涉及一种视频处理方法、装置、电子设备及可读存储介质。

技术介绍

[0002]随着视频技术的发展，出现了越来越多的视频平台(例如短视频平台)，用户通过视频平台可以观看其他用户所制作的视频，相应地，用户通过平台也可以制作并上传视频。
[0003]而在视频制作过程中，用户可以利用平台所提供的不同的视频素材(例如，图片或贴纸等)进行视频创作。在相关技术中，往往是由用户手动选择需要添加的素材，导致视频制作效率较差。

技术实现思路

[0004]本专利技术实施例的目的在于提供一种视频处理方法、装置、电子设备及可读存储介质，以实现提高视频制作效率的技术目的。具体技术方案如下：
[0005]在本专利技术实施的第一方面，首先提供了一种视频处理方法，包括：
[0006]响应于对待处理视频的指定操作，获取所述待处理视频的音频数据对应的文本数据；
[0007]基于预设的待选素材以及所述文本数据中包括的候选词，从所述候选词中确定存在相匹配的待选素材的候选词，作为关键词；
[0008]从与所述关键词相匹配的待选素材中确定目标素材；
[0009]将所述待处理视频中与所述关键词的播放时间对应的视频帧作为目标视频帧，并将所述目标素材添加至所述目标视频帧中。
[0010]在本专利技术实施的第二方面，还提供了一种视频处理装置，包括：
[0011]文本数据获取模块，用于响应于对待处理视频的指定操作，获取所述待处理视频的音频数据对应的文本数据；
[0012]关键词确定模块，用于基于预设的待选素材以及所述文本数据中包括的候选词，从所述候选词中确定存在相匹配的待选素材的候选词，作为关键词；
[0013]素材确定模块，用于从与所述关键词相匹配的待选素材中确定目标素材；
[0014]素材添加模块，用于将所述待处理视频中与所述关键词的播放时间对应的视频帧作为目标视频帧，并将所述目标素材添加至所述目标视频帧中。
[0015]在本专利技术实施的第三方面，还提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
[0016]存储器，用于存放计算机程序；
[0017]处理器，用于执行存储器上所存放的程序时，实现上述第一方面所述的视频处理方法。
[0018]在本专利技术实施的第四方面，还提供了一种计算机可读存储介质，所述计算机可读
存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述第一方面所述的视频处理方法。
[0019]在本专利技术实施的第五方面，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得所述计算机执行上述第一方面所述的视频处理方法。
[0020]本专利技术实施例提供的视频处理方法，通过响应于对待处理视频的指定操作，获取所述待处理视频的音频数据对应的文本数据；基于预设的待选素材以及所述文本数据中包括的候选词，从所述候选词中确定存在相匹配的待选素材的候选词，作为关键词；从与所述关键词相匹配的待选素材中确定目标素材；将所述待处理视频中与所述关键词的播放时间对应的视频帧作为目标视频帧，并将所述目标素材添加至所述目标视频帧中。本专利技术实施例中，通过从视频的音频数据所包含的候选词中确定存在对应的待选素材的关键词，可以从与关键词相匹配的待选素材中选择目标素材，并将目标素材添加至与关键词的播放时间相对应的目标视频帧中，可以根据待处理视频中的音频内容实现智能化的素材添加，而无需人工手动添加素材，从而提高为视频添加素材的效率，进而一定程度上提高了视频制作的效率。
附图说明
[0021]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
[0022]图1为本专利技术实施例中的一种视频处理方法的步骤流程图；
[0023]图2为本专利技术实施例中的一种素材添加过程的步骤流程图；
[0024]图3为本专利技术实施例中的一种确定目标区域的步骤流程图；
[0025]图4为本专利技术实施例中的另一种确定目标区域的步骤流程图；
[0026]图5为本专利技术实施例中的一种确定关键词的步骤流程图；
[0027]图6为本专利技术实施例中的一种获取文本数据的步骤流程图；
[0028]图7为本专利技术实施例中的另一种视频处理方法的步骤流程图；
[0029]图8为本专利技术实施例中的一种视频处理装置；
[0030]图9为本专利技术实施例中的一种电子设备的示意图。
具体实施方式
[0031]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行描述。
[0032]图1为本专利技术实施例中的一种视频处理方法的步骤流程图，如图1所示，该方法包括：
[0033]步骤101、响应于对待处理视频的指定操作，获取所述待处理视频的音频数据对应的文本数据。
[0034]其中，上述指定操作指的是为待处理视频添加素材的操作，具体的，上述指定操作可以是用户通过点击添加素材的控件触发的。相应地，上述待处理视频可以是有素材添加需求的任一视频，可以是任一用户或视频创作者上传到任一视频处理平台、应用或系统中的。
[0035]其中，上述待处理视频的音频数据指的是待处理视频流中所包含的音频流，可以
理解的，视频创作者在创作视频时，所创作的视频文件往往包含了视频轨道的数据和音频轨道的数据，音频数据通常是与视频内容相关的，例如，可以是视频创作者对视频内容的解说，还可以是视频中的被摄对象所发出的音频。
[0036]进一步地，上述文本数据可以通过对音频数据进行语音识别得到，具体的，可以通过语音识别工具或语音识别算法实现，例如，可以通过自动语音识别算法(Automatic Speech Recognition，ASR)对上述音频数据进行识别得到对应的文本数据。
[0037]步骤102、基于预设的待选素材以及所述文本数据中包括的候选词，从所述候选词中确定存在相匹配的待选素材的候选词，作为关键词。
[0038]其中，上述待选素材可以是预先设置的，可以为视频处理平台/系统/应用提供的预设素材库中所包含的素材，上述素材可以是文字、图片、视频、贴纸、表情、对话框以及字幕等等，本专利技术实施例对此不作限制。上述候选词指的是上述文本数据中所包含的词语或成语，通常为2个字或2个字以上的文本，具体的，可以通过预设的词语拆解模型得到上述候选词，或者，也可以通过预设的词汇表与上述文本数据进行匹配，可以理解的，由于词汇表中通常包含了大量的较为常见的词语或成语，从而通过与上述文本数据进行匹配，可以从文本数据中提取出上述候选词。
[0039]进一步地，上述从候选词中确定关键词的操作可以是，将候选词逐一与待选素材进行匹配，当待选素材中存在与该候选词相匹配的素材时，将该候选词确定为关键词，也可以是将候选词逐一输入至上述预设本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法，其特征在于，所述方法包括：响应于对待处理视频的指定操作，获取所述待处理视频的音频数据对应的文本数据；基于预设的待选素材以及所述文本数据中包括的候选词，从所述候选词中确定存在相匹配的待选素材的候选词，作为关键词；从与所述关键词相匹配的待选素材中确定目标素材；将所述待处理视频中与所述关键词的播放时间对应的视频帧作为目标视频帧，并将所述目标素材添加至所述目标视频帧中。2.根据权利要求1所述的方法，其特征在于，所述将所述目标素材添加至所述目标视频帧中，包括：在所述目标视频帧中包含指定对象的情况下，将所述指定对象在所述目标视频帧中所处的区域确定为主体区域；从所述目标视频帧中除所述主体区域之外的其他区域中确定目标区域，并将所述目标素材添加至所述目标区域。3.根据权利要求2所述的方法，其特征在于，在所述目标视频帧中包含的指定对象的数量为1的情况下，所述从所述目标视频帧中除所述主体区域之外的其他区域中确定目标区域，包括：检测所述主体区域的边界与所述目标视频帧的边界之间在指定方向上的直线距离；将直线距离满足预设距离要求的指定方向所在的区域，确定为所述目标区域。4.根据权利要求2所述的方法，其特征在于，在所述目标视频帧中包含的指定对象的数量大于1的情况下，所述从所述目标视频帧中除所述主体区域之外的其他区域中确定目标区域，包括：从各所述指定对象所对应的主体区域中确定区域面积最大的主体区域，作为参照区域；检测所述参照区域的边界与所述目标视频帧的边界之间在指定方向上的直线距离；将直线距离满足预设距离要求的指定方向所在的区域，确定为所述目标区域。5.根据权利要求1所述的方法，其特征在于，所述基于预设的待选素材以及所述文本数据中包括的候选词，从所述候选词中确定存在相匹配的待选素材的候选词，作为关键词，包括：对于所述文本数据中的任一候选词，确定各所述待选素材与所述候选词的匹配度；在存在与所述候选词的匹配度不低于预设匹配度阈值的待选素材的情况下，将所述候选词确定为所述关键词；所述从与所述关键词相匹配的待选素材中确定目标素材，包括：将与所述关键词的匹配度最高的待选素材确定为所述目标素材。6.根据权利要求2
‑
4任一所述的方法，其特征在于，所述将所述目标素材添加至所述目标...

【专利技术属性】
技术研发人员：秦雨，
申请(专利权)人：北京奇艺世纪科技有限公司，
类型：发明
国别省市：