本公开关于一种视频封面生成方法、装置及存储介质，属于视频处理技术领域。方法包括：获取目标视频的关键帧集合，对关键帧集合中各关键帧图像进行文字识别，获得与目标视频对应的文本集合，将关键帧集合中的关键帧图像和文本集合中的文本信息输入至视频封面生成模型中，对各关键帧图像与各文本信息组合形成的各封面进行点击率预测，输出预测点击率最高的封面的标识信息，将标识信息所对应的关键帧图像和文本信息生成目标视频的封面。该方法使用预测点击率最高的封面所对应的关键帧图像和文本信息来构建目标视频的封面，能够兼顾视频本身的特征和视频观看者的行为特征，提高视频及封面投放后的点击率。面投放后的点击率。面投放后的点击率。
【技术实现步骤摘要】
视频封面生成方法、装置及存储介质
[0001]本公开涉及视频处理
，尤其涉及一种视频封面生成方法、装置及存储介质。
技术介绍
[0002]随着互联网技术的发展，互联网中传播的视频越来越多，为了便于用户了解视频内容，可以为视频生成视频封面，将视频封面展示给用户，用户根据视频封面选择要观看的视频。好的视频封面可以提高视频的点击率和观看时长，因此，如何生成视频封面至关重要。然而相关技术中，视频封面是随机从视频中抽取的或者由用户指定的，不能准确反映视频特点。
技术实现思路
[0003]本公开提供一种视频封面生成方法、装置及存储介质，以至少解决相关技术中视频封面生成不准确的问题。本公开的技术方案如下：
[0004]根据本公开实施例的第一方面，提供一种视频封面生成方法，包括：
[0005]获取目标视频的关键帧集合，所述关键帧集合包括至少一帧关键帧图像；
[0006]对所述关键帧集合中各关键帧图像进行文字识别，获得与所述目标视频对应的文本集合，所述文本集合包括至少一条文本信息；
[0007]将所述关键帧集合中的关键帧图像和所述文本集合中的文本信息输入至视频封面生成模型中，对各关键帧图像与各文本信息组合形成的各封面进行点击率预测，输出预测点击率最高的封面的标识信息，所述封面的标识信息表征形成所述封面的关键帧图像和文本信息的输入顺序信息；
[0008]将所述标识信息所对应的关键帧图像作为目标关键帧图像、将所述标识信息所对应的文本信息作为目标文本信息；
[0009]根据所述目标关键帧图像和所述目标文本信息生成所述目标视频的封面。
[0010]在一示例性实施例中，所述获取目标视频的关键帧集合包括：对所述目标视频进行关键帧信息检测，获取所述目标视频的关键帧图像；根据所述关键帧图像确定所述目标视频对应的关键帧集合。
[0011]在一示例性实施例中，所述对所述目标视频进行关键帧信息检测，获取所述目标视频的关键帧图像，包括以下至少一项：
[0012]对所述目标视频进行人脸检测，从所述目标视频中选取包含人脸的帧图像作为关键帧图像；
[0013]对所述目标视频进行清晰度检测，对所述目标视频的帧图像的清晰度进行降序排序，从所述目标视频中选取排序在前的预设数量的帧图像作为关键帧图像；
[0014]对所述目标视频进行精彩片段检测，从所述目标视频中选取包含精彩片段的帧图像作为关键帧图像。
[0015]在一示例性实施例中，所述对所述关键帧集合中各所述关键帧图像进行文字识别，获得与所述目标视频对应的文本集合，包括：对所述关键帧集合中各所述关键帧图像进行文字识别，获得与所述关键帧图像对应的识别文本，对各所述关键帧图像对应的识别文本进行去噪处理；对去噪处理后的所述识别文本进行语义识别，剔除语义相近的文本内容，获得文本信息；根据所述文本信息确定所述目标视频对应的文本集合。
[0016]在一示例性实施例中，根据所述目标关键帧图像和所述目标文本信息生成所述目标视频的封面，包括：获取所述目标关键帧图像的深度信息；根据所述深度信息确定所述目标关键帧图像的文本配置信息；基于所述文本配置信息将所述目标文本信息设置在所述目标关键帧图像中，得到所述目标视频的封面。
[0017]在一示例性实施例中，所述获取目标视频的关键帧集合之前，还包括：获取样本视频的封面集合，所述封面集合包括至少一个封面，每个所述封面具有唯一的封面标识；获取所述封面集合中各封面对应的点击率；按照点击率对所述封面集合中各封面进行降序排序，选取第一个封面的封面标识作为所述封面集合的封面标签；根据所述封面集合的封面标签以及所述封面集合中的封面，训练所述视频封面生成模型。
[0018]在一示例性实施例中，所述获取样本视频的封面集合包括：获取样本视频；对所述样本视频进行关键帧检测，获得样本关键帧集合，所述样本关键帧集合包括至少一个样本关键帧图像；对所述样本关键帧集合中各样本关键帧图像进行文字识别，得到样本文本集合，所述样本文本集合包括至少一个样本文本信息；将所述样本关键帧集合中各样本关键帧图像与所述样本文本集合中各样本文本信息进行组合，生成至少一个封面；根据生成的所述封面确定所述样本视频的封面集合。
[0019]在一示例性实施例中，所述将所述样本关键帧集合中各样本关键帧图像与所述样本文本集合中各样本文本信息进行组合，生成至少一个封面，包括：对所述样本关键帧集合中的样本关键帧图像进行深度信息识别，获取各样本关键帧图像的深度信息；根据所述深度信息确定各所述样本关键帧图像的文本配置信息；基于所述文本配置信息将所述文本信息设置在对应的所述样本关键帧图像中，得到至少一个封面。
[0020]在一示例性实施例中，所述获取所述封面集合中各封面对应的点击率，包括：将所述封面集合中各封面与对应的样本视频进行组合，得到至少一条视频数据；发布所述视频数据，并获取各视频数据的点击次数；根据所述视频数据的点击次数和各视频数据包含的封面，确定所述封面集合中各封面对应的点击率。
[0021]在一示例性实施例中，所述根据所述封面集合的封面标签以及所述封面集合中的封面，训练所述视频封面生成模型，包括：提取所述封面集合中各封面的封面图像和封面文本；将对应同一封面标识的所述封面图像和所述封面文本输入初始视频封面生成模型，提取所述封面图像的图像特征向量和所述封面文本的文字特征向量，将所述图像特征向量与文字特征向量组合形成图文特征向量，输出所述图文特征向量的点击率预测结果，所述预测结果携带所述图文特征向量所对应的封面的封面标识；将所述预测结果携带的封面标识与所述封面标签进行比对，计算得到损失值；根据所述损失值调整所述初始视频封面生成模型的参数，并基于所述封面集合的封面标签以及所述封面集合中的封面训练调整后的所述初始视频封面生成模型，直至满足预设的训练停止条件时，停止对所述初始视频封面生成模型的参数的调整，得到所述视频封面生成模型。
[0022]根据本公开实施例的第二方面，提供一种视频封面生成装置，包括：
[0023]关键帧集合获取单元，被配置为获取目标视频的关键帧集合，所述关键帧集合包括至少一帧关键帧图像；
[0024]文本集合获取单元，被配置为对所述关键帧集合中各关键帧图像进行文字识别，获得与所述目标视频对应的文本集合，所述文本集合包括至少一条文本信息；
[0025]标识信息获取单元，被配置为将所述关键帧集合中的关键帧图像和所述文本集合中的文本信息输入至视频封面生成模型中，对各关键帧图像与各文本信息组合形成的各封面进行点击率预测，输出预测点击率最高的封面的标识信息，所述封面的标识信息表征形成所述封面的关键帧图像和文本信息的输入顺序信息；
[0026]封面信息确定单元，被配置为将所述标识信息所对应的关键帧图像作为目标关键帧图像、将所述标识信息所对应的文本信息作为目标文本信息；
[0027]封面生成单元，被配置为根据所述目标关键帧图像和所述目标文本信息生成所述目标视频的封面。
[00本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频封面生成方法，其特征在于，包括：获取目标视频的关键帧集合，所述关键帧集合包括至少一帧关键帧图像；对所述关键帧集合中各关键帧图像进行文字识别，获得与所述目标视频对应的文本集合，所述文本集合包括至少一条文本信息；将所述关键帧集合中的关键帧图像和所述文本集合中的文本信息输入至视频封面生成模型中，对各关键帧图像与各文本信息组合形成的各封面进行点击率预测，输出预测点击率最高的封面的标识信息，所述封面的标识信息表征形成所述封面的关键帧图像和文本信息的输入顺序信息；将所述标识信息所对应的关键帧图像作为目标关键帧图像、将所述标识信息所对应的文本信息作为目标文本信息；根据所述目标关键帧图像和所述目标文本信息生成所述目标视频的封面。2.根据权利要求1所述的方法，其特征在于，所述获取目标视频的关键帧集合包括：对所述目标视频进行关键帧信息检测，获取所述目标视频的关键帧图像；根据所述关键帧图像确定所述目标视频对应的关键帧集合。3.根据权利要求1所述的方法，其特征在于，根据所述目标关键帧图像和所述目标文本信息生成所述目标视频的封面，包括：获取所述目标关键帧图像的深度信息；根据所述深度信息确定所述目标关键帧图像的文本配置信息；基于所述文本配置信息将所述目标文本信息设置在所述目标关键帧图像中，得到所述目标视频的封面。4.根据权利要求1所述的方法，其特征在于，所述获取目标视频的关键帧集合之前，还包括：获取样本视频的封面集合，所述封面集合包括至少一个封面，每个所述封面具有唯一的封面标识；获取所述封面集合中各封面对应的点击率；按照点击率对所述封面集合中各封面进行降序排序，选取第一个封面的封面标识作为所述封面集合的封面标签；根据所述封面集合的封面标签以及所述封面集合中的封面，训练所述视频封面生成模型。5.根据权利要求4所述的方法，其特征在于，所述获取样本视频的封面集合包括：获取样本视频；对所述样本视频进行关键帧检测，获得样本关键帧集合，所述样本关键帧集合包括至少一个样本关键帧图像；对所述样本关键帧集合中各样本关键帧图像进行文字识别，得到样本文本集合，所述样本文本集合包括至少一个样本文本信息；将所述样本关键帧集合中各样本关键帧图像与所述样本文本集合中各样本文本信息进行组合，生成至少一个封面；根据生成的所述封面确定所述样本视频的封面集合。6.根据权利要求5所述的方法，其特征在于，所述将所述样本关键帧集合中各样本关键
帧图像与所述样本文本集合中各样本文本信息进行组合，生成至少一个...
【专利技术属性】
技术研发人员：张水发，
申请(专利权)人：北京达佳互联信息技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。