视频集锦生成方法及装置、电子设备及存储介质制造方法及图纸

本发明专利技术实施例提供一种视频集锦生成方法及装置、电子设备及存储介质。所述方法包括：根据视频帧的内容进行分类，得到分类结果；根据所述分类结果，确定出包含预定内容的特定视频段；基于所述特定视频段生成视频集锦。

Video Collection Generation Method and Device, Electronic Equipment and Storage Media

The embodiment of the present invention provides a video aggregation generation method and device, an electronic device and a storage medium. The method includes: classifying according to the content of the video frame, obtaining the classification result; determining the specific video segment containing the predetermined content according to the classification result; and generating the video aggregation based on the specific video segment.

【技术实现步骤摘要】
视频集锦生成方法及装置、电子设备及存储介质
本专利技术涉及信息
，尤其涉及一种视频集锦生成方法及装置、电子设备及存储介质。
技术介绍
视频集锦是将具有类似内容的不同视频或视频段剪辑成一个视频。例如，针对球类比赛，视频集锦可为进球集锦。在现有技术中视频集锦的生成，都需要工作人员观看各个视频然后，然后手动截取再拼接成视频集锦，这种方式一方面效率低下，另一方面由于有纷繁复杂的视频场景或者视频海量导致各种不同类别的人工视频集锦的剪辑对工作人员的技术要求高；且由于人工疲劳等问题会导致不同程度的遗漏；再一方面还可能由于人工错误导致各种不精确的问题。
技术实现思路
有鉴于此，本专利技术实施例期望提供一种视频集锦生成方法及装置、电子设备及存储介质。本专利技术的技术方案是这样实现的：第一方面，本专利技术实施例提供一种视频集锦生成方法，包括：对视频帧的内容进行分类，得到分类结果；根据所述分类结果，确定出包含预定内容的特定视频段；基于所述特定视频段生成视频集锦。基于上述方案，在所述对视频帧的内容进行分类，得到分类结果之前，所述方法还包括：从目标视频中提取所述视频帧；所述从目标视频中提取所述视频帧，包括以下至少之一：从所述目标视频中提取图像帧；从所述目标视频中提取音频帧。基于上述方案，所述根据视频帧的内容进行分类，得到分类结果包括以下至少之一：对所述图像帧进行分类，获得图像分类结果；对所述音频帧进行分类，获得音频分类结果；所述根据所述分类结果，确定出包含预定内容的特定视频段，包括以下至少之一：根据所述图像分类结果，从所述图像帧所在的视频段确定出包含所述预定图像内容的特定视频段；根据所述音频分类结果，从所述音频帧所在的视频段中确定出包含有预定音频内容的所述特定视频段。基于上述方案，所述方法还包括：获取所述图像帧中的文字信息；确定出满足预设条件的文字信息所在的视频帧；所述基于所述特定视频段生成视频集锦，包括：选取所述满足预设条件的文字信息所在的视频帧，作为特定视频段；根据所述特定视频段，生成所述视频集锦。基于上述方案，所述文字信息包括：比分信息；所述确定出满足预设条件的文字信息所在的视频帧，包括：根据所述比分信息确定出比分值发生变化的两个图像帧。基于上述方案，所述获取所述图像帧中的文字信息之前，所述方法还包括：定位所述图像帧中比分信息的所在区域。基于上述方案，所述定位所述图像帧中比分信息的所在区域，包括：统计目标视频中多个历史图像帧中比分信息所在位置进行统计，获得统计特征；根据所述统计特征，定位当前图像帧中所述比分信息的所在区域。基于上述方案，所述根据分类结果，确定出包含预定内容的特定视频段，包括以下至少之一：根据所述分类结果，从所述视频帧所在的视频段确定出包含比分发生变化的所述特定视频段；根据所述分类结果，从所述视频帧所在的视频段确定出包含比分遗憾未发生变化的所述特定视频段；根据所述分类结果，从所述视频帧所在的视频段确定出包含观众喝彩内容的所述特定视频段；根据所述分类结果，从所述视频帧所在的视频段确定出包含观众喝倒彩内容的所述特定视频段。基于上述方案，所述从目标视频中提取视频帧，包括：从所述目标视频的一个镜头中提取N个视频帧，其中，一个所述镜头包括M个视频帧，所述N小于所述M，且所述N及所述M均为正整数。基于上述方案，所述根据视频帧的内容进行分类，包括：利用多模态分类模型基于所述视频帧的内容进行分类。第二方面，本专利技术实施例提供一种视频集锦生成装置，包括：分类模块，用于根据视频帧的内容进行分类，得到分类结果；第一确定模块，用于分类结果根据所述分类结果，确定出包含预定内容的特定视频段；生成模块，用于基于所述特定视频段生成视频集锦。基于上述方案，所述装置还包括：提取模块，用于在所述对视频帧的内容进行分类，得到分类结果之前，从目标视频中提取所述视频帧；所述提取模块，具体用于执行以下至少之一：从所述目标视频中提取图像帧；从所述目标视频中提取音频帧。基于上述方案，所述分类模块，具体用于执行以下至少之一：对所述图像帧进行分类，获得图像分类结果；对所述音频帧进行分类，获得音频分类结果；所述第一确定模块具体用于执行以下至少之一：根据所述图像分类结果，从所述图像帧所在的视频段确定出包含所述预定图像内容的特定视频段；根据所述音频分类结果，从所述音频帧所在的视频段中确定出包含有预定音频内容的所述特定视频段。基于上述方案，所述装置还包括：获取模块，用于获取所述图像帧中的文字信息；第二确定模块，用于确定出满足预设条件的文字信息所在的视频帧；所述生成模块，用于选取所述满足预设条件的文字信息所在的视频帧，作为特定视频段；根据所述特定视频段，生成所述视频集锦。基于上述方案，所述文字信息包括：比分信息；所述第二确定模块，具体用于根据所述比分信息确定出比分值发生变化的两个图像帧。基于上述方案，所述装置还包括：定位模块，用于在获取所述文字信息之前，定位所述图像帧中比分信息的所在区域。基于上述方案，所述定位模块，具体用于统计目标视频中多个历史图像帧中比分信息所在位置进行统计，获得统计特征；根据所述统计特征，定位当前图像帧中所述比分信息的所在区域基于上述方案，所述第一确定模块，具体用于执行以下至少之一：根据所述分类结果，确定所述视频帧所在的视频段是否为包含比分发生变化的所述特定视频段；根据所述分类结果，从所述视频帧所在的视频段确定出包含比分遗憾未发生变化的所述特定视频段；根据所述分类结果，从所述视频帧所在的视频段确定出包含观众喝彩内容的所述特定视频段；根据所述分类结果，从所述视频帧所在的视频段确定出包含观众喝倒彩内容的所述特定视频段。基于上述方案，所述提取模块，具体用于从所述目标视频的一个镜头中提取N个视频帧，其中，一个所述镜头包括M个视频帧，所述N小于所述M，且所述N及所述M均为正整数。基于上述方案，所述分类模块，具体用于利用多模态分类模型基于所述视频帧的内容进行分类。第三方面，本专利技术实施例提供一种计算机存储介质，所述计算机存储介质存储有计算机可执行代码；所述计算机可执行代码被执行后，能够实现第一方面任意技术方案提供的视频集锦生成方法。第四方面，本专利技术实施例提供一种计算机程序产品，所述程序产品包括计算机可执行指令；所述计算机可执行指令被执行后，能够实现第一方面任意技术方案提供的视频集锦生成方法。第五方面，本专利技术实施例提供一种电子设备，包括：存储器，用于存储信息；处理器，与所述存储器连接，用于通过执行存储在所述存储器上的计算机可执行指令，能够实现第一方面任意技术方案提供的视频集锦生成方法。本专利技术实施例提供的视频集锦生成方法及装置、电子设备及存储介质，电子设备可以自动从目标视频中提取出视频帧，然后对视频帧进行分类；基于分类结果选择出包含特定内容的特定视频段，然后基于选择出的特定视频段生成包含特定内容的视频集锦，如此，替代人工实现了视频集锦的自动生成，提升了视频集锦的生成效率，降低了视频集锦引入的人工错误等问题；此外还降低了对工作人员的技术要求，即简化了视频集锦的生成。附图说明图1A为本专利技术实施例提供的第一种视频集锦生成方法的流程示意图；图1B为本专利技术实施例提供的第二种视频集锦生成方法的流程示意图图2为本专利技术实施例提供的第三种视频集锦生成方法的流程示意图；图3为本专利技术实施提本文档来自技高网...

【技术保护点】
1.一种视频集锦生成方法，其特征在于，包括：对视频帧的内容进行分类，得到分类结果；根据所述分类结果，确定出包含预定内容的特定视频段；基于所述特定视频段生成视频集锦。

【技术特征摘要】
1.一种视频集锦生成方法，其特征在于，包括：对视频帧的内容进行分类，得到分类结果；根据所述分类结果，确定出包含预定内容的特定视频段；基于所述特定视频段生成视频集锦。2.根据权利要求1所述的方法，其特征在于，在所述对视频帧的内容进行分类，得到分类结果之前，所述方法还包括：从目标视频中提取所述视频帧；所述从目标视频中提取所述视频帧，包括以下至少之一：从所述目标视频中提取图像帧；从所述目标视频中提取音频帧。3.根据权利要求2所述的方法，其特征在于，所述根据视频帧的内容进行分类，得到分类结果包括以下至少之一：对所述图像帧进行分类，获得图像分类结果；对所述音频帧进行分类，获得音频分类结果；所述根据所述分类结果，确定出包含预定内容的特定视频段，包括以下至少之一：根据所述图像分类结果，从所述图像帧所在的视频段确定出包含所述预定图像内容的特定视频段；根据所述音频分类结果，从所述音频帧所在的视频段中确定出包含有预定音频内容的所述特定视频段。4.根据权利要求2或3所述的方法，其特征在于，所述方法还包括：获取所述图像帧中的文字信息；确定出满足预设条件的文字信息所在的视频帧；所述基于所述特定视频段生成视频集锦，包括：选取所述满足预设条件的文字信息所在的视频帧，作为特定视频段；根据所述特定视频段，生成所述视频集锦。5.根据权利要求4所述的方法，其特征在于，所述文字信息包括：比分信息；所述确定出满足预设条件的文字信息所在的视频帧，包括：根据所述...

【专利技术属性】
技术研发人员：卢宇，范宏伟，罗思伟，
申请(专利权)人：深圳市商汤科技有限公司，
类型：发明
国别省市：广东,44