视频识别方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及一种视频识别方法、装置、计算机设备和存储介质。所述方法包括：根据待识别视频的当前次的N帧采样帧的目标特征图得到融合特征图，并根据融合特征图确定视频片段的精彩预测结果；视频片段包括当前次的N帧采样帧，进而根据各次的视频片段的精彩预测结果，确定待识别视频的精彩视频片段。其中N个目标特征图包括目标采样帧以及目标采样帧的邻近采样帧的目标特征图，邻近采样帧的目标特征图包括上一次的N帧采样帧中的至少一帧采样帧的目标特征图，目标特征图基于采样帧的至少两种不同信息确定，N大于等于2。采用本方法能够高效地确定出识别出视频中的精彩视频片段，省时省力。力。力。

【技术实现步骤摘要】
视频识别方法、装置、计算机设备和存储介质


[0001]本申请涉及视频
，特别是涉及一种视频识别方法、装置、计算机设备和存储介质。

技术介绍

[0002]随着互联网技术的迅猛发展和视频拍摄设备的普及，每天都有大量视频产生。然而人们通常只关注视频中的某些有特定意义的精彩内容，如何从大量视频中确定出精彩片段成为了本领域人员的重点研究内容。
[0003]目前通常是由人工识别出视频中的精彩视频片段，但这种方式效率低下，对人力和时间造成极大的浪费。因此，如何省时省力地识别出视频中的精彩视频片段，是本领域人员的重点研究内容。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种能够省时省力的视频识别方法、装置、计算机设备和存储介质。
[0005]第一方面，本申请提供了一种视频识别方法。该方法包括：
[0006]根据待识别视频的当前次的N帧采样帧的目标特征图得到融合特征图；N个目标特征图包括目标采样帧以及目标采样帧的邻近采样帧的目标特征图，邻近采样帧的目标特征图包括上一次的N帧采样帧中的至少一帧采样帧的目标特征图，目标特征图基于采样帧的至少两种不同信息确定，N大于等于2；
[0007]根据融合特征图确定视频片段的精彩预测结果；视频片段包括当前次的N帧采样帧；
[0008]根据各次的视频片段的精彩预测结果，确定待识别视频的精彩视频片段。
[0009]第二方面，本申请还提供了一种视频识别装置。该装置包括：
[0010]获得模块，用于根据待识别视频的当前次的N帧采样帧的目标特征图得到融合特征图；N个目标特征图包括目标采样帧以及目标采样帧的邻近采样帧的目标特征图，邻近采样帧的目标特征图包括上一次的N帧采样帧中的至少一帧采样帧的目标特征图，目标特征图基于采样帧的至少两种不同信息确定，N大于等于2；
[0011]第一确定模块，用于根据融合特征图确定视频片段的精彩预测结果；视频片段包括当前次的N帧采样帧；
[0012]第二确定模块，用于根据各次的视频片段的精彩预测结果，确定待识别视频的精彩视频片段。
[0013]第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述任一方法的步骤。
[0014]第四方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，
其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一方放的步骤。
[0015]第五方面，本申请还提供了一种计算机程序产品。所述计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述任一方法的步骤。
[0016]上述视频识别方法、装置、计算机设备和存储介质，根据待识别视频的当前次的N帧采样帧的目标特征图得到融合特征图，并根据融合特征图确定视频片段的精彩预测结果；视频片段包括当前次的N帧采样帧，进而根据各次的视频片段的精彩预测结果，确定待识别视频的精彩视频片段。由于目标特征图基于采样帧的至少两种不同信息确定，因此确定出的目标特征图的信息比较丰富。并且，由于N个目标特征图包括目标采样帧以及目标采样帧的邻近采样帧的目标特征图，邻近采样帧的目标特征图包括上一次的N帧采样帧中的至少一帧采样帧的目标特征图，因此确定出目标特征图就可以实现局部早融合。进而，根据当前次的N帧采样帧的目标特征图得到融合特征图就可以实现整体的晚融合。通过局部早融合和整体晚融合的方式，就可以兼顾特征提取的效率和运行效率，并提高识别的精度。在基于融合特征图得到视频片段的精彩预测结果之后，就可以根据各次的视频片段的精彩预测结果，确定待识别视频的精彩视频片段，无需人工识别出视频中的精彩视频片段，省时省力。
附图说明
[0017]图1为本申请实施例中视频片段识别方法的应用环境图；
[0018]图2为本申请实施例中视频识别方法的流程示意图；
[0019]图3为本申请实施例中一种得到目标特征图的流程示意图；
[0020]图4为本申请实施例中一种确定初始拼接特征图的流程示意图；
[0021]图5为本申请实施例中一种得到初始拼接特征图的过程示意图；
[0022]图6为本申请实施例中又一种确定初始拼接特征图的流程示意图；
[0023]图7为本申请实施例中又一种得到初始拼接特征图的过程示意图；
[0024]图8为本申请实施例中又一种确定初始拼接特征图的流程示意图；
[0025]图9为本申请实施例中又一种得到初始拼接特征图的过程示意图；
[0026]图10为本申请实施例中一种确定精彩视频片段的原理示意图；
[0027]图11为本申请实施例中一种确定精彩预测结果的流程示意图；
[0028]图12为本申请实施例中一种得到精彩预测结果的过程示意图；
[0029]图13为本申请实施例中一种确定精彩视频片段的流程示意图；
[0030]图14为本申请实施例中一种视频识别方法的过程示意图；
[0031]图15为本申请实施例中视频识别装置的结构框图。
具体实施方式
[0032]为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
[0033]图1为本申请实施例中视频片段识别方法的应用环境图，在本申请实施例中提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图1所示。该计算机设
备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种视频片段识别方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
[0034]本领域技术人员可以理解，图1中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
[0035]本实施例以该方法应用于终端进行举例说明，可以理解的是，该方法也可以应用于服务器，还可以应用于包括终端和服务器的系统，并通过终端和服务器的交互实现。其中，终端可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑。服务器可以用独立的服务器或者是多个服务器组成的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频识别方法，其特征在于，所述方法包括：根据待识别视频的当前次的N帧采样帧的目标特征图得到融合特征图；N个所述目标特征图包括目标采样帧以及所述目标采样帧的邻近采样帧的目标特征图，所述邻近采样帧的目标特征图包括上一次的N帧采样帧中的至少一帧采样帧的目标特征图，所述目标特征图基于所述采样帧的至少两种不同信息确定，N大于等于2；根据所述融合特征图确定视频片段的精彩预测结果；所述视频片段包括所述当前次的N帧采样帧；根据各次的视频片段的精彩预测结果，确定所述待识别视频的精彩视频片段。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：基于所述当前次的N帧采样帧中的第一采样帧和第二采样帧，获取所述第一采样帧和所述第二采样帧的至少两种不同信息；其中，所述第一采样帧和所述第二采样帧为相邻两个采样帧或间隔至少一帧采样帧的两个采样帧，所述至少两种不同信息包括所述第一采样帧的图像信息、所述第二采样帧的图像信息、所述第一采样帧与第二采样帧之间的关联信息中至少两项。3.根据权利要求2所述的方法，其特征在于，所述关联信息包括所述第一采样帧和所述第二采样帧之间的光流信息、像素差信息、卷积特征信息中至少一项。4.根据权利要求3所述的方法，其特征在于，所述基于所述当前次的N帧采样帧中的第一采样帧和第二采样帧，获取所述第一采样帧和所述第二采样帧的至少两种不同信息，包括：基于所述第一采样帧和所述第二采样帧，确定所述第一采样帧的初始拼接特征图；所述第一采样帧的时间点早于所述第二采样帧的时间点，所述初始拼接特征图包括所述至少两种不同信息；将所述初始拼接特征图输入至精彩预测网络中的主干网络，得到所述目标特征图；或者，将所述初始拼接特征图作为所述目标特征图。5.根据权利要求4所述的方法，其特征在于，所述基于所述第一采样帧和所述第二采样帧，确定所述第一采样帧的初始拼接特征图，包括：基于所述第一采样帧和所述第二采样帧得到所述光流信息，并提取所述光流信息的特征得到第一特征图；提取所述第一采样帧的特征得到第二特征图；对所述第一特征图和所述第二特征图进行拼接处理得到所述初始拼接特征图；所述初始拼接特征图包括所述光流信息以及目标图像信息，所述目标图像信息包括所述第一采样帧的图像信息和/或所述第二采样帧的图像信息。6.根据权利要求4所述的方法，其特征在于，所述基于所述第一采样帧和所述第二采样帧，确定所述第一采样帧的初始拼接特征图，包括：基于所述第一采样帧和所述第二采样帧得到所述像素差信息，并提取所述像素差信息的特征得到第三特征图；提取所述第一采样帧的特征得到第四特征图；对所述第三特征图和所述第四特征图进行拼接处理得到所述初始拼接特征图；所述初始拼接特征图包括所述像素差信息以及目标图像信息，所述目标图像信息包括所述第一采
样帧的图像信息和/或所述第二采样帧的图像信息。7.根据权利要求4所述的方法，其特征在于，所述基于...

【专利技术属性】
技术研发人员：唐小林，
申请(专利权)人：影石创新科技股份有限公司，
类型：发明
国别省市：