场景切换的识别方法、装置、设备、介质及计算机产品制造方法及图纸

本申请公开了一种场景切换的识别方法、装置、设备、介质及计算机产品，涉及视频处理领域。该方法包括：获取第一图像帧和第二图像帧，第一图像帧对应第一时间戳，第二图像帧对应第二时间戳；以目标时间戳为基准对第一图像帧进行像素位置变换，得到第一中间帧，目标时间戳为第一时间戳与第二时间戳之间的时间戳；以目标时间戳为基准对第二图像帧进行像素位置变换，得到第二中间帧；基于第一中间帧和第二中间帧之间的差异，确定第一图像帧与第二图像帧之间的场景切换识别结果。通过第一中间帧和第二中间帧确定的场景切换识别结果不会因第一图像帧和第二图像帧的画面内容因存在大位移情况而产生误判，提升了对视频画面中场景切换识别的准确度。识别的准确度。识别的准确度。

【技术实现步骤摘要】
场景切换的识别方法、装置、设备、介质及计算机产品


[0001]本申请涉及视频处理领域，特别涉及一种场景切换的识别方法、装置、设备、介质及计算机产品。

技术介绍

[0002]场景切换是指一段连续视频中视觉上的中断点，通常是来源于于视频拍摄时摄像机的镜头中断和切换，或后期视频编辑时的插断点。场景切换本质上可以看作视频序列在时间维度上的切分，因此，视频可以被拆分为不同场景的集合，其中每一个场景都是检索一段视频中的最小单位。场景切换检测应用于很多视频的分析和处理方法中，是一个基本的处理步骤，例如，视频压缩、视频超分、视频插帧等。
[0003]在相关技术中，场景切换的检测方法一般通过像素差分法或直方图匹配法来实现，即通过像素灰度级或颜色的统计值来计算相邻两帧图像之间的帧间差，若帧间差达到预设阈值，则认为上述两帧图像之间存在场景切换，若帧间差未达到预设阈值，则认为上述两帧图像为同一场景中的图像。
[0004]然而，以上述方式实现的场景切换的检测方式对大运动位移很敏感，若视频内所显示的内容在上述两帧图像之间发生了较大的位移，对应的直方图也会发生较大的变化，会导致场景切换的误判，即上述两帧图像并没有发生场景切换，检测系统也会判定为发生了场景切换，从而降低了场景切换检测的准确度。

技术实现思路

[0005]本申请实施例提供了一种场景切换的识别方法、装置、设备、介质及计算机产品，可以提升对视频画面中场景切换识别的准确度。所述技术方案如下：
[0006]一方面，提供了一种场景切换的识别方法，所述方法包括：
[0007]获取第一图像帧和第二图像帧，所述第一图像帧和第二图像帧为待识别视频中相邻的两帧图像，所述第一图像帧对应第一时间戳，所述第二图像帧对应第二时间戳；
[0008]以目标时间戳为基准对所述第一图像帧进行像素位置变换，得到第一中间帧，所述目标时间戳为所述第一时间戳与所述第二时间戳之间的时间戳；
[0009]以所述目标时间戳为基准对所述第二图像帧进行像素位置变换，得到第二中间帧；
[0010]基于所述第一中间帧和所述第二中间帧之间的差异，确定所述第一图像帧与所述第二图像帧之间的场景切换识别结果。
[0011]另一方面，提供了一种场景切换的识别装置，所述装置包括：
[0012]获取模块，用于获取第一图像帧和第二图像帧，所述第一图像帧和所述第二图像帧为待识别视频中相邻的两帧图像，所述第一图像帧对应第一时间戳，所述第二图像帧对应第二时间戳；
[0013]生成模块，用于以目标时间戳为基准对所述第一图像帧进行像素位置变换，得到
第一中间帧，所述目标时间戳为所述第一时间戳与所述第二时间戳之间的时间戳；
[0014]所述生成模块，还用于以所述目标时间戳为基准对所述第二图像帧进行像素位置变换，得到第二中间帧；
[0015]确定模块，用于基于所述第一中间帧和所述第二中间帧之间的差异，确定所述第一图像帧与所述第二图像帧之间的场景切换识别结果。
[0016]另一方面，提供了一种计算机设备，所述终端包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现本申请实施例中任一所述的场景切换的识别方法。
[0017]另一方面，提供一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条程序代码，所述程序代码由处理器加载并执行以实现本申请实施例中任一所述的场景切换的识别方法。
[0018]另一方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述实施例中任一所述的场景切换的识别方法。
[0019]本申请的提供的技术方案至少包括以下有益效果：
[0020]在对待识别视频中的场景切换进行识别时，分别对待识别视频中的第一图像帧和第二图像帧以目标时间戳为基准进行像素位置变换，获取第一图像帧对应的第一中间帧以及和第二图像帧对应的第二中间帧，其中，第一中间帧能够表示第一图像帧中的内容通过运动估计后在目标时间戳的显示情况，第二中间帧能够表示第二图像帧中的内容通过运动估计后在目标时间戳的显示情况，根据第一中间帧与第二中间帧之间的差异确定第一图像帧与第二图像帧之间的场景切换识别结果，该场景切换识别结果不会因第一图像帧和第二图像帧的画面内容因存在大位移情况而产生误判，提升了对视频画面中场景切换识别的准确度。
附图说明
[0021]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0022]图1是本申请一个示例性实施例提供的实施环境示意图；
[0023]图2是本申请一个示例性实施例提供的场景切换的识别方法流程图；
[0024]图3是本申请另一个示例性实施例提供的场景切换的识别方法流程图；
[0025]图4是本申请一个示例性实施例提供的检测数据示意图；
[0026]图5是本申请一个示例性实施例提供的视频插帧方法流程图；
[0027]图6是本申请一个示例性实施例提供的插帧网络结构示意图；
[0028]图7是本申请一个示例性实施例提供的场景切换的识别装置结构框图；
[0029]图8是本申请另一个示例性实施例提供的场景切换的识别装置结构框图；
[0030]图9是本申请一个示例性实施例提供的服务器的结构示意图。
具体实施方式
[0031]为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
[0032]首先，对本申请实施例中涉及的名词进行简要介绍：
[0033]人工智能(Artificial Intelligence，AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说，人工智能是计算机科学的一个综合技术，它企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法，使机器具有感知、推理与决策的功能。
[0034]人工智能技术是一门综合学科，涉及领域广泛，既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习、自动驾驶、智慧交通等几大方向。
[0035]计算机视觉技术本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种场景切换的识别方法，其特征在于，所述方法包括：获取第一图像帧和第二图像帧，所述第一图像帧和所述第二图像帧为待识别视频中相邻的两帧图像，所述第一图像帧对应第一时间戳，所述第二图像帧对应第二时间戳；以目标时间戳为基准对所述第一图像帧进行像素位置变换，得到第一中间帧，所述目标时间戳为所述第一时间戳与所述第二时间戳之间的时间戳；以所述目标时间戳为基准对所述第二图像帧进行像素位置变换，得到第二中间帧；基于所述第一中间帧和所述第二中间帧之间的差异，确定所述第一图像帧与所述第二图像帧之间的场景切换识别结果。2.根据权利要求1所述的方法，其特征在于，所述以目标时间戳为基准对所述第一图像帧进行像素位置变换，得到第一中间帧，包括：获取所述第一图像帧在所述第一时间戳与所述目标时间戳之间的第一光流信息，所述第一光流信息用于指示所述第一图像帧中像素在所述第一时间戳与所述目标时间戳之间的运动情况；基于所述第一光流信息对所述第一图像帧进行像素位置变换，得到所述第一中间帧；所述以所述目标时间戳为基准对所述第二图像帧进行像素位置变换，得到第二中间帧，包括：获取所述第二图像帧在所述第二时间戳与所述目标时间戳之间的第二光流信息，所述第二光流信息用于指示所述第二图像帧中像素在所述第二时间戳与所述目标时间戳之间的运动情况；基于所述第二光流信息对所述第二图像帧进行像素位置变换，得到所述第二中间帧。3.根据权利要求2所述的方法，其特征在于，所述基于所述第一光流信息对所述第一图像帧进行像素位置变换，得到所述第一中间帧，包括：基于所述第一光流信息获取所述第一图像帧中的像素在所述第一时间戳与所述目标时间戳之间的第一坐标变化数据；基于所述第一坐标变化数据对所述第一图像帧中的像素进行位移，得到所述第一中间帧；所述基于所述第二光流信息对所述第二图像帧进行像素位置变换，得到所述第二中间帧，包括：基于所述第二光流信息获取所述第二图像帧中的像素在所述第二时间戳与所述目标时间戳之间的第二坐标变化数据；基于所述第二坐标变化数据对所述第二图像帧中的像素进行位移，得到所述第二中间帧。4.根据权利要求3所述的方法，其特征在于，所述基于所述第一光流信息获取所述第一图像帧中的像素在所述第一时间戳与所述目标时间戳之间的第一坐标变化数据，包括：将所述第一光流信息转化为所述第一图像帧中的像素的第一运动速度；确定所述第一时间戳与所述目标时间戳之间的第一时间间隔；基于所述第一运动速度和所述第一时间间隔确定所述第一坐标变换数据；所述基于所述第二光流信息获取所述第二图像帧中的像素在所述第二时间戳与所述目标时间戳之间的第二坐标变化数据，包括：
将所述第二光流信息转化为所述第二图像帧中的像素的第二运动速度；确定所述第二时间戳与所述目标时间戳之间的第二时间间隔；基于所述第二运动速度和所述第二时间间隔确定所述第二坐标变换数据。5.根据权利要求1至4任一所述的方法，其特征在于，所述基于所述第一中间帧和所述第二中间帧之间的差异，确定所述第一图像帧与所述第二图像帧之间的场景切换识别结果，包括：对所述第一中间帧和所述第二中间帧进行对比，确定所述第一中间帧和所述第二中间帧之间的差异信息；响应于所述差异信息达到预设差异阈值，确定所述第一图像帧与所述第二图像帧之间的所述场景切换识别结果为第一结果，所述第一结果用于指示所述第一图像帧所对应的场景与所述第二图像帧所对应的场景不同；或，响应于所述差异信息与所述预设差异阈值匹配失败，确定所述第一图像帧与所述第二图像帧之间的所述场景切换识别结果为第二结果，所述第二结果用于指示所述第一图像帧所对应的场景与所述第二图像帧所对应的场景相同。6.根据权利要求5所述的方法，其特征在于，所述对所述第一中间帧和所述第二中间帧进行对比，确定所述第一中间帧和所述第二中间帧之间的差异信息，包括：确定每个像素点在所述第...

【专利技术属性】
技术研发人员：李德东，周成成，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：