本公开实施例提供一种视频标注方法、装置、设备、介质及产品，该方法包括：确定待标注视频中待标注的子片段，获得目标子片段；获取所述目标子片段的首帧对应的首帧标注结果；基于所述首帧标注结果，生成所述目标子片段的尾帧对应的尾帧标注结果；根据所述首帧标注结果和所述尾帧标注结果，生成所述目标子片段中间帧的标注结果，以获得所述待标注的目标子片段的标注结果；基于所述目标子片段的标注结果，生成所述待标注视频的目标标注结果。本公开的技术方案提高了视频标注效率。技术方案提高了视频标注效率。技术方案提高了视频标注效率。
【技术实现步骤摘要】
视频标注方法、装置、设备、介质及产品
[0001]本公开实施例涉及计算机
，尤其涉及一种视频标注方法、装置、设备、介质及产品。
技术介绍
[0002]视频处理可以应用于诸多
，例如，人工智能、智能交通、金融、内容推荐等多种
，其具体涉及到的技术例如可以包括目标追踪、目标检测等。
[0003]相关技术中，视频的标注一般采用人工逐帧进行标注。但是，采用人工标注的方式，标注效率较低，标注成本过高。
技术实现思路
[0004]本公开实施例提供一种视频标注方法、装置、设备、介质及产品，以克服采用人工标注的方式，标注效率较低，标注成本过高的技术问题。
[0005]第一方面，本公开实施例提供一种视频标注方法，包括：
[0006]确定待标注视频中待标注的子片段，获得目标子片段；
[0007]获取所述目标子片段的首帧对应的首帧标注结果；
[0008]基于所述首帧标注结果，生成所述目标子片段的尾帧对应的尾帧标注结果；
[0009]根据所述首帧标注结果和所述尾帧标注结果，生成所述目标子片段中间帧的标注结果，以获得所述待标注的目标子片段的标注结果；
[0010]基于所述目标子片段的标注结果，生成所述待标注视频的目标标注结果。
[0011]第二方面，本公开实施例提供一种视频标注装置，包括：
[0012]第一确定单元，用于确定待标注视频中待标注的子片段，获得目标子片段；
[0013]首帧标注单元，用于获取所述目标子片段的首帧对应的首帧标注结果；
[0014]尾帧标注单元，用于基于所述首帧标注结果，生成所述目标子片段的尾帧对应的尾帧标注结果；
[0015]片段标注单元，用于根据所述首帧标注结果和所述尾帧标注结果，生成所述目标子片段中间帧的标注结果，以获得所述待标注的目标子片段的标注结果
[0016]第二确定单元，用于基于所述目标子片段的标注结果，生成所述待标注视频的目标标注结果。
[0017]第三方面，本公开实施例提供一种电子设备，包括：处理器、存储器；
[0018]所述存储器存储计算机执行指令；
[0019]所述处理器执行所述存储器存储的计算机执行指令，使得所述处理器配置有如上第一方面以及第一方面各种可能的设计所述的视频标注方法。
[0020]第四方面，本公开实施例提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上第一方面以及第一方面各种可能的设计所述的视频标注方法。
[0021]第五方面，本公开实施例提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上第一方面以及第一方面各种可能的设计所述的视频标注方法。
[0022]本实施例提供的技术方案，针对待标注视频，可以从片段维度，确定待标注的目标子片段。对目标子片段进行详细标注时，可以先获取目标子片段的首帧对应的首帧标注结果，再基于首帧标注结果，生成目标子片段的尾帧对应的尾帧标注结果，可以利用首帧标注结果和尾帧标注结果对目标子片段中的中间帧进行标注，以实现对目标子片段的中间帧的标注，获得目标子片段的标注结果。尾帧可通过首帧自动标注获得，而中间帧可以通过首帧标注结果和尾帧标注结果自动标注获得，实现中间帧的高效标注。获得目标子片段的标注结果之后，可以确定待标注视频的目标标注结果，通过时间维度更小的片段标注，可以提高片段标注准确性，相比于直接对待标注视频进行标注，效率更高，准确度更高。
附图说明
[0023]为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0024]图1为本公开实施例提供的一种视频标注方法的一个应用示例图；
[0025]图2为本公开实施例提供的一种视频标注方法的一个实施例的流程图；
[0026]图3为本公开实施例提供的一种视频标注方法的又一个实施例的流程图；
[0027]图4为本公开实施例提供的一个特征传播示例图；
[0028]图5为本公开实施例提供的一种视频标注方法的又一个实施例的流程图；
[0029]图6为本公开实施例提供的一个首帧标注结果的更新示例图；
[0030]图7为本公开实施例提供的一种视频标注方法的又一个实施例的流程图；
[0031]图8为本公开实施例提供的一种视频标注方法的又一个实施例的流程图；
[0032]图9为本公开实施例提供的一个视频子片段的划分示例图；
[0033]图10为本公开实施例提供的一个关键帧的提取示例图；
[0034]图11为本公开实施例提供的一种视频标注装置的一个实施例的结构示意图；
[0035]图12为本公开实施例提供的一种电子设备的硬件结构示意图。
具体实施方式
[0036]为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。
[0037]本公开的技术方案可以应用于视频标注场景中，通过获取首帧标注结果，并通过首帧标注结果自动标注尾帧，通过首帧标注结果和尾帧标注结果的获取可以对图像帧中的其他图像帧进行自动标注，提高视频的标注效率。
[0038]相关技术中，视频处理模型的训练需要大量的视频样本。视频样本可以包括视频
本身以及视频的标签。视频的标签一般可以指视频中各图像帧的标签，各图像帧，也即视频中各图像帧的标注结果一般是人工标注获得。逐帧实现人工标注一般需要大量人工完成，标注效率较低，标注成本较高。
[0039]为了解决人工标注成本过高的问题，本公开考虑到自动完成对图像的标注。而图像的自动标注一般需要图像的区域识别模型，如果直接通过区域识别模型，获得的标注结果也不够准确。为了获得准确的标注结果，可以采用手动标注部分图像，再利用手动标注的图像，采用半监督标注方式，对剩余图像进行标注。通过此方式标注的图像准确度更高，标注效率也大大提升。
[0040]下面将以具体实施例对本公开的技术方案以及本公开的技术方案如何解决上述技术问题进行详细说明。下面几个具体实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图对本专利技术的实施例进行详细描述。
[0041]图1为本公开实施例提供的一种视频标注方法的一个应用示例图，该视频标注方法可以应用于电子设备1中，电子设备1可以包括显示装置2。显示装置2可以显示待标注视频。待标注视频可以基于多个关键帧被划分为至少一个视频子片段。根据本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频标注方法，其特征在于，包括：确定待标注视频中待标注的子片段，获得目标子片段；获取所述目标子片段的首帧对应的首帧标注结果；基于所述首帧标注结果，生成所述目标子片段的尾帧对应的尾帧标注结果；根据所述首帧标注结果和所述尾帧标注结果，生成所述目标子片段中间帧的标注结果，以获得所述待标注的目标子片段的标注结果；基于所述目标子片段的标注结果，生成所述待标注视频的目标标注结果。2.根据权利要求1所述的方法，其特征在于，所述确定所述待标注视频中待标注的子片段，获得目标子片段，包括：提取所述待标注视频的关键帧；将所述关键帧中相邻的两个关键帧在所述待标注视频所围成的视频区间划分为一个视频子片段，获得至少一个视频子片段；从所述至少一个视频子片段中确定待标注的所述目标子片段。3.根据权利要求2所述的方法，其特征在于，所述提取待标注视频的至少一个关键帧，包括：针对所述待标注视频中的图像帧，计算各图像帧的运动幅度值；根据所述运动幅度值获得所述图像帧中的至少一个关键帧。4.根据权利要求1所述的方法，其特征在于，所述基于所述首帧的标注结果生成所述目标子片段尾帧的标注结果，包括：获取所述目标子片段的首帧对应的首帧标注结果；根据所述首帧标注结果，利用前向传播算法确定所述尾帧对应的尾帧标注结果。5.根据权利要求4所述的方法，其特征在于，所述根据所述首帧标注结果，利用前向传播算法确定所述尾帧对应的尾帧标注结果，包括：利用所述前向传播算法，将所述首帧标注结果向所述目标子片段中未标注的图像帧进行标注结果的顺序传播，获得所述目标子片段中未标注图像帧的标注结果；获取所述目标子片段的最后一个图像帧的标注结果作为所述尾帧对应的尾帧标注结果。6.根据权利要求1所述的方法，其特征在于，所述根据所述首帧标注结果和所述尾帧标注结果，生成所述目标子片段中间帧的标注结果，包括：基于所述首帧标注结果，结合前向传播算法，提取所述目标子片段的中间帧的前向传播特征；基于所述尾帧标签结果，结合后向传播算法，提取所述目标子片段的中间帧的后向传播特征；将所述前向传播特征和所述后向传播特征进行特征融合处理，获得所述中间帧的目标图像特征；根据所述目标图像特征，确定所述中间帧的标注结果。7.根据权利要求6所述的方法，其特征在于，所述将所述...
【专利技术属性】
技术研发人员：颜鹏翔，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。