视频标注方法及装置制造方法及图纸

本发明专利技术提供了一种视频标注方法及装置，所述视频标注方法包括：接收至少两段视频数据；检测各段视频数据中所包括的对象，以用于对各段视频数据之间相关联的对象进行关联标注；以及基于所述关联标注从所述各段视频数据中提取所述相关联的对象，以用于作为关联数据一起保存和/或输出。根据本发明专利技术实施例的视频标注方法及装置自动检测多段视频数据中的对象，并基于对各段视频数据之间相关联的对象的关联标注，将各段视频数据之间相关联的对象提取出来一起保存和/或输出，实现了对多段视频数据的高效率标注和对多段视频数据之间相关联的对象的高可靠性拼接。

Video annotation method and device

The present invention provides a method and device for video annotation, the video annotation method comprises: receiving at least two video data; object detection in video data segments including, for each of the video data associated with the object based on the correlation dimension; and associated annotation object extraction from the associated each section of the video data, to be used as an associated data saved and / or output. According to an embodiment of the present invention video annotation method and device for automatic detection of objects in video data, and based on the correlation between the sections of the video data associated with the object will be marked, between the sections of the video data associated with the object extracted saved and / or output, to achieve a high reliability of the mosaic of multi video data the efficiency of annotation and between multi video data associated with the object.

【技术实现步骤摘要】
视频标注方法及装置
本专利技术涉及视频处理
，更具体地涉及一种视频标注方法及装置。
技术介绍
对数据中的关键信息进行手工标注分类是一种常见的产生训练数据的方法，但在对于视频中的关键数据(例如视频中所包括的目标对象)的人工标注往往并没有一个很便利的方式。一般情况下人们往往通过人工将视频中的关键数据通过截图的方式提取出来进行人工标注。此外，在多个视频内标注同一类关键数据时往往必须分别提取各视频中的关键数据进行标注，最后再将同一类数据进行汇总，当视频多时很容易产生混乱，并且耗费精力。同时纯人工的方式也增加了多人合作标注时的管理成本与数据汇总成本等问题。
技术实现思路
为了解决上述问题中的至少一个而提出了本专利技术。根据本专利技术一方面，提供了一种视频标注方法，所述视频标注方法包括：接收至少两段视频数据；检测各段视频数据中所包括的对象，以用于对各段视频数据之间相关联的对象进行关联标注；以及基于所述关联标注从所述各段视频数据中提取所述相关联的对象，以用于作为关联数据一起保存和/或输出。在本专利技术的一个实施例中，所述各段视频数据之间相关联的对象指所述各段视频数据中均包括的同一类别/属性的对象。在本专利技术的一个实施例中，所述各段视频数据之间相关联的对象指所述各段视频数据中均包括的同一对象。在本专利技术的一个实施例中，所述从各段视频数据中检测的对象为所述各段视频数据中的运动对象。在本专利技术的一个实施例中，所述各段视频数据分别来自于具有不同视野域的图像采集设备。在本专利技术的一个实施例中，所述对各段视频数据之间相关联的对象的关联标注包括：将各段视频数据之间相关联的对象标注为同一对象或同类对象。在本专利技术的一个实施例中，当所述各段视频数据之间相关联的对象不止一类时，对各类别的相关联的对象分类关联标注，并基于所述分类关联标注对各类别的相关联的对象分类提取，以用于分类保存和/或分类输出。在本专利技术的一个实施例中，所述对各段视频数据之间相关联的对象进行关联标注的步骤由人工标注员来执行。根据本专利技术另一方面，提供了一种视频标注装置，所述视频标注装置包括：接收模块，用于接收至少两段视频数据；检测模块，用于检测各段视频数据中所包括的对象，以用于对各段视频数据之间相关联的对象进行关联标注；以及提取模块，用于基于所述关联标注从所述各段视频数据中提取所述相关联的对象，以用于作为关联数据一起保存和/或输出。在本专利技术的一个实施例中，所述各段视频数据之间相关联的对象指所述各段视频数据中均包括的同一类别/属性的对象。在本专利技术的一个实施例中，所述各段视频数据之间相关联的对象指所述各段视频数据中均包括的同一对象。在本专利技术的一个实施例中，所述检测模块从各段视频数据中检测的对象为所述各段视频数据中的运动对象。在本专利技术的一个实施例中，所述接收模块接收的各段视频数据分别来自于具有不同视野域的图像采集设备。在本专利技术的一个实施例中，所述对各段视频数据之间相关联的对象的关联标注包括：将各段视频数据之间相关联的对象标注为同一对象或同类对象。在本专利技术的一个实施例中，当所述各段视频数据之间相关联的对象不止一类时，所述关联标注包括对各类别的相关联的对象分类关联标注，并且所述提取模块用于基于所述分类关联标注对各类别的相关联的对象分类提取，以用于分类保存和/或分类输出。根据本专利技术实施例的视频标注方法及装置自动检测多段视频数据中的对象，并基于对各段视频数据之间相关联的对象的关联标注，将各段视频数据之间相关联的对象提取出来一起保存和/或输出，实现了对多段视频数据的高效率标注和对多段视频数据之间相关联的对象的高可靠性拼接。附图说明通过结合附图对本专利技术实施例进行更详细的描述，本专利技术的上述以及其它目的、特征和优势将变得更加明显。附图用来提供对本专利技术实施例的进一步理解，并且构成说明书的一部分，与本专利技术实施例一起用于解释本专利技术，并不构成对本专利技术的限制。在附图中，相同的参考标号通常代表相同部件或步骤。图1示出用于实现根据本专利技术实施例的视频标注方法和装置的示例电子设备的示意性框图；图2示出根据本专利技术实施例的视频标注方法的示意性流程图；图3示出根据本专利技术实施例的视频标注方法部分操作的示例图；图4示出根据本专利技术实施例的视频标注装置的示意性框图；以及图5示出根据本专利技术实施例的视频标注系统的示意性框图。具体实施方式为了使得本专利技术的目的、技术方案和优点更为明显，下面将参照附图详细描述根据本专利技术的示例实施例。显然，所描述的实施例仅仅是本专利技术的一部分实施例，而不是本专利技术的全部实施例，应理解，本专利技术不受这里描述的示例实施例的限制。基于本专利技术中描述的本专利技术实施例，本领域技术人员在没有付出创造性劳动的情况下所得到的所有其它实施例都应落入本专利技术的保护范围之内。首先，参照图1来描述用于实现本专利技术实施例的视频标注方法和装置的示例电子设备100。如图1所示，电子设备100包括一个或多个处理器102、一个或多个存储装置104、输入装置106、输出装置108以及图像传感器110，这些组件通过总线系统112和/或其它形式的连接机构(未示出)互连。应当注意，图1所示的电子设备100的组件和结构只是示例性的，而非限制性的，根据需要，所述电子设备也可以具有其他组件和结构。所述处理器102可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元，并且可以控制所述电子设备100中的其它组件以执行期望的功能。所述存储装置104可以包括一个或多个计算机程序产品，所述计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令，处理器102可以运行所述程序指令，以实现下文所述的本专利技术实施例中(由处理器实现)的客户端功能以及/或者其它期望的功能。在所述计算机可读存储介质中还可以存储各种应用程序和各种数据，例如所述应用程序使用和/或产生的各种数据等。所述输入装置106可以是用户用来输入指令的装置，并且可以包括键盘、鼠标、麦克风和触摸屏等中的一个或多个。所述输出装置108可以向外部(例如用户)输出各种信息(例如图像或声音)，并且可以包括显示器、扬声器等中的一个或多个。所述图像传感器110可以拍摄用户期望的图像(例如照片、视频等)，并且将所拍摄的图像存储在所述存储装置104中以供其它组件使用。示例性地，用于实现根据本专利技术实施例的视频标注方法和装置的示例电子设备可以被实现为诸如智能手机、平板电脑等。下面，将参考图2和图3描述根据本专利技术实施例的视频标注方法200。在步骤S210，接收至少两段视频数据。在一个实施例中，所接收的视频数据为用于提取某种训练数据的基础数据。多个或多段视频数据，例如来自同一图像采集设备在不同时间拍摄的多段视频数据，或者来自具有不同视野域的图像采集设备在某时间段内相继拍摄的多段视频数据，往往可能包括相关联的对象，例如同一类型或同一属性的对象或者甚至是同一对象等。因此，为了从多段视频数据中提取出多段视频数据之间相关联的对象以获得更多该类对象或该对象的训练数据，需要接收多段视频数据，本文档来自技高网...

【技术保护点】
一种视频标注方法，其特征在于，所述视频标注方法包括：接收至少两段视频数据；检测各段视频数据中所包括的对象，以用于对各段视频数据之间相关联的对象进行关联标注；以及基于所述关联标注从所述各段视频数据中提取所述相关联的对象，以用于作为关联数据一起保存和/或输出。

【技术特征摘要】
1.一种视频标注方法，其特征在于，所述视频标注方法包括：接收至少两段视频数据；检测各段视频数据中所包括的对象，以用于对各段视频数据之间相关联的对象进行关联标注；以及基于所述关联标注从所述各段视频数据中提取所述相关联的对象，以用于作为关联数据一起保存和/或输出。2.根据权利要求1所述的视频标注方法，其特征在于，所述各段视频数据之间相关联的对象指所述各段视频数据中均包括的同一类别/属性的对象。3.根据权利要求1所述的视频标注方法，其特征在于，所述各段视频数据之间相关联的对象指所述各段视频数据中均包括的同一对象。4.根据权利要求1所述的视频标注方法，其特征在于，所述从各段视频数据中检测的对象为所述各段视频数据中的运动对象。5.根据权利要求1所述的视频标注方法，其特征在于，所述各段视频数据分别来自于具有不同视野域的图像采集设备。6.根据权利要求1-5中的任一项所述的视频标注方法，其特征在于，所述对各段视频数据之间相关联的对象的关联标注包括：将各段视频数据之间相关联的对象标注为同一对象或同类对象。7.根据权利要求1-5中的任一项所述的视频标注方法，其特征在于，当所述各段视频数据之间相关联的对象不止一类时，对各类别的相关联的对象分类关联标注，并基于所述分类关联标注对各类别的相关联的对象分类提取，以用于分类保存和/或分类输出。8.根据权利要求1-5中的任一项所述的视频标注方法，其特征在于，所述对各段视频数据之间相关联的对象进行关联标注的步骤由人工标...

【专利技术属性】
技术研发人员：毛智睿，
申请(专利权)人：北京旷视科技有限公司，北京迈格威科技有限公司，
类型：发明
国别省市：北京,11