一种图像标注方法、电子装置、设备及存储介质制造方法及图纸

本申请公开了一种图像标注方法、装置、电子设备以及存储介质，涉及图像处理领域，具体涉及人工智能、计算机视觉及自动驾驶等领域，包括：确定图像标注因子，其中，所述图像标注因子包括待标注图像，以及与所述待标注图像相匹配的标注元素；构建所述图像标注因子之间的关联关系；根据所述标注元素以及所述关联关系对所述待标注图像进行标注。本申请实施例能够提高图像的标注效率和标注能力。

【技术实现步骤摘要】
一种图像标注方法、电子装置、设备及存储介质
本申请涉及图像处理领域，具体涉及人工智能、计算机视觉及自动驾驶等领域。
技术介绍
图像标注可以是对图像中的物体对象根据设定的标注规则进行标注。例如，可以对图像中的车辆进行框选，或对人脸关键点进行打点处理等。图像标注可以应用于静态单帧图像标注领域，也可以应用于视频标注领域。例如，在视频预览或录像回放过程中，直接在视频的帧图像上对物体对象进行突出标记，使视频更具有针对性的视频处理方式。图像标注可以应用于诸多领域，例如，应用于自动驾驶领域定位障碍物，或应用于视频追踪领域锁定重要的视频线索信息等。
技术实现思路
本申请实施例提供了一种图像标注方法、装置、电子设备以及存储介质，以提高图像的标注效率和标注能力。第一方面，本申请实施例提供了一种图像标注方法，包括：确定图像标注因子，其中，所述图像标注因子包括待标注图像，以及与所述待标注图像相匹配的标注元素；构建所述图像标注因子之间的关联关系；根据所述标注元素以及所述关联关系对所述待标注图像进行标注。第二方面，本申请实施例提供了一种图像标注装置，包括：图像标注因子确定模块，用于确定图像标注因子，其中，所述图像标注因子包括待标注图像，以及与所述待标注图像相匹配的标注元素；关联关系构建模块，用于构建所述图像标注因子之间的关联关系；图像标注模块，用于根据所述标注元素以及所述关联关系对所述待标注图像进行标注。第三方面，本申请实施例提供了一种电子设备，包括：<br>至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行第一方面实施例所提供的图像标注方法。第四方面，本申请实施例还提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行第一方面实施例所提供的图像标注方法。本申请实施例通过确定待标注图像以及与待标注图像相匹配的标注元素，作为图像标注因子，并构建图像标注因子之间的关联关系，以根据标注元素以及关联关系对待标注图像进行标注，解决现有图像标注工具存在的标注效率低及标注能力不足等问题，从而提高图像的标注效率和标注能力。应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。附图说明附图用于更好地理解本方案，不构成对本申请的限定。其中：图1是本申请实施例提供的一种图像标注方法的流程图；图2是本申请实施例提供的一种图像标注方法的流程图；图3是本申请实施例提供的一种障碍物及接地点标注的效果示意图；图4是本申请实施例提供的一种车道线及关键点标注的效果示意图；图5是本申请实施例提供的一种关键点标注的效果示意图；图6是本申请实施例提供的一种关键点标注的效果示意图；图7是本申请实施例提供的一种语义标注的效果示意图；图8是本申请实施例提供的一种图像标注装置的结构图；图9是用来实现本申请实施例的图像标注方法的电子设备的结构示意图。具体实施方式以下结合附图对本申请的示范性实施例做出说明，其中包括本申请实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本申请的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。随着人工智能算法的逐渐成熟，人脸识别、计算机视觉及自动驾驶等技术已经成为主要的热门技术。对于这类技术来说，图像处理是必不可少的环节。为了训练相关的图像处理算法，往往需要预先构建处理过的图像数据作为样本数据，例如，将带有标注结果的图像数据作为样本数据。为了满足各种应用场景的标注需求，需要有不同类型的图像类标注工具来支持。现有的各类图像标注工具多为定制化的标注工具，通常仅能满足单一的应用场景的标注需求。例如，常见的图像标注工具包括画框工具、打点工具及画线工具。其中，画框工具主要适用于自动驾驶的障碍物、定位元素及标志牌标注场景，以及流量统计等场景。打点工具主要适用于人脸关键点、肢体关键点及自动泊车场景下的车位点等场景。画线工具主要适用于自动驾驶的车道线标注、停车位标注以及语义分割等场景。仅能满足单一应用场景标注需求的图像标注工具的维护和使用成本都较大，且不能支持混合标注需求的应用场景。如果需要对混合标注需求的应用场景的图像进行标注，必须通过项目拆分的方式串行标注后再进行结果合并。例如在某些车道线标注场景中会要求标出车道线的截断点，此时就需要在画线工具中首先完成车道线的标注，再将带有车道线标注结果的图片导入打点工具中完成截断点的标注，这无疑延长了标注流程和标注时间，标注效率和标注能力较低。在一个示例中，图1是本申请实施例提供的一种图像标注方法的流程图，本实施例可适用于利用统一的图像标注工具对不同标注需求的应用场景图像进行标注的情况，该方法可以由图像标注装置来执行，该装置可以由软件和/或硬件的方式来实现，并一般可集成在电子设备中。该电子设备可以是计算机设备。相应的，如图1所示，该方法包括如下操作：S110、确定图像标注因子，其中，所述图像标注因子包括待标注图像，以及与所述待标注图像相匹配的标注元素。其中，图像标注因子可以是图像标注场景中的操作对象，可以包括但不限于待标注图像，以及与待标注图像相匹配的标注元素。其中，待标注图像也即需要进行标注的图像。标注元素可以用于对待标注图像进行标注，标注元素的数量可以是一个或多个，本申请实施例并不对标注元素的数量进行限定。在本申请的一个可选实施例中，所述标注元素可以包括但不限于框元素、分割框元素、点元素、线元素、区域元素以及立方体元素等。除此之外，标注元素的类型还可以根据实际需求进行扩展，如平行四边形、六边形或梯形等，本申请实施例同样不对标注元素的具体类型进行限定。多元化的标注元素可以满足多种图像标注场景的不同标注需求，包括但不限于人脸关键点需求、人体骨骼点需求、自动泊车类需求、自动驾驶类需求以及语义标注需求等。在本申请实施例中，图像标注工具可以设置多种类型的标注元素，如框元素、分割框元素、点元素、线元素、区域元素以及立方体元素等。另外，根据标注场景的标注需求，图像标注工具中的标注元素还可以扩充。相应的，在利用包括多种标注元素的图像标注工具进行图像标注时，首先需要利用图像标注工具确定图像标注因子。也即确定待标注图像，以及与待标注图像相匹配的标注元素。S120、构建所述图像标注因子之间的关联关系。其中，关联关系可以是待标注图像与标注元素之间，以及各标注元素之间的组合、交集或制约关系等。相应的，在图像标注工具中确定了待标注图像，以及与待标注图像相匹配的标注元素等图像标注因子之后，即可利用图本文档来自技高网...

【技术保护点】
1.一种图像标注方法，包括：/n确定图像标注因子，其中，所述图像标注因子包括待标注图像，以及与所述待标注图像相匹配的标注元素；/n构建所述图像标注因子之间的关联关系；/n根据所述标注元素以及所述关联关系对所述待标注图像进行标注。/n

【技术特征摘要】
1.一种图像标注方法，包括：
确定图像标注因子，其中，所述图像标注因子包括待标注图像，以及与所述待标注图像相匹配的标注元素；
构建所述图像标注因子之间的关联关系；
根据所述标注元素以及所述关联关系对所述待标注图像进行标注。


2.根据权利要求1所述的方法，其中，所述构建所述图像标注因子之间的关联关系，包括：
构建所述待标注图像与所述标注元素之间的组合关系。


3.根据权利要求1所述的方法，其中，所述构建所述图像标注因子之间的关联关系，包括：
根据各所述标注元素之间的制约规则，构建各所述标注元素之间的制约关系；
其中，所述制约关系包括包含关系、连接关系及交并补关系。


4.根据权利要求2或3所述的方法，其中，所述标注元素包括框元素、分割框元素、点元素、线元素、区域元素以及立方体元素。


5.根据权利要求1所述的方法，其中，所述根据所述标注元素以及所述关联关系对所述待标注图像进行标注，包括：
根据所述关联关系约束各所述标注元素之间的相对位置关系；
根据各所述标注元素以及各所述标注元素之间的相对位置关系对所述待标注图像进行标注。


6.根据权利要求5所述的方法，其中，所述标注元素至少包括框元素以及点元素；
所述构建所述图像标注因子之间的关联关系，包括：
构建所述待标注图像与各所述标注元素之间的组合关系；以及，
构建所述框元素与所述点元素之间的包含关系；
所述根据各所述标注元素以及各所述标注元素之间的相对位置关系对所述待标注图像进行标注，包括：
根据所述框元素对所述待标注图像中的标注对象进行框选标注；
根据所述点元素对所述待标注图像中的标注对象的接地点进行标注；
其中，所述点元素包含在所述框元素的框内区域中。


7.根据权利要求5所述的方法，其中，所述标注元素至少包括线元素以及点元素；
所述构建所述图像标注因子之间的关联关系，包括：
构建所述待标注图像与各所述标注元素之间的组合关系；以及，
构建所述线元素与所述点元素之间的包含关系；
所述根据各所述标注元素以及各所述标注元素之间的相对位置关系对所述待标注图像进行标注，包括：
根据所述线元素对所述待标注图像中的标注对象进行划线标注；
根据所述点元素对所述标注对象的截断点进行标注；
其中，所述点元素包含在所述线元素的线段上。


8.根据权利要求5所述的方法，其中，所述标注元素至少包括线元素；
所述构建所述图像标注因子之间的关联关系，包括：
构建所述待标注图像与所述线元素之间的组合关系；以及，
构建所述线元素与所述线元素之间的连接关系；
所述根据各所述标注元素以及各所述标注元素之间的相对位置关系对所述待标注图像进行标注，包括：
根据所述线元素对所述待标注图像中的标注对象进行划线标注；
其中，各所述线元素之间相互连接。


9.根据权利要求5所述的方法，其中，所述标注元素至少包括点元素；
所述构建所述图像标注因子之间的关联关系，包括：
构建所述待标注图像与所述点元素之间的组合关系；
所述根据各所述标注元素以及各所述标注元素之间的相对位置关系对所述待标注图像进行标注，包括：
根据所述点元素对所述待标注图像中的标注对象进行打点标注；
其中，各所述点元素之间不完全重合。


10.根据权利要求5所述的方法，其中，所述标注元素至少包括区域元素；
所述构建所述图像标注因子之间的关联关系，包括：
构建所述待标注图像与所述区域元素之间的组合关系；以及，
构建所述区域元素之间的交并补关系；
所述根据各所述标注元素以及各所述标注元素之间的相对位置关系对所述待标注图像进行标注，包括：
根据所述区域元素对所述待标注图像中的标注对象进行多边形区域标注；
其中，各所述区域元素之间进行自动分割和拼接。


11.一种图像标注...

【专利技术属性】
技术研发人员：杨雪，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：北京;11