图片标注方法、装置、电子设备以及存储介质制造方法及图纸

技术编号:34426611 阅读:19 留言:0更新日期:2022-08-06 15:58
本公开提供了一种图片标注方法、装置、电子设备以及存储介质。涉及人工智能技术领域,尤其涉及数据清洗、数据标注等技术领域。具体实现方案为:获取外部存储系统中的原始图片的第一存储路径;根据第一存储路径获取原始图片,并基于原始图片获取待标注图片;将待标注图片存储到外部存储系统中,并获取待标注图片在外部存储系统中的第二存储路径;基于第二存储路径获取待标注图片,并对待标注图片进行标注处理。根据本公开的技术方案,能实现图片上传和图片标注之间的解耦,不仅能上传海量图片,还提升图片标注的效率。还提升图片标注的效率。还提升图片标注的效率。

【技术实现步骤摘要】
图片标注方法、装置、电子设备以及存储介质


[0001]本公开涉及人工智能
,尤其涉及数据清洗、数据标注等
,具体涉及一种图片标注方法、装置、电子设备以及存储介质。

技术介绍

[0002]随着人工智能的发展,人工智能技术已经被应用到各行各业。作为人工智能行业的基础,数据是实现这一能力的决定性条件之一。因此,为机器学习算法训练提供高质量的标注数据服务成为了决定人工智能应用高度的重要条件之一。相关技术中,标注流程主要是通过前端上传图片,后端存储并进行图片标注,存在上传速度缓慢,标注效率低等问题。

技术实现思路

[0003]本公开提供了一种图片标注方法、装置、电子设备以及存储介质。
[0004]根据本公开的第一方面,提供了一种图片标注方法,包括:
[0005]获取外部存储系统中的原始图片的第一存储路径;
[0006]根据第一存储路径获取原始图片,并基于原始图片获取待标注图片;
[0007]将待标注图片存储到外部存储系统中,并获取待标注图片在外部存储系统中的第二存储路径;
[0008]基于第二存储路径获取待标注图片,并对待标注图片进行标注处理。
[0009]根据本公开的第二方面,提供了一种图片处理装置,包括:
[0010]获取模块,用于获取外部存储系统中的原始图片的第一存储路径;
[0011]第一处理模块,用于根据第一存储路径获取原始图片,并基于原始图片获取待标注图片;
[0012]第二处理模块,用于将待标注图片存储到外部存储系统中,并获取待标注图片在外部存储系统中的第二存储路径;
[0013]标注模块,用于基于第二存储路径获取待标注图片,并对待标注图片进行标注处理。
[0014]根据本公开的第三方面,提供了一种电子设备,包括:
[0015]至少一个处理器;以及
[0016]与该至少一个处理器通信连接的存储器;其中,
[0017]该存储器存储有可被该至少一个处理器执行的指令,该指令被该至少一个处理器执行,以使该至少一个处理器能够执行上述第一方面所提供的方法。
[0018]根据本公开的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,该计算机指令用于使该计算机执行上述第一方面所提供的方法。
[0019]根据本公开的第五方面,提供了一种计算机程序产品,包括计算机程序,该计算机程序在被处理器执行时实现上述第一方面所提供的方法。
[0020]根据本公开的技术方案,能实现图片上传和图片标注之间的解耦,不仅能上传海
量图片,还提升图片标注的效率。
[0021]应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0022]附图用于更好地理解本方案,不构成对本公开的限定。其中:
[0023]图1是根据本公开实施例的图片标注方法的流程示意图;
[0024]图2是根据本公开实施例的图片标注的架构示意图;
[0025]图3是根据本公开实施例的图片标注装置的组成结构示意图;
[0026]图4是根据本公开实施例的图片标注的场景示意图;
[0027]图5是用来实现本公开实施例的图片标注方法的电子设备的框图。
具体实施方式
[0028]以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
[0029]本公开的说明书实施例和权利要求书及上述附图中的术语"第一"、"第二"和"第三"等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。此外,术语"包括"和"具有"以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元。方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0030]相关技术中,图片通过前端页面进行上传,可同时上传百张图片。图片上传过程中进行图片格式校验,如果格式不匹配进行丢弃。图片上传后存储到本地硬盘。图片标注过程中,从本地硬盘读取图片进行标注工作。然而,通过页面进行上传,一次只能上传百张图片,上传效率低,难以支撑数万图片上传。图片上传过程中进行图片清洗,影响上传效率。图片清洗时,只限于图片格式的清洗,清洗纬度少,容易上传过多无效图片,影响标注效率。不支持集群部署:图片只能存放在本地磁盘,服务无法通过代理服务器扩容。图片存放到本地磁盘,无法形成数据互备,数据安全性不能得到保障。
[0031]本公开为了至少部分地解决上述问题以及其他潜在问题中的一个或者多个问题,本公开提出了一种图片标注方法,利用本公开的实施方式的技术方案,可以至少实现图片上传和图片标注之间的解耦,提高图片上传效率以及存储安全性,进而提升了标注的效率。
[0032]本公开实施例提供一种图片标注方法,图1是根据本公开实施例的图片标注方法的流程示意图,该图片标注方法可以应用于图片处理装置。该图片处理装置位于电子设备,该电子设备包括但不限于固定设备和/或移动设备,例如,固定设备包括但不限于服务器,服务器可以是云服务器或普通服务器。例如,移动设备包括但不限于:手机或平板电脑中的一项或是多项终端。在一些可能的实现方式中,该方法还可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。如图1所示,该图片标注方法包括:
[0033]S101:获取外部存储系统中的原始图片的第一存储路径;
[0034]S102:根据第一存储路径获取原始图片,并基于原始图片获取待标注图片;
[0035]S103:将待标注图片存储到外部存储系统中,并获取待标注图片在外部存储系统中的第二存储路径;
[0036]S104:基于第二存储路径获取待标注图片,并对待标注图片进行标注处理。
[0037]本公开实施例中,外部存储系统是具有存储功能的系统。外部存储系统用于存储大量原始图片或者经过对原始图片进行清洗处理后的图片。具体的,外部存储系统可以是分布式存储系统。比如,分布式存储系统可以是Ceph分布式存储系统。又比如,分布式存储系统可以是大数据分布式文件系统(Hadoop Distributed File System,HDFS)。再比如,分布式存储系统可以是具备冗余容错功能的分布式网络文件系统(Moose File System,MooseFS)。以上仅为示例性说明,不作为对外部存储系统全部可能的类型的限定,只是这里不做穷举。
[0038]这里,第一存储路径是原始图片在外部存储系统中的存储路径。
[0039]本公开实施例不对外部存储系统中图片的来源进行本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种图片标注方法,包括:获取外部存储系统中的原始图片的第一存储路径;根据所述第一存储路径获取所述原始图片,并基于所述原始图片获取待标注图片;将所述待标注图片存储到所述外部存储系统中,并获取所述待标注图片在所述外部存储系统中的第二存储路径;基于所述第二存储路径获取所述待标注图片,并对所述待标注图片进行标注处理。2.根据权利要求1所述的方法,其中,所述外部存储系统为分布式存储系统。3.根据权利要求1

2中任一项所述的方法,其中,所述原始图片包括多个原始图片,所述方法还包括:将各个原始图片对应的第一存储路径依次存储在消息队列中;读取所述消息队列以获得所述第一存储路径。4.根据权利要求3所述的方法,所述消息队列中还包括各个原始图片的标识信息,各个原始图片的第一存储路径与对应原始图片的标识信息关联,所述读取所述消息队列以获得所述第一存储路径,包括:读取所述消息队列中的标识信息,以获取目标标识信息的原始图片对应的第一存储路径。5.根据权利要求1

2中任一项所述的方法,其中,所述基于所述原始图片获取待标注图片,包括:对所述原始图片进行数据清洗处理,以得到所述待标注图片。6.根据权利要求5所述的方法,其中,对所述原始图片进行数据清洗处理,包括以下至少之一:对所述原始图片进行格式检测处理;对所述原始图片进行角度旋转处理;对所述原始图片进行破损检测处理;对所述原始图片进行质量压缩处理;对所述原始图片进行大小缩放处理。7.根据权利要求1

2中任一项所述的方法,还包括:将针对所述待标注图片的标注数据存储到本地的第一数据库。8.根据权利要求1

2中任一项所述的方法,其中,所述将所述待标注图片存储到所述外部存储系统中,包括:响应于所述待标注图片相对于所述原始图片发生改变,将所述待标注图片存储到所述外部存储系统中的第一存储区域,并将所述待标注图片在所述第一存储区域的存储路径,作为所述待标注图片在所述外部存储系统中的第二存储路径;和/或响应于所述待标注图片相对于所述原始图片未发生改变,将所述原始图片的第一存储路径,作为所述待标注图片在所述外部存储系统中的第二存储路径。9.根据权利要求8所述的方法,还包括:将所述待标注图片在所述外部存储系统中的第二存储路径存储到本地的第二数据库;所述获取所述待标注图片在所述外部存储系统中的第二存储路径,包括:从所述第二数据库获取所述待标注图片在所述外部存储系统中的第二存储路径。
10.一种图片标注装置,包括:获取模块,用于获取外部存储系统中的原始图片的第一存储路径;第一处理模块,用于根据所述第一存储路径获取所述原始图片,并基于所述原始图片获取待标注图片;第二处理模块,用于将所述待标注图片存储到所述外部存储系统中,并获取所述待标注图片在所述外部存储系统中的第二存储路径;标注模块,用于基于所述第二存储路径获取所述待标注图片,并对所述待标...

【专利技术属性】
技术研发人员:刘帅
申请(专利权)人:北京百度网讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1