基于自适应阈值语义分割的图像标注方法、系统及设备技术方案

本发明专利技术公开了基于自适应阈值语义分割的图像标注方法、系统及设备，其中所述方法包括：当检测到操作界面上的第一控件被触发时，在操作界面的预设区域内显示待处理图像，再将其转换成OpenCV图像；当检测到操作界面上的颜色列表组合控件发生多次有效触发事件时，响应于每次有效触发事件，在待处理图像上标记用户执行每个鼠标左击长按拖动操作时产生的带颜色曲线，并获取对应的曲线信息以在OpenCV图像中赋予颜色标签；当检测到操作界面上隐藏的保存控件被触发时，利用分水岭算法将当前OpenCV图像中的各个区域按照其内部赋予的颜色标签进行自适应像素填充，得到最终掩膜图像并保存至指定路径。本发明专利技术可以提高图像标注效率。本发明专利技术可以提高图像标注效率。本发明专利技术可以提高图像标注效率。

【技术实现步骤摘要】
基于自适应阈值语义分割的图像标注方法、系统及设备


[0001]本专利技术涉及图像处理
，具体是涉及基于自适应阈值语义分割的图像标注方法、系统及设备。

技术介绍

[0002]目前基于语义分割的图像标注工具主要有Labelme工具、精灵标注助手等等，但这两类图像标注工具均存在一定的使用弊端，分别如下：其一，当图像中出现形状结构较为复杂的物体时，使用Labelme工具需要不断点击鼠标以沿着物体外围绘制多个标注点，整个标注过程较为麻烦，并且在完成整个图像标注任务之后并不会直接生成所需的掩膜图像输出；其二，当图像中出现形状结构较为复杂的物体时，使用精灵标注助手需要不断移动鼠标对物体内部进行完全涂抹标注，有时在物体边界处还需要适当调整画笔粗细以避免对其他物体进行错误标记，使得图像标注效率较为低下。

技术实现思路

[0003]本专利技术提供基于自适应阈值语义分割的图像标注方法、系统及设备，以解决现有技术中所存在的一个或者多个技术问题，至少提供一种有益的选择或者创造条件。
[0004]第一方面，提供一种基于自适应阈值语义分割的图像标注方法，包括：
[0005]当检测到操作界面上的第一控件发生触发事件时，在所述操作界面的预设区域内显示待处理图像；
[0006]将所述待处理图像进行格式转换，得到OpenCV图像；
[0007]当检测到所述操作界面上的颜色列表组合控件发生多次有效触发事件时，响应于每次有效触发事件，在所述待处理图像上标记用户执行每个鼠标左击长按拖动操作时产生的带颜色曲线并获取对应的曲线信息，再利用所述曲线信息在所述OpenCV图像中赋予颜色标签；
[0008]当检测到所述操作界面上隐藏的保存控件发生触发事件时，利用分水岭算法将当前OpenCV图像中的各个区域按照其内部赋予的颜色标签进行自适应像素填充，得到最终掩膜图像并将其保存至指定路径。
[0009]进一步地，在检测到所述操作界面上的颜色列表组合控件发生多次有效触发事件之前，或者在响应于每次有效触发事件的过程中，还包括：
[0010]当检测到所述操作界面上的第二控件发生触发事件时，生成所述待处理图像对应的第一副本图像；
[0011]对所述第一副本图像进行轮廓提取，得到多个前景轮廓线并记录其在所述第一副本图像上的位置信息；
[0012]将所述多个前景轮廓线按照记录的位置信息标记在所述待处理图像上。
[0013]进一步地，在检测到所述操作界面上的颜色列表组合控件发生多次有效触发事件之前，还包括：
[0014]当检测到所述操作界面上的第三控件发生触发事件时，生成所述待处理图像对应的第二副本图像；
[0015]利用分水岭算法将所述第二副本图像中的各个区域随机按照不同颜色标签进行自适应像素填充，得到初始掩膜图像；
[0016]将所述初始掩膜图像转换成四通道图像，再将所述四通道图像中的透明度值调整至既定阈值并覆盖到所述待处理图像上。
[0017]进一步地，在将所述四通道图像中的透明度值调整至既定阈值并覆盖到所述待处理图像上之后，还包括：
[0018]当检测到所述操作界面上隐藏的所述保存控件发生触发事件时，直接将所述初始掩膜图像作为最终掩膜图像并将其保存至所述指定路径。
[0019]进一步地，所述利用分水岭算法将所述第二副本图像中的各个区域随机按照不同颜色标签进行自适应像素填充，得到初始掩膜图像包括：
[0020]将所述第二副本图像转换为单通道灰度图，再将所述单通道灰度图转换为二值化图像；
[0021]将所述二值化图像依次进行开运算和闭运算，得到去噪图像；
[0022]将所述去噪图像进行膨胀运算以提取其中的背景区域，得到第一图像；
[0023]将所述去噪图像进行欧氏距离变换以将其中的连通前景区域分割成互不连通的多个前景区域，得到第二图像；
[0024]将所述第一图像和所述第二图像进行差分运算以提取未确定的待填充区域，得到第三图像；
[0025]将所述第一图像、所述第二图像和所述第三图像进行融合，得到第四图像；
[0026]在所述第四图像的各个区域内随机赋予不同的颜色标签，再利用分水岭算法将当前第四图像中的各个区域按照其内部赋予的颜色标签进行自适应像素填充，得到初始掩膜图像。
[0027]进一步地，所述响应于每次有效触发事件，在所述待处理图像上标记用户执行每个鼠标左击长按拖动操作时产生的带颜色曲线并获取对应的曲线信息包括：
[0028]根据所述每次有效触发事件，在所述预设区域自动生成对应的带颜色画笔；
[0029]当用户执行任意一个鼠标左击长按拖动操作时，同步控制所述带颜色画笔在所述待处理图像上绘制出一条带颜色曲线，并且在整个绘制过程中记录鼠标完成每个预设移动间距时所处的二维坐标值以及鼠标在开始拖动和结束拖动时的二维坐标值，并连同所述带颜色画笔所关联的颜色标签进行封装，得到对应的曲线信息。
[0030]进一步地，所述检测到所述操作界面上隐藏的保存控件发生触发事件包括：
[0031]响应于用户执行的鼠标右击操作，在所述预设区域内显示菜单栏；
[0032]所述菜单栏内设置保存控件，检测施加在所述保存控件上的鼠标左击操作。
[0033]进一步地，所述菜单栏内还设置撤销控件、清空控件和恢复控件；
[0034]所述撤销控件用于删除执行完的最近一个鼠标左击长按拖动操作产生的带颜色曲线及其对应的曲线信息，同时在所述OpenCV图像中作出关联删除；
[0035]所述清空控件用于删除执行完的所有鼠标左击长按拖动操作产生的所有带颜色曲线及其对应的曲线信息，同时删除所述OpenCV图像中的所有标记痕迹；
[0036]所述恢复控件用于恢复前一步由所述撤销控件或者所述清空控件指定完成的删除操作。
[0037]第二方面，提供一种基于自适应阈值语义分割的图像标注系统，包括：
[0038]显示模块，用于当检测到操作界面上的第一控件发生触发事件时，在所述操作界面的预设区域内显示待处理图像；
[0039]转换模块，用于将所述待处理图像进行格式转换，得到OpenCV图像；
[0040]标记模块，用于当检测到所述操作界面上的颜色列表组合控件发生多次有效触发事件时，响应于每次有效触发事件，在所述待处理图像上标记用户执行每个鼠标左击长按拖动操作时产生的带颜色曲线并获取对应的曲线信息，再利用所述曲线信息在所述OpenCV图像中赋予颜色标签；
[0041]生成模块，用于当检测到所述操作界面上隐藏的保存控件发生触发事件时，利用分水岭算法将当前OpenCV图像中的各个区域按照其内部赋予的颜色标签进行自适应像素填充，得到最终掩膜图像并将其保存至指定路径。
[0042]第三方面，提供一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序以实现如第一方面所述的基于自适应阈值语义分割的图像标注方法。
[0043]本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于自适应阈值语义分割的图像标注方法，其特征在于，包括：当检测到操作界面上的第一控件发生触发事件时，在所述操作界面的预设区域内显示待处理图像；将所述待处理图像进行格式转换，得到OpenCV图像；当检测到所述操作界面上的颜色列表组合控件发生多次有效触发事件时，响应于每次有效触发事件，在所述待处理图像上标记用户执行每个鼠标左击长按拖动操作时产生的带颜色曲线并获取对应的曲线信息，再利用所述曲线信息在所述OpenCV图像中赋予颜色标签；当检测到所述操作界面上隐藏的保存控件发生触发事件时，利用分水岭算法将当前OpenCV图像中的各个区域按照其内部赋予的颜色标签进行自适应像素填充，得到最终掩膜图像并将其保存至指定路径。2.根据权利要求1所述的基于自适应阈值语义分割的图像标注方法，其特征在于，在检测到所述操作界面上的颜色列表组合控件发生多次有效触发事件之前，或者在响应于每次有效触发事件的过程中，还包括：当检测到所述操作界面上的第二控件发生触发事件时，生成所述待处理图像对应的第一副本图像；对所述第一副本图像进行轮廓提取，得到多个前景轮廓线并记录其在所述第一副本图像上的位置信息；将所述多个前景轮廓线按照记录的位置信息标记在所述待处理图像上。3.根据权利要求1所述的基于自适应阈值语义分割的图像标注方法，其特征在于，在检测到所述操作界面上的颜色列表组合控件发生多次有效触发事件之前，还包括：当检测到所述操作界面上的第三控件发生触发事件时，生成所述待处理图像对应的第二副本图像；利用分水岭算法将所述第二副本图像中的各个区域随机按照不同颜色标签进行自适应像素填充，得到初始掩膜图像；将所述初始掩膜图像转换成四通道图像，再将所述四通道图像中的透明度值调整至既定阈值并覆盖到所述待处理图像上。4.根据权利要求3所述的基于自适应阈值语义分割的图像标注方法，其特征在于，在将所述四通道图像中的透明度值调整至既定阈值并覆盖到所述待处理图像上之后，还包括：当检测到所述操作界面上隐藏的所述保存控件发生触发事件时，直接将所述初始掩膜图像作为最终掩膜图像并将其保存至所述指定路径。5.根据权利要求3所述的基于自适应阈值语义分割的图像标注方法，其特征在于，所述利用分水岭算法将所述第二副本图像中的各个区域随机按照不同颜色标签进行自适应像素填充，得到初始掩膜图像包括：将所述第二副本图像转换为单通道灰度图，再将所述单通道灰度图转换为二值化图像；将所述二值化图像依次进行开运算和闭运算，得到去噪图像；将所述去噪图像进行膨胀运算以提取其中的背景区域，得到第一图像；将所述去噪图像进行欧氏距离变换以将其中的连通前景区域分割成互不连通的多个
前景区域，得到第二图像；将所述第一图像和所述第二图像进行差分运算以提取未确定的待填充区域，得到第三图像；将所述第一图像、所述第二...

【专利技术属性】
技术研发人员：闫敬文，殷梓健，姜永赫，陈洋，庄思妍，杜晨杰，赵阳，
申请(专利权)人：汕头大学，
类型：发明
国别省市：