一种产品紧固件装配合格性检测方法、系统及存储介质技术方案

本发明专利技术公开了一种产品紧固件装配合格性检测方法、系统及存储介质，其方法包括：工作台基于检测执行指令控制设置在工作台上的图像采集设备对待检测产品的表面图像进行采集；对采集到的表面图像中所设置的产品编号信息进行识别，根据产品编号信息在数据库中调用产品检测目录；识别表面图像中是否存在空置孔位；若否，对表面图像中的每一个紧固件区域进行轮廓提取与区域中心点记录，得到每一个紧固件轮廓信息；基于产品检测目录对每一个紧固件轮廓信息所关联的尺寸大小与所属类型进行匹配核对，并利用核对结果对待检测产品的紧固件装配合格性进行判断。本发明专利技术可快速自动地对待检测产品的相关紧固件进行多方面检测并完成产品归类，保证质检可靠性。

【技术实现步骤摘要】
一种产品紧固件装配合格性检测方法、系统及存储介质
本专利技术涉及智能制造
，尤其涉及一种产品紧固件装配合格性检测方法、系统及存储介质。
技术介绍
在产品生产过程中，螺钉等紧固件的合理装配将影响后期产品的安全搬运和正常使用，因此需要在产品包装前对相关紧固件进行合格性检验。目前对产品紧固件的检测方式主要是人工目识法，这种方法不仅劳动强度大、效率低，而且易造成检测人员的视觉疲劳而经常性出现错检漏检情况，存在质量隐患问题。
技术实现思路
本专利技术的目的在于克服现有技术的不足，本专利技术提供了一种产品紧固件装配合格性检测方法、系统及存储介质，可快速自动地对待检测产品的相关紧固件进行多方面检测并完成产品归类，保证质检可靠性。为了解决上述问题，本专利技术提出了一种产品紧固件装配合格性检测方法，所述方法包括：当机械手将待检测产品抓取并放置在工作台上时，所述工作台基于检测执行指令控制固定设置在所述工作台上的图像采集设备对所述待检测产品的表面图像进行采集；对采集到的表面图像中所设置的产品编号信息进行识别，并根据所述产品编号信息在数据库中调用产品检测目录；结合所述产品检测目录，识别所述表面图像中是否有空置孔位存在；若无空置孔位存在，对所述表面图像中的每一个紧固件区域进行轮廓提取与区域中心点记录，得到每一个紧固件轮廓信息；基于所述产品检测目录对每一个紧固件轮廓信息所关联的尺寸大小与所属类型进行匹配核对，并利用核对结果对所述待检测产品的紧固件装配合格性进行判断。>可选的，所述产品检测目录包括N个孔位的中心位置、每一个孔位所关联的紧固件尺寸大小以及每一个孔位所关联的紧固件模板图像。可选的，所述结合所述产品检测目录，识别所述表面图像中是否有空置孔位存在包括：根据第i（1≤i≤N）个孔位的中心位置以及第i个孔位所关联的紧固件尺寸大小，在所述表面图像中绘制出第i个孔位所对应的检测线段；统计所述检测线段上所包含的像素点总数量以及每一个像素点所对应的灰度值，并从中计算出灰度值小于预设值的像素点所占比例；循环执行上述两个步骤N次，获得N个孔位所对应的N个占比值，并判断每一个占比值是否小于预设比例阈值；若每一个占比值均小于所述预设比例阈值，识别到所述表面图像中无空置孔位存在；若至少有一个占比值大于等于所述预设比例阈值，识别到所述表面图像中有空置孔位存在。可选的，在识别所述表面图像中是否有空置孔位存在之后，还包括：若有空置孔位存在，所述工作台驱动设置在所述工作台上的第一贴标控件对所述待检测产品中所存在的所有空置孔位进行贴标处理，再基于孔位检验完毕指令控制所述机械手将所述待检测产品抓取并移动至装配维修台上。可选的，所述对所述表面图像中的每一个紧固件区域进行轮廓提取与区域中心点记录，得到每一个紧固件轮廓信息包括：对所述表面图像进行中值滤波与二值化，得到二次表面图像；基于Canny边缘检测算法从所述二次表面图像中提取出每一个紧固件区域所对应的轮廓信息，并记录每一个紧固件区域的中心点在所述二次表面图像中的坐标位置。可选的，所述基于所述产品检测目录对每一个紧固件轮廓信息所关联的尺寸大小与所属类型进行匹配核对，并利用核对结果对所述待检测产品的紧固件装配合格性进行判断包括：根据每一个紧固件轮廓信息所记录的区域中心点，从所述产品检测目录中匹配到与所述区域中心点相近的一个孔位的中心位置，并获取所述孔位所关联的紧固件尺寸大小和紧固件模板图像；计算每一个紧固件轮廓信息所对应的尺寸大小，判断其与相匹配孔位所关联的紧固件尺寸大小之间的差值是否落在允许误差范围内；若是，基于模板匹配算法原理将每一个紧固件轮廓信息与相匹配孔位所关联的紧固件模板图像进行类型比对；若否，所述工作台驱动设置在所述工作台上的第二贴标控件对所述待检测产品中尺寸不合格的所有紧固件区域进行贴标处理，再基于装配检验完毕指令控制所述机械手将所述待检测产品抓取并移动至回收维修台上。可选的，在基于模板匹配算法原理将每一个紧固件轮廓信息与相匹配孔位所关联的紧固件模板图像进行类型比对之后，还包括：若每一个紧固件轮廓信息与相匹配孔位所关联的紧固件图像吻合，所述工作台基于检测合格指令控制所述机械手将所述待检测产品抓取并移动至成品供应台上；若至少有一个紧固件轮廓信息与相匹配孔位所关联的紧固件图像不吻合，所述工作台驱动设置在所述工作台上的第二贴标控件对所述待检测产品中类型不匹配的所有紧固件区域进行贴标处理，再基于装配检验完毕指令控制所述机械手将所述待检测产品抓取并移动至回收维修台上。另外，本专利技术实施例还提供了一种产品紧固件装配合格性检测系统，所述系统包括：图像采集模块，用于当机械手将待检测产品抓取并放置在工作台上时，触发所述工作台基于检测执行指令控制固定设置在所述工作台上的图像采集设备对所述待检测产品的表面图像进行采集；编号识别模块，用于对采集到的表面图像中所设置的产品编号信息进行识别，并根据所述产品编号信息在数据库中调用产品检测目录；孔位检测模块，用于结合所述产品检测目录，识别所述表面图像中是否有空置孔位存在；轮廓提取模块，用于在识别到所述表面图像中无空置孔位存在时，对所述表面图像中的每一个紧固件区域进行轮廓提取与区域中心点记录，得到每一个紧固件轮廓信息；装配验证模块，用于基于所述产品检测目录对每一个紧固件轮廓信息所关联的尺寸大小与所属类型进行匹配核对，并利用核对结果对所述待检测产品的紧固件装配合格性进行判断。可选的，所述系统还包括：贴标反馈模块，用于在识别到所述表面图像中有空置孔位存在时，触发所述工作台驱动设置在所述工作台上的第一贴标控件对所述待检测产品中所存在的所有空置孔位进行贴标处理，再基于孔位检验完毕指令控制所述机械手将所述待检测产品抓取并移动至装配维修台上。另外，本专利技术实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述中任意一项所述的产品紧固件装配合格性检测方法。在本专利技术实施例中，主要从孔位状态、紧固件尺寸与紧固件类型这三个方面对待检测产品上的相关紧固件进行层层检测，且在不符合其中一方面的检测要求时直接对待检测产品进行区域贴标与归类放置，有利于检修人员直观地发现并修补待检测产品的缺陷；相比于人工目识法，不仅可以缩短检修人员的时间成本，并且可以保证质检可靠性。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见的，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。图1是本专利技术实施例中的产品紧固件装配合格性检测方法的流程示意图；图2是本专利技术实施例中的产品紧固件装配合格性检测系统的结构组成示意图。具体实施方式下本文档来自技高网...

【技术保护点】
1.一种产品紧固件装配合格性检测方法，其特征在于，所述方法包括：/n当机械手将待检测产品抓取并放置在工作台上时，所述工作台基于检测执行指令控制固定设置在所述工作台上的图像采集设备对所述待检测产品的表面图像进行采集；/n对采集到的表面图像中所设置的产品编号信息进行识别，并根据所述产品编号信息在数据库中调用产品检测目录；/n结合所述产品检测目录，识别所述表面图像中是否有空置孔位存在；/n若无空置孔位存在，对所述表面图像中的每一个紧固件区域进行轮廓提取与区域中心点记录，得到每一个紧固件轮廓信息；/n基于所述产品检测目录对每一个紧固件轮廓信息所关联的尺寸大小与所属类型进行匹配核对，并利用核对结果对所述待检测产品的紧固件装配合格性进行判断。/n

【技术特征摘要】
1.一种产品紧固件装配合格性检测方法，其特征在于，所述方法包括：
当机械手将待检测产品抓取并放置在工作台上时，所述工作台基于检测执行指令控制固定设置在所述工作台上的图像采集设备对所述待检测产品的表面图像进行采集；
对采集到的表面图像中所设置的产品编号信息进行识别，并根据所述产品编号信息在数据库中调用产品检测目录；
结合所述产品检测目录，识别所述表面图像中是否有空置孔位存在；
若无空置孔位存在，对所述表面图像中的每一个紧固件区域进行轮廓提取与区域中心点记录，得到每一个紧固件轮廓信息；
基于所述产品检测目录对每一个紧固件轮廓信息所关联的尺寸大小与所属类型进行匹配核对，并利用核对结果对所述待检测产品的紧固件装配合格性进行判断。


2.根据权利要求1所述的产品紧固件装配合格性检测方法，其特征在于，所述产品检测目录包括N个孔位的中心位置、每一个孔位所关联的紧固件尺寸大小以及每一个孔位所关联的紧固件模板图像。


3.根据权利要求2所述的产品紧固件装配合格性检测方法，其特征在于，所述结合所述产品检测目录，识别所述表面图像中是否有空置孔位存在包括：
根据第i（1≤i≤N）个孔位的中心位置以及第i个孔位所关联的紧固件尺寸大小，在所述表面图像中绘制出第i个孔位所对应的检测线段；
统计所述检测线段上所包含的像素点总数量以及每一个像素点所对应的灰度值，并从中计算出灰度值小于预设值的像素点所占比例；
循环执行上述两个步骤N次，获得N个孔位所对应的N个占比值，并判断每一个占比值是否小于预设比例阈值；
若每一个占比值均小于所述预设比例阈值，识别到所述表面图像中无空置孔位存在；
若至少有一个占比值大于等于所述预设比例阈值，识别到所述表面图像中有空置孔位存在。


4.根据权利要求3所述的产品紧固件装配合格性检测方法，其特征在于，在识别所述表面图像中是否有空置孔位存在之后，还包括：
若有空置孔位存在，所述工作台驱动设置在所述工作台上的第一贴标控件对所述待检测产品中所存在的所有空置孔位进行贴标处理，再基于孔位检验完毕指令控制所述机械手将所述待检测产品抓取并移动至装配维修台上。


5.根据权利要求1所述的产品紧固件装配合格性检测方法，其特征在于，所述对所述表面图像中的每一个紧固件区域进行轮廓提取与区域中心点记录，得到每一个紧固件轮廓信息包括：
对所述表面图像进行中值滤波与二值化，得到二次表面图像；
基于Canny边缘检测算法从所述二次表面图像中提取出每一个紧固件区域所对应的轮廓信息，并记录每一个紧固件区域的中心点在所述二次表面图像中的坐标位置。


6.根据权利要求2所述的产品紧固件装配合格性检测方法，其特征在于，所述基于所述产品检测目录对每一个紧固件轮廓信息所关联的尺寸大小与所属类型进行匹配核对，并利用核对结果对所述待检测产品的紧固件装配合格性进行判断...

【专利技术属性】
技术研发人员：魏勤龙，朱婷，陈仕晰，
申请(专利权)人：佛山隆深机器人有限公司，
类型：发明
国别省市：广东;44