用于实时检测汽车车身擦净作业方法、系统、设备及介质技术方案

本发明专利技术提供了一种用于实时检测汽车车身擦净作业方法，基于不同角度的摄像机对人工擦拭汽车车身的行为过程进行连续性的检测识别，将视觉监控和只能算法融合，分视角对不同图像信息中需要识别区域的检测框进行检测，并采用擦拭件的检测框与需要识别区域的检测框进行交并比计算，并根据所述交并比计算结果，不光对涂装工序中作业人员的实时监控，还实现了对涂装工序的擦拭的质量监控，确保了在复杂的检测环境中，较高的精准度和良好的稳定性，提升了汽车生产质量。了汽车生产质量。了汽车生产质量。

【技术实现步骤摘要】
用于实时检测汽车车身擦净作业方法、系统、设备及介质


[0001]本专利技术涉及车身擦净作业的
，具体涉及一种用于实时检测汽车车身擦净作业方法、系统、设备及介质。

技术介绍

[0002]涂装是汽车制造工艺中关键环节，有助于提升汽车车身表面的防锈、防蚀能力，也可充当车身的机械保护屏障，提升外观效果和延长使用寿命。汽车生产工艺中涂装质量的好坏不仅反映了产品防护、装饰性能,而且也是构成产品价值体现的重要因素。汽车涂层通常需要进行多层喷涂，以达到完好地防护效果，而每一涂层的处理过程都包含烘干、打磨、擦净等步骤。其中擦净流程必不可少，主要用于去除涂层表面的异物、脏污、手印等，防止对下一阶段的涂装工艺造成二次污染，如果不进行擦净的话，汽车车身表面的异物将会对后续的涂层工艺造成影响，严重情况下，会导致整个涂装工艺质量降低，造成额外的经济损失。
[0003]当前，擦净作业通常以人工擦净为主，由作业者身着防尘服、手持白手帕对烘干、打磨过后的汽车车身进行擦拭，以清理表面脏污。然而作业者在长时间进行擦拭工作后，身体逐渐疲惫，容易出现作业者对于作业指导书要求进行擦拭的部位会选择性地遗漏或者直接不擦拭；另外，部分员工受到主观因素影响出现工作态度怠慢状态，也会选择性地进行车身擦拭或不擦拭。
[0004]因此，需要提供一种实时监测人工擦净行为的方法，以解决目前作业者在擦拭时容易出现遗漏或是工作态度怠慢的技术问题。

技术实现思路

[0005]针对现有技术中所存在的不足，本专利技术提供了用于实时检测汽车车身擦净作业方法、系统、设备及介质，以解决现有技术中作业者在擦拭时容易出现遗漏或是工作态度怠慢的技术问题。
[0006]本专利技术提供了一种用于实时检测汽车车身擦净作业方法，包括：
[0007]S1、根据视角将车辆车身分为前监控区域、左监控区域及右监控区域，并利用摄像机分别从车辆作业轨道的正前方、左后方及右后方实时获取对应的前监控区域、左监控区域和右监控区域的图像信息；
[0008]S2、从左后方的摄像机识别车辆前端的支撑支架，并累计所述支撑支架的识别次数，若没达到识别次数则继续累计，反之则判定车辆已驶入作业轨道，开启擦净检测；
[0009]S3、将正前方、左后方及右后方同一时刻获取的三张图像信息输入目标检测网络进行检测判断，根据所述图像信息中识别到的擦净件、前监控区域、左监控区域及右监控区域的检测框分别对应存入F集合、L集合及R集合；
[0010]S4、取时间段t0‑
t
n
中任意时刻t的F集合、L集合及R集合，遍历F集合、L集合及R集合中所有擦净件的检测框，并将所述擦净件的检测框分别与待擦净的前监控区域、左监控区
域及右监控区域的检测框计算交并比值，根据所述交并比值判断是否达到擦净标准，并输出任意时刻t的擦净结果；
[0011]S5、从正前方的摄像机识别判断车辆是否驶离作业轨道，若没有则重复S3和S4，反之则确认所述前监控区域、左监控区域及右监控区域的检测框的擦净标准的结果，并输出时间段t0‑
t
n
中的综合擦净判定结果。
[0012]可选地，所述前监控区域、左监控区域及右监控区域，包括：
[0013]所述前监控区域包括引擎盖区域和车顶区域，所述左监控区域包括左前翼子板区域、左前车门区域、左后车门区域及左后轮毂板区域，所述右监控区域包括右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域。
[0014]可选地，所述开启擦净检测后，还包括：
[0015]针对所述引擎盖区域、车顶区域、左前翼子板区域、左前车门区域、左后车门区域、左后轮毂板区域、右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域中每个检测区域对应设置一个计数器num和擦净标识flag，其中所述计数器num初始为0，所述擦净标识flag初始为false，并设定thr阈值和THR阈值，其中所述thr阈值为用于擦拭车辆车身的擦净件的检测框与任意需擦净的所述检测区域的交并比阈值，所述THR阈值为需擦净检测区域达到擦净标准的计算器num的阈值。
[0016]可选地，所述根据所述图像信息中识别到的擦净件、前监控区域、左监控区域及右监控区域的检测框分别对应存入F集合、L集合及R集合，包括：
[0017]依次识别所述图像信息，判断图像信息中是否存在引擎盖区域和车顶区域的检测框，若存在则识别图像信息中的所有擦净件的检测框，并将识别的擦净件的检测框、引擎盖区域及车顶区域的检测框存入所述F集合，反之则继续判断图像信息中是否存在左前翼子板区域、左前车门区域、左后车门区域及左后轮毂板区域的检测框，若存在则识别该图像信息中的所有擦净件的检测框，并将识别的擦净件的检测框、左前翼子板区域、左前车门区域、左后车门区域及左后轮毂板区域的检测框存入所述L集合，反之则判断图像信息中是否存在右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域的检测框，若存在则识别图像信息中的所有擦净件的检测框，并将识别的擦净件的检测框、右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域的检测框存入所述R集合。
[0018]可选地，所述取时间段t0‑
t
n
中任意时刻t的F集合、L集合及R集合，遍历F集合、L集合及R集合中所有擦净件的检测框，并将所述擦净件的检测框分别与待擦净的前监控区域、左监控区域及右监控区域的检测框计算交并比值，根据所述交并比值判断是否达到擦净标准，并输出任意时刻t的擦净结果，包括：
[0019]S401、取时间段t0‑
t
n
中任意时刻t的F集合、L集合及R集合，并遍历t的F集合、L集合及R集合中的所有擦拭件的检测框；
[0020]S402、将所述擦拭件的检测框分别与前监控区域、左监控区域及右监控区域中任意检测区域的检测框进行交并比计算得到交并比值，所述交并比值的计算式为：
[0021][0022]其中，B1表示为擦拭件的检测框，B2表示为检测区域的检测框，B1∩B2表示两个检
测框的交集，而B1∪B2则表示两个检测框的并集，IoU表示为交并比值；
[0023]S403、将交并比值与所述thr阈值比较，若交并比值大于所述thr阈值，则对应检测区域的计数器num执行加1操作，并将所述计数器num与所述THR阈值比较，若所述计数器num大于所述THR阈值，则擦净标识flag更新为ture；
[0024]S404、重复S402
‑
S403直至遍历所有检测区域，并输出时刻t的擦净结果。
[0025]可选地，所述从正前方的摄像机识别判断车辆是否驶离作业轨道，包括：
[0026]所述前方的摄像机还用于对车辆的尾部进行识别，通过识别所述尾部在监控的图像信息位置判断车辆是否驶离作业轨道。
[0027]可选地，所述反之则确认所述前监控区域、左监控区域及右监控区域的检测框的擦净本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于实时检测汽车车身擦净作业方法，其特征在于，包括：S1、根据视角将车辆车身分为前监控区域、左监控区域及右监控区域，并利用摄像机分别从车辆作业轨道的正前方、左后方及右后方实时获取对应的前监控区域、左监控区域和右监控区域的图像信息；S2、从左后方的摄像机识别车辆前端的支撑支架，并累计所述支撑支架的识别次数，若没达到识别次数则继续累计，反之则判定车辆已驶入作业轨道，开启擦净检测；S3、将正前方、左后方及右后方同一时刻获取的三张图像信息输入目标检测网络进行检测判断，根据所述图像信息中识别到的擦净件、前监控区域、左监控区域及右监控区域的检测框分别对应存入F集合、L集合及R集合；S4、取时间段t0‑
t
n
中任意时刻t的F集合、L集合及R集合，遍历F集合、L集合及R集合中所有擦净件的检测框，并将所述擦净件的检测框分别与待擦净的前监控区域、左监控区域及右监控区域的检测框计算交并比值，根据所述交并比值判断是否达到擦净标准，并输出任意时刻t的擦净结果；S5、从正前方的摄像机识别判断车辆是否驶离作业轨道，若没有则重复S3和S4，反之则确认所述前监控区域、左监控区域及右监控区域的检测框的擦净标准的结果，并输出时间段t0‑
t
n
中的综合擦净判定结果。2.如权利要求1所述的用于实时检测汽车车身擦净作业方法，其特征在于，所述前监控区域、左监控区域及右监控区域，包括：所述前监控区域包括引擎盖区域和车顶区域，所述左监控区域包括左前翼子板区域、左前车门区域、左后车门区域及左后轮毂板区域，所述右监控区域包括右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域。3.如权利要求2所述的用于实时检测汽车车身擦净作业方法，其特征在于，所述开启擦净检测后，还包括：针对所述引擎盖区域、车顶区域、左前翼子板区域、左前车门区域、左后车门区域、左后轮毂板区域、右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域中每个检测区域对应设置一个计数器num和擦净标识flag，其中所述计数器num初始为0，所述擦净标识flag初始为false，并设定thr阈值和THR阈值，其中所述thr阈值为用于擦拭车辆车身的擦净件的检测框与任意需擦净的所述检测区域的交并比阈值，所述THR阈值为需擦净检测区域达到擦净标准的计算器num的阈值。4.如权利要求3所述的用于实时检测汽车车身擦净作业方法，其特征在于，所述根据所述图像信息中识别到的擦净件、前监控区域、左监控区域及右监控区域的检测框分别对应存入F集合、L集合及R集合，包括：依次识别所述图像信息，判断图像信息中是否存在引擎盖区域和车顶区域的检测框，若存在则识别图像信息中的所有擦净件的检测框，并将识别的擦净件的检测框、引擎盖区域及车顶区域的检测框存入所述F集合，反之则继续判断图像信息中是否存在左前翼子板区域、左前车门区域、左后车门区域及左后轮毂板区域的检测框，若存在则识别该图像信息中的所有擦净件的检测框，并将识别的擦净件的检测框、左前翼子板区域、左前车门区域、左后车门区域及左后轮毂板区域的检测框存入所述L集合，反之则判断图像信息中是否存在右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域的检测
框，若存在则识别图像信息中的所有擦净件的检测框，并将识别的擦净件的检测框、右前翼子板区域、右前车门区域、右后车门区域、右后轮毂板区域及后尾板区域的检测框存入所述R集合。5.如权利要求4所述的用于实时检测汽车车身擦净作业方法，其特征在于，所述取时间段t0‑
t
n
中任意时刻t的F集合、L集合及R集合，遍历F集合、L集合及R集合...

【专利技术属性】
技术研发人员：郑道勤，王侃，马恺麟，郝方伟，汪恒宇，
申请(专利权)人：重庆中科摇橹船信息科技有限公司，
类型：发明
国别省市：