【技术实现步骤摘要】
操作行为规范的确定方法、装置、电子设备和存储介质
[0001]本申请涉及计算机视觉
,尤其涉及一种操作行为规范的确定方法、装置、电子设备和存储介质。
技术介绍
[0002]港口是国民经济和社会发展的重要基础设施,是对外开放的门户,具有十分重要的意义。龙门吊、岸桥、门机、起重机是港口重要的机械设备,这些设备在进行岸桥还箱作业或者岸桥提箱作业时,可能出现集装箱从空中突然坠落的情况发生,因此,如何预防集装箱坠落,显得十分重要。
技术实现思路
[0003]本申请提供了一种操作行为规范的确定方法、装置、电子设备和存储介质,可以检测操作人员的作业行为是否规范,降低集装箱坠落事件发生的概率。
[0004]为达到上述目的,本专利技术采用如下技术方案:
[0005]第一方面,本专利技术提供了一种操作行为规范的确定方法,包括:
[0006]获取作业场景的视频流,并对视频流进行解码,得到多个图像帧,作业场景包括吊具提箱作业和/或吊具还箱作业;
[0007]基于多个图像帧,确定吊具在作业过程中的 ...
【技术保护点】
【技术特征摘要】
1.一种操作行为规范的确定方法,其特征在于,包括:获取作业场景的视频流,并对所述视频流进行解码,得到多个图像帧,所述作业场景包括吊具提箱作业和/或吊具还箱作业;基于所述多个图像帧,确定所述吊具在作业过程中的目标停顿次数以及目标停顿时长;基于所述目标停顿次数以及所述目标停顿时长,确定操作人员的操作行为是否规范,所述操作人员为控制所述吊具进行作业的作业人员。2.根据权利要求1所述的方法,其特征在于,所述基于所述多个图像帧,确定所述吊具在作业过程中的目标停顿次数以及目标停顿时长,包括:针对每个图像帧,基于第一目标神经网络,对所述图像帧进行目标检测,得到所述图像帧的检测结果,所述检测结果用于指示所述吊具和/或集卡的位置信息;基于所述多个图像帧中的第一组图像帧的检测结果,确定所述吊具是否进入作业状态,所述第一组图像帧包括第一目标图像帧以及所述第一目标图像帧之前的所有图像帧;在所述吊具进入作业状态的情况下,基于所述多个图像帧中的第二组图像帧的检测结果,确定当前作业是否结束,所述第二组图像帧包括第二目标图像帧以及所述第二目标图像帧之前的所有图像帧,所述第二目标图像帧为所述第一目标图像帧之后的图像帧;在确定所述当前作业结束的情况下,基于所述多个图像帧的检测结果,确定所述目标停顿次数以及所述目标停顿时长。3.根据权利要求2所述的方法,其特征在于,所述基于所述多个图像帧中的第一组图像帧的检测结果,确定所述吊具是否进入作业状态,包括:在所述第一组图像帧中均包括所述集卡以及所述吊具,且所述集卡的位置信息未发生变化,以及所述第一目标图像帧的检测结果指示所述吊具位于所述集卡的正上方的情况下,确定所述吊具进入作业状态。4.根据权利要求2所述的方法,其特征在于,所述基于所述多个图像帧中的第二组图像帧的检测结果,确定当前作业是否结束,包括:基于所述第二组图像帧的检测结果,确定所述吊具的运动状态以及所述集卡的运动状态;基于所述吊具的运动状态以及所述集卡的运动状态,确定所述吊具是否处于起升状态;在所述吊具处于起升状态的情况下,基于所述第二组图像帧中的第三组图像帧的检测结果,确定所述当前作业是否结束,所述第三组图像帧为所述第二组图像帧中位于最后X个图像帧,X为预设值。5.根据权利要求4所述的方法,其特征在于,所述基于所述第二组图像帧的检测结果,确定所述吊具的运动状态以及所述集卡的运动状态,包括:基于所述第二组图像帧的检测结果指示的所述集卡的位置信息,确定所述集卡的运动状态,所述集卡的运动状态包括左右运动或者静止状态;基于第二目标神经网络以及所述第二目标图像帧的检测结果指示所述吊具的位置信息,确定所述吊具的运动状态,所述吊具的运动状态包括静止状态、向上运动、向下运动或者左右运动。
6.根据权利要求5所述的方法,其特征在于,所述基于第二目标神经网络以及所述第二目标图像帧的检测结果指示的所述吊具的位置信息,确定所述吊具的运动状态,包括:基于所述第二目标图像帧的检测结果指示的所述吊具的位置信息,确定所述吊具的最大作业区域;基于所述第二目标神经网络,对所述吊具的最大作业区域进行特征提取,得到所述第二目标图像帧中吊具的特征点;获取所述第二组图像帧中除所述第二目标图像帧之外的所有图像帧中吊具的特征点;基于所述第二组图像帧中吊具的特征点,确定所有特征点在所述最大作业区域内的目标线段;基于所述目标线段,确定所述吊具的运动状态。7.根据权利要求5所述的方法,其特征在于,所述基于所述吊具的运动状态以及所述集卡的...
【专利技术属性】
技术研发人员:赵开开,刘兆祥,廉士国,
申请(专利权)人:联通数字科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。