【技术实现步骤摘要】
施工机械设备动作实时智能识别方法及装置
[0001]本申请涉及智慧工地
,具体涉及一种施工机械设备动作实时智能识别方法及装置。
技术介绍
[0002]在过去的20年中,新兴技术的进步使研究人员和从业人员在施工要素的管理领域,运用不同的技术手段,对不同层级的施工活动都进行了一定的研究,使得行业能够不断朝着智能、实时、动态管理的方向迈进,也取得巨大的进步。基于传感器的
的最新发展(从硬件和软件的角度来看)已经帮助建筑经理有效地与现场的其他方进行互动,并提高了生产率和安全性能。根据实现的传感器的类型,施工要素活动自动检测和识别方法可以分为四大类,即:(1)基于运动学的方法;(2)基于计算机视觉的方法;(3)基于音频的方法;(4)其它物理传感器方法。
[0003]目前无论是基于哪类传感器的动作识别方法,均需要基于一个时段内的多个数据来进行判断,即需要考虑时序性,在技术上体现为通过时域滑动窗口来获取上述一个时段内的时序上下文信息。这需要通过大量时序上下文信息进行提取特征,并将大量时序信息作为一个样本输入模型框架。这 ...
【技术保护点】
【技术特征摘要】
1.一种施工机械设备动作实时智能识别方法,其特征在于,包括:采集待识别施工机械设备在预设时间范围内的多个时刻的运动部位信息;基于预先训练的动作识别模型分别对各时刻的所述运动部位信息进行分析,得到待识别施工机械设备在多个时刻的多个动作识别结果;所述动作识别模型是根据机械设备动作类型数据集训练得到的。2.根据权利要求1所述的施工机械设备动作实时智能识别方法,其特征在于,还包括:利用时序信息对各时刻的所述动作识别结果进行平滑操作及结果纠正。3.根据权利要求1所述的施工机械设备动作实时智能识别方法,其特征在于,所述运动部位信息为待识别施工机械设备的运动部位的图像信息;采集待识别施工机械设备在预设时间范围内的多个时刻的运动部位信息,包括:获取待识别施工机械设备在预设时间范围内的图像序列;基于图像差分法和实例分割法对所述图像序列中的各图像进行分析处理,得到待识别施工机械设备在对应时刻的运动部位信息。4.根据权利要求3所述的施工机械设备动作实时智能识别方法,其特征在于,所述基于图像差分法和实例分割法对所述图像序列中的各图像进行分析处理,得到待识别施工机械设备在对应时刻的运动部位信息,包括:通过背景差分法获取所述图像中的运动目标对应的第一像素集;在所述图像上对待识别施工机械设备进行实例分割得到第二像素集;获取所述第一像素集与所述第二像素集的交集,得到所述待识别施工机械设备的运动部位信息。5.根据权利要求3所述的施工机械设备动作实时智能识别方法,其特征在于,训练所述动作识别模型的步骤包括:获取包含多个训练数据的训练数据集,各所述训练数据包括一施工机械设备的图像以及所述图像对应的语义标签;所述语义标签包括所述施工机械设备的类型及动作类别;使用所述训练数据集对初始模型进行训练,得到所述动作识别模型;所述初始模型包括机器学习模型、深度学习模型、数理统计对比模型、基于简单数理运算的特征值与阈值对比模型中的一种。6.根据权利要求5所述的施工机械设备动作实时智能识别方法,其特征在于,建立所述训练数据集的步骤包括:采用机械设备模拟软件生成机械设备动作指令,并将所述机械设备动作指令施加于预设的数字机械设备;使用虚拟相机获取所述数字机械设备在多个相机位姿的图像序列;将各相机位姿的图像序列时间对齐至标准时间;对任一相机位姿的图像序列进行动作语义标准分析,得到对应的语义标签;将所述语义标签赋予各相机位姿的图像序列中对应的图像;分别根据各图像及其对应的语义标签建立所述训练数据集。7.根据权利要求1至6中任一项所述的施工机械设备动作实时智能识别方法,其特征在于,还包括:采集工程现场的环境图像;
对所述环境图像进行实例分割和语义分析,得到多个施工要素。8.根据权利要求7所述的施工机械设备动作实时智能识别方法,其特征在于,还包括:获取待识别施工机械设备在多个作业工况下各作业环节的动作耗时;所述动作耗时为待识别施工机械设备执行某一动作所用的时间;基于所述动作耗时分别确定待识别施工机械设备在对应作业工况下的一个工作循环耗时;所述一个工作循环耗时为待识别施工机械设备依次执行所有动作所用的时间;根据所述动作耗时和/或所述一个工作循环耗时确定所述待识别施工机械设备在各作业工况下...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。