【技术实现步骤摘要】
一种工序作业循环时间估算方法、装置、介质及设备
[0001]本专利技术涉及计算机
,尤其涉及一种工序作业循环时间估算方法、装置、介质及设备。
技术介绍
[0002]在现有技术中,对工序作业循环时间进行估算时,通过预先获取工序作业视频数据对语义模型进行训练,再根据训练好的语义模型来获取目标视频中空间维度上的人体语义特征,根据人体语义特征识别出视频中某个工人的一套工序作业,并获取这一套工序作业的空间特征,再对空间特征进行计数,最后将这个工人不断重复执行这一套工序作业的总时长除以对应的空间特征的计数,获得重复执行这一套工序作业的平均循环时间,以平均循环时间作为这个工人每次执行这一套工序作业时所需要耗费的循环时间。
[0003]可见,现有技术在进行工序作业循环时间的估算时,只在空间维度上对某个工人重复执行的工序作业进行识别,即只考虑了一个维度的识别标准,从而对重复执行的工序作业的识别准确性较低,并且以重复执行的工序作业的平均循环时间作为这个工人每次执行这一套工序作业时的循环时间,无法精确地获取这个工序作业的不同的相邻两 ...
【技术保护点】
【技术特征摘要】
1.一种工序作业循环时间估算方法,其特征在于,包括:获取工序作业视频;当从所述工序作业视频中识别出M个工人后,从所述工序作业视频中截取与M个工人的活动范围一一对应的M个活动区域视频;其中,M≥1;获取与M个活动区域视频一一对应的M个相似性度量;其中,对于第i个活动区域视频,从第i个活动区域视频中提取获得区域特征,并根据所述区域特征计算获得第i个活动区域视频的相似性度量,i=1,2,
……
,M;获取与M个相似性度量一一对应的M个自注意力特征;其中,对于第i个相似性度量,从第i个相似性度量中提取获得第i个活动区域视频的时间维度的自注意力特征;获取与M个自注意力特征一一对应的M个一维热力图;其中,对于第i个自注意力特征,卷积处理第i个自注意力特征后,获得第i个活动区域视频的一维热力图;获取与M个一维热力图对应的至少2M个高斯分布的极大值点;其中,对于第i个一维热力图,从第i个一维热力图中查找获得高斯分布的至少两个极大值点;获取M个活动区域视频中的工序作业的循环时间;其中,对于第i个活动区域视频,将第i个一维热力图中的高斯分布的极大值点对应的时间点作为第i个活动区域视频中的工序作业的开始时间点,根据相邻两个开始时间点计算获得所述相邻两个开始时间点之间的工序作业的循环时间。2.如权利要求1所述的工序作业循环时间估算方法,其特征在于,所述当从所述工序作业视频中识别出M个工人后,从所述工序作业视频中截取与M个工人的活动范围一一对应的M个活动区域视频,具体为:当从所述工序作业视频中识别出M个工人后,从所述工序作业视频的每一帧图像中截取M个工人的定位区域;获取与M个工人一一对应的M个活动范围;其中,对于第i个工人,将第i个工人所有的定位区域拼接成第i个工人的活动范围;获取与M个活动范围一一对应的M个活动区域视频;其中,对于第i个工人的所述活动范围,根据第i个工人的所述活动范围所占据的空间区域,从所述工序作业视频中截取获得第i个工人的活动区域视频。3.如权利要求1所述的工序作业循环时间估算方法,其特征在于,所述获取与M个活动区域视频一一对应的M个相似性度量,具体为:获取与M个活动区域视频一一对应的M个相似性度量;其中,对于第i个活动区域视频:从第i个活动区域视频的每一帧图像中提取获得区域特征,并根据所述区域特征,计算获得第i个活动区域视频的相似性度量,i=1,2,
……
,M。4.如权利要求3所述的工序作业循环时间估算方法,其特征在于,所述从第i个活动区域视频的每一帧图像中提取获得区域特征,并根据所述区域特征,计算获得第i个活动区域视频的相似性度量,具体为:将第i个活动区域视频的每一帧图像缩放到第一预设尺寸并输入至预设的卷积特征提取网络;从所述卷积特征提取网络中提取获得与每一帧图像一一对应的二维特征图,并将每一所述二维特征图输入至3D卷积网络;
从所述3D卷积网络中提取获得与每一所述二维特征图一一对应的区域特征;根据所述区域特征,计算获得第i个活动区域视频的相似性度量。5.如权利要求1所述的工序作业循环时间估算方法,其特征在于,所述获取与M个相似性度量一一对应的M个自注意力特征,具体为:获取与M个相似性度量一一对应的M个自注意力特征;其中,对于第i个相似性度量:将第i个相似性度量输入到至少一个卷积核中并通过线性整流函数运算,获得时间特征图;将所述时间特征图调整到第二预设尺寸并输入至全连接层;从所述全连接层中查找获得与所...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。