【技术实现步骤摘要】
本专利技术实施例涉及图像处理，尤其涉及一种行为检测方法、装置、电子设备及存储介质。
技术介绍
1、随着电商服务的发展和普及，越来越多的用户通过第三方平台获取相应的物品。在获取到物品之后，可以有相关平台进行物品的分拣以及配送。在分拣、卸货以及配送的过程中，可能存在一定的行为导致物品出现损坏。
2、基于此，为了监控是否存在破坏物品的行为可采取的方式是：基于神经网络来处理，即输入是待处理图像，输出是是否存在破坏行为的置信度，以基于置信度确定是否存在破坏行为；另一种方式为将采集的视频作为输入，按照设定时间间隔从视频中抽取相邻的两帧图像，然后计算两帧图像的光流图；将光流图的特征数据和前一帧图像的特征数据进行融合；基于融合后的特征数据来确定是否存在破坏物品的行为。
3、专利技术人在基于上述方式实施本技术方案时，发现存在如下问题：
4、基于置信度确定破坏物品的行为容易受到环境影响，比如，摄像装置前有飞虫飞过，就会产生误报，即存在一定误差率；另一种方式基于光流特征来处理时，存在计算复杂度较高的问题，即使在gpu的硬件设备上也难以达到实时处理的效果。
技术实现思路
1、本专利技术提供一种行为检测方法、装置、电子设备及存储介质，实现有效、便捷的确定是否存在预设行为的效果。
2、第一方面，本专利技术实施例提供了一种行为检测方法，该方法包括：
3、在确定待处理视频帧中包括目标对象时，确定与所述目标对象相对应的相互作用信息；其中，目标对象包括行为用
4、在所述相互作用信息满足预设条件时，以所述待处理视频帧为起始帧依次确定所述行为被作用对象在待使用视频帧中的待拟合位置信息；其中，所述待使用视频帧为起始帧之后所采集的视频帧；
5、基于所述待拟合位置信息，确定是否存在行为预设行为。
6、进一步的，确定待处理视频帧中是否包括目标对象，包括：
7、将所述待处理视频帧输入至预先训练好的对象检测模型中，得到输出结果；
8、若所述输出结果与预设输出结果相一致，则确定所述待处理视频帧中包括目标对象。
9、进一步的，所述确定与所述目标对象相对应的相互作用信息，包括：
10、确定所述行为用户和行为被作用对象之间的重合区域信息；
11、基于所述重合区域信息，确定所述目标对象的相互作用信息。
12、进一步的，所述重合区域信息包括重合区域面积，所述确定所述行为用户和行为被作用对象之间的重合区域信息，包括：
13、基于所述输出结果中的坐标信息，确定与所述行为用户与所述行为被作用对象的重合区域面积；
14、相应的，所述基于所述重合区域信息，确定所述目标对象的相互作用信息，包括：
15、基于所述重合区域面积以及所述行为被作用对象的对象区域，确定所述行为用户作用于所述行为被作用对象的占比信息，并将所述占比信息作为所述相互作用信息。
16、进一步的，所述依次确定所述行为被作用对象在待使用视频帧中的待拟合位置信息，包括：
17、基于目标算法追踪所述行为被作用对象在所述待使用视频帧中的待拟合位置信息，直至待使用视频帧中不包括所述行为被作用对象或所述行为被作用对象在预设时长内处于静止状态。
18、进一步的，所述基于所述待拟合位置信息，确定是否存在预设行为，包括：
19、通过对所有待拟合位置信息拟合处理，得到所述行为被作用对象的运动轨迹；
20、基于所述运动轨迹和所述待拟合位置信息的相对信息，确定是否存在预设行为。
21、进一步的，所述相对信息包括相对距离，所述基于所述运动轨迹和所述待拟合位置信息的相对信息，确定是否存在预设行为行为，包括：
22、基于各待拟合位置信息和所述运动轨迹，确定与各待拟合位置信息相对应的相对距离；
23、行为基于所述相对距离，确定是否存在预设行为。
24、进一步的，所述基于所述相对距离，确定是否存在预设行为行为，包括：
25、基于每个待拟合位置信息对应的相对距离，确定总距离；
26、若所述总距离大于预设总距离阈值，则确定存在行为预设行为。
27、进一步的，在确定存在所述预设行为之后，还包括：
28、将所述待处理视频帧以及所述待使用视频帧输出，并标注所述行为用户。
29、进一步的，所述方法还包括：
30、获取训练样本，其中，所述训练样本中包括识别对象的样本图像以及与所述识别对象相对应的标注信息，所述标注信息通过矩形框表征，所述识别对象包括行为被作用对象和行为用户；
31、对于各训练样本，将当前训练样本的样本图像输入对象检测模型中，输出包括识别矩形框的输出图像；其中，所述识别矩形框与所述样本图像的识别对象相对应；
32、基于所述输出图像和标注信息，确定损失值，以基于所述损失值对所述对象检测模型中的模型参数进行修正；
33、将所述对象检测模型中的损失函数收敛作为训练目标，优化所述对象检测模型。
34、第二方面，本专利技术实施例还提供了一种行为检测装置，该装置包括：
35、作用信息确定模块，用于在确定待处理视频帧中包括目标对象时，确定与所述目标对象相对应的相互作用信息；其中，目标对象包括行为用户和行为被作用对象；
36、位置信息拟合模块，用于在所述相互作用信息满足预设条件时，以所述待处理视频帧为起始帧依次确定所述行为被作用对象在待使用视频帧中的待拟合位置信息；其中，所述待使用视频帧为起始帧之后所采集的视频帧。
37、行为检测模块，用于基于所述待拟合位置信息，确定是否存在预设行为行为。
38、第三方面，本专利技术实施例还提供了一种电子设备，电子设备包括：
39、一个或多个处理器；
40、存储装置，用于存储一个或多个程序，
41、当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如本专利技术实施例任一的行为检测方法。
42、第四方面，本专利技术实施例还提供了一种包含计算机可执行指令的存储介质，计算机可执行指令在由计算机处理器执行时用于执行如本专利技术实施例任一的行为检测方法。
43、本专利技术实施例的技术方案，通过在确定待处理视频帧中包括目标对象时，确定与目标对象相对应的相互作用信息，在相互作用信息满足预设条件时，以待处理视频帧为起始帧依次确定分拣对象在待使用视频帧中的待拟合位置信息，进而基于待拟合位置信息确定对分拣对象的分拣是否存在暴力行为，解决了现有技术中基于神经网络输出的置信度确定是否存在行为时，易受环境影响，导致行为检测误差率较高的问题，以及采用光流的方式确定是否存在行为时，存在对硬件设备要求较高，从而引起成本较高的问题，实现了在确定待处理视频帧中包括目标对象时，基于追踪算法确定分拣对象在相应待使用视频帧中的待拟合位置信息，进而基于待本文档来自技高网...
【技术保护点】
1.一种行为检测方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，确定待处理视频帧中是否包括目标对象，包括：
3.根据权利要求2所述的方法，其特征在于，所述确定与所述目标对象相对应的相互作用信息，包括：
4.根据权利要求3所述的方法，其特征在于，所述重合区域信息包括重合区域面积，所述确定所述行为用户和行为被作用对象之间的重合区域信息，包括：
5.根据权利要求1所述的方法，其特征在于，所述依次确定所述行为被作用对象在待使用视频帧中的待拟合位置信息，包括：
6.根据权利要求1所述的方法，其特征在于，所述基于所述待拟合位置信息，确定是否存在预设行为，包括：
7.根据权利要求6所述的方法，其特征在于，所述相对信息包括相对距离，所述基于所述运动轨迹和所述待拟合位置信息的相对信息，确定是否存在预设行为，包括：
8.根据权利要求7所述的方法，其特征在于，所述基于所述相对距离，确定是否存在预设行为，包括：
9.根据权利要求1所述的方法，其特征在于，在确定存在所述预设行为之后，还包括：
10.根据权利要求2所述的方法，其特征在于，还包括：
11.一种行为检测装置，其特征在于，包括：
12.一种电子设备，其特征在于，所述电子设备包括：
13.一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-10任一项所述的行为检测方法。
...【技术特征摘要】
1.一种行为检测方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，确定待处理视频帧中是否包括目标对象，包括：
3.根据权利要求2所述的方法，其特征在于，所述确定与所述目标对象相对应的相互作用信息，包括：
4.根据权利要求3所述的方法，其特征在于，所述重合区域信息包括重合区域面积，所述确定所述行为用户和行为被作用对象之间的重合区域信息，包括：
5.根据权利要求1所述的方法，其特征在于，所述依次确定所述行为被作用对象在待使用视频帧中的待拟合位置信息，包括：
6.根据权利要求1所述的方法，其特征在于，所述基于所述待拟合位置信息，确定是否存在预设行为，包括：
7.根据权利要求6...
【专利技术属性】
技术研发人员：刘鲲，者文明，刘洋，
申请(专利权)人：北京京东远升科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。