一种行为识别方法、装置及设备制造方法及图纸

本发明专利技术实施例提供了一种行为识别方法、装置及设备。其中，所述方法包括：对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例；从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像；对所述实例图像进行行为识别，得到所述目标实例的行为识别结果。可以通过实例分割从待处理图像中确定出属于目标实例的像素点，从而获取到目标实例的实例图像，由于目标实例的实例图像是基于目标实例的像素点得到的，因此目标实例的实例图像中不包含或者仅包含较少的属于其他实例的像素点，因此可以有针对性的进行行为识别，得到用户感兴趣的实例的行为识别结果。

【技术实现步骤摘要】
一种行为识别方法、装置及设备
本专利技术涉及行为识别
，特别是涉及一种行为识别方法、装置及设备。
技术介绍
在一些应用场景中，为了便于对特定的人员、猫、狗、车辆等对象进行管理，需要获取这些对象的行为。示例性的，为了便于对医院中的病人进行管理，可以对走廊中的病人进行行为识别，以确定病人是否发生摔倒、磕碰等可能影响病人安全的行为，以便于相关人员及时进行救助。相关技术中，可以根据监控视频中相邻视频帧之间的变化确定出运动对象，并模拟得到运动对象的运动轨迹，根据运动对象的运动轨迹以及监控视频确定运动对象是否存在异常行为。但是，该方案只能够对运动对象的行为进行识别，而运动对象可能是用户感兴趣的对象，也可能是用户不感兴趣的对象，例如，走廊上的运动对象可能是用户感兴趣的病人，也可能是用户不感兴趣的医护人员。因此该方案无法针对用户感兴趣的特定对象进行行为识别。
技术实现思路
本专利技术实施例的目的在于提供一种行为识别方法、装置及设备，以实现有针对性的进行行为识别，从而得到用户感兴趣的对象的行为识别结果。具体技术方案如下：在本专利技术实施例的第一方面，提供了一种行为识别方法，所述方法包括：对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例；从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像；对所述实例图像进行行为识别，得到所述目标实例的行为识别结果。在一种可能的实施例中，所述从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像，包括：基于所述待处理图像中属于目标实例的像素点，确定包络框，所述包络框为将所有属于所述目标实例的像素点包括在内的矩形框；获取所述包络框内的图像，得到所述目标实例的实例图像。在一种可能的实施例中，所述获取所述包络框内的图像，得到所述目标实例的实例图像，包括：将位于所述包络框内且不属于所述目标实例的像素点的像素值设置为预设像素值，得到所述目标实例的实例图像。在一种可能的实施例中，在所述从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像之后，所述方法还包括：缓存所述目标实例的实例图像；如果已经缓存的所述目标实例的实例图像尚未达到预设数目阈值，则选取新的待处理图像，并返回执行所述对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例的步骤；所述对所述实例图像进行行为识别，得到所述目标实例的行为识别结果，包括：如果已经缓存的所述目标实例的实例图像已经达到预设数目阈值，则对已经缓存的所述目标实例的所有实例图像共同进行行为识别，得到所述目标实例的行为识别结果。在一种可能的实施例中，在所述对已经缓存的所述目标实例的所有实例图像共同进行行为识别，得到所述目标实例的行为识别结果之后，所述方法还包括：删除最早缓存的所述目标实例的实例图像；选取新的待处理图像，并返回执行所述对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例的步骤。在本专利技术实施例的第二方面，提供了一种行为识别设备，所述行为识别设备，包括：图像采集单元，用于采集待处理图像；第一处理器，对所述图像采集单元采集的待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例；从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像；对所述实例图像进行行为识别，得到所述目标实例的行为识别结果在本专利技术实施例的第三方面，提供了一种行为识别装置，所述装置包括：实例确定模块，用于对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例；图像提取模块，用于从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像；行为识别模块，用于对所述实例图像进行行为识别，得到所述目标实例的行为识别结果。在一种可能的实施例中，所述图像提取模块从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像，包括：基于所述待处理图像中属于目标实例的像素点，确定包络框，所述包络框为将所有属于所述目标实例的像素点包括在内的矩形框；获取所述包络框内的图像，得到所述目标实例的实例图像。在一种可能的实施例中，所述图像提取模块获取所述包络框内的图像，得到所述目标实例的实例图像，包括：将位于所述包络框内且不属于所述目标实例的像素点的像素值设置为预设像素值，得到所述目标实例的实例图像。在一种可能的实施例中，所述装置包括缓存模块，用于缓存所述目标实例的实例图像；所述实例确定模块，还用于如果已经缓存的所述目标实例的实例图像尚未达到预设数目阈值，则选取新的待处理图像，并返回执行所述对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例的步骤；所述行为识别模块对所述实例图像进行行为识别，得到所述目标实例的行为识别结果，包括：如果已经缓存的所述目标实例的实例图像已经达到预设数目阈值，则对已经缓存的所述目标实例的所有实例图像共同进行行为识别，得到所述目标实例的行为识别结果。在一种可能的实施例中，所述装置包括缓存模块，用于缓存所述目标实例的实例图像；所述实例确定模块，还用于如果已经缓存的所述目标实例的实例图像尚未达到预设数目阈值，则选取新的待处理图像，并返回执行所述对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例的步骤；所述行为识别模块对所述实例图像进行行为识别，得到所述目标实例的行为识别结果，包括：如果已经缓存的所述目标实例的实例图像已经达到预设数目阈值，则对已经缓存的所述目标实例的所有实例图像共同进行行为识别，得到所述目标实例的行为识别结果。在本专利技术实施例的第四方面，提供了一种电子设备，包括：存储器，用于存放计算机程序；第二处理器，用于执行存储器上所存放的程序时，实现上述第一方面任一所述的方法步骤。在本专利技术实施例的到第五方面，提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述第一方面任一所述的方法步骤。本专利技术实施例有益效果：本专利技术实施例提供的行为识别方法、装置及设备，可以通过实例分割从待处理图像中确定出属于目标实例的像素点，从而获取到目标实例的实例图像，由于目标实例的实例图像是基于目标实例的像素点得到的，因此目标实例的实例图像中不包含或者仅包含较少的属于其他实例的像素点，因此对目标实例的实例图像进行行为识别，得到的行为识别结果可以准确的反映出目标实例的行为，而不会或者仅会较少的受到其他实例的行为的影响，因此可以有针对性的进行行为识别，得到用户感兴趣的实例的行为识别结果。当然，实施本专利技术的任一产品或方法并不一定需要同时达到以上所述的所有优点。附图说明为了更清楚地说明本发本文档来自技高网...

【技术保护点】
1.一种行为识别方法，其特征在于，所述方法包括：/n对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例；/n从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像；/n对所述实例图像进行行为识别，得到所述目标实例的行为识别结果。/n

【技术特征摘要】
1.一种行为识别方法，其特征在于，所述方法包括：
对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例；
从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像；
对所述实例图像进行行为识别，得到所述目标实例的行为识别结果。


2.根据权利要求1所述的方法，其特征在于，所述从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像，包括：
基于所述待处理图像中属于目标实例的像素点，确定包络框，所述包络框为将所有属于所述目标实例的像素点包括在内的矩形框；
获取所述包络框内的图像，得到所述目标实例的实例图像。


3.根据权利要求2所述的方法，其特征在于，所述获取所述包络框内的图像，得到所述目标实例的实例图像，包括：
将位于所述包络框内且不属于所述目标实例的像素点的像素值设置为预设像素值，得到所述目标实例的实例图像。


4.根据权利要求1所述的方法，其特征在于，在所述从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像之后，所述方法还包括：
缓存所述目标实例的实例图像；
如果已经缓存的所述目标实例的实例图像尚未达到预设数目阈值，则选取新的待处理图像，并返回执行所述对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例的步骤；
所述对所述实例图像进行行为识别，得到所述目标实例的行为识别结果，包括：
如果已经缓存的所述目标实例的实例图像已经达到预设数目阈值，则对已经缓存的所述目标实例的所有实例图像共同进行行为识别，得到所述目标实例的行为识别结果。


5.根据权利要求4所述的方法，其特征在于，在所述对已经缓存的所述目标实例的所有实例图像共同进行行为识别，得到所述目标实例的行为识别结果之后，所述方法还包括：
删除最早缓存的所述目标实例的实例图像；
选取新的待处理图像，并返回执行所述对待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例的步骤。


6.一种行为识别设备，其特征在于，所述行为识别设备包括：
图像采集单元，用于采集待处理图像；
第一处理器，对所述图像采集单元采集的待处理图像进行实例分割，确定所述待处理图像中各像素点所属实例；从所述待处理图像中提取所述待处理图像中属于目标实例的像素点，得到所述目标实例的实例图像；对所述实例图像进行行为识别，得到所述目标实例的行为识别结果。


7....

【专利技术属性】
技术研发人员：刘彻，
申请(专利权)人：杭州萤石软件有限公司，
类型：发明
国别省市：浙江;33