一种交互动作检测方法、系统、设备及介质技术方案

技术编号:41192298 阅读:24 留言:0更新日期:2024-05-07 22:22
本发明专利技术涉及一种交互动作检测方法、系统、设备及介质,方法包括:获取待测三元交互动作图像;对待测三元交互动作图像进行特征提取,获得至少一个第一人物框、至少一个第一工具框和至少一个第一物体框;若任意一个第一人物框、任意一个第一工具框和任意一个第一物体框三个框具有第一重合区域,则将每个第一重合区域对应的三个框组合而成的区域作为一个交互动作检测候选框;对每个交互动作检测候选框进行识别,确定每个交互动作检测候选框对应的交互动作类别。解决了目前的动作交互动作检测方法只能检测出当前图像场景中人与物体的交互动作,无法检测出人、工具与物体之间的三元交互动作的问题。

【技术实现步骤摘要】

所属的技术人员知道,本专利技术可以实现为系统、方法或计算机程序产品。因此,本公开可以具体实现为以下形式,即:可以是完全的硬件、也可以是完全的软件(包括固件、驻留软件、微代码等),还可以是硬件和软件结合的形式,本文一般称为“电路”、“模块”或“系统”。此外,在一些实施例中,本专利技术还可以实现为在一个或多个计算机可读介质中的计算机程序产品的形式,该计算机可读介质中包含计算机可读的程序代码。计算机可读存储介质例如可以是但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本专利技术的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。尽本文档来自技高网...

【技术保护点】

1.一种交互动作检测方法,其特征在于,包括:

2.根据权利要求书1所述的方法,其特征在于,所述对每个所述交互动作检测候选框进行识别,确定每个所述交互动作检测候选框对应的交互动作类别,包括:

3.根据权利要求书1所述的方法,其特征在于,根据待测三元交互动作图像获得对应的交互动作类别通过目标检测模型完成;所述目标检测模型的训练过程如下:

4.根据权利要求3所述的方法,其特征在于,所述获取多个三元交互动作样本图像,包括:

5.根据权利要求4所述的方法,其特征在于,所述对所述动作交互图像进行数据增强,获得多个三元交互动作样本图像,包括:

...

【技术特征摘要】

1.一种交互动作检测方法,其特征在于,包括:

2.根据权利要求书1所述的方法,其特征在于,所述对每个所述交互动作检测候选框进行识别,确定每个所述交互动作检测候选框对应的交互动作类别,包括:

3.根据权利要求书1所述的方法,其特征在于,根据待测三元交互动作图像获得对应的交互动作类别通过目标检测模型完成;所述目标检测模型的训练过程如下:

4.根据权利要求3所述的方法,其特征在于,所述获取多个三元交互动作样本图像,包括:

5.根据权利要求4所述的方法,其特征在于,所述对所述动作交互图像进行数据增强,获得多个三元交互动作样本图像,包括:

6.一种交互动作检测系统,其特...

【专利技术属性】
技术研发人员:高芳裙吴云韬张彦铎卢涛符世长吴梓毅
申请(专利权)人:武汉工程大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1