一种基于智能感知的人物交互检测方法技术

本发明专利技术公开了一种基于智能感知的人物交互检测方法，包括以下步骤：设置交互建议分支，通过交互建议网络获得更高质量的交互建议，通过交互结构部件获得交互间语义信息与交互内部位置信息；网络流程上，骨干网络提取全局上下文信息的视觉特征序列，将特征序列送入交互建议分支与交互预测分支；交互建议分支获取高质量交互建议，将其作为交互预测分支的查询，结合交互动作类别分支来预测最终的HOI三元组。本发明专利技术通过交互结构与交互类别两个方面获取交互信息，并且通过修改解码器高效的利用交互信息增强交互理解，交互类别上引入CLIP进行辅助判别；在HICO‑Det与V‑COCO基准上进行了大量的实验，证明了设计的有效性。

【技术实现步骤摘要】

本专利技术涉及医疗器械烘干装置，具体为一种基于智能感知的人物交互检测方法。

技术介绍

1、在智能感知领域中，识别人与物体的动作交互有重大的意义。工业生产实践中，动作检测可以对错误操作仪器仪表进行检测，例如危险的操作步骤、非合理时间的操作等行为。高规格的实验室与车间，通过异常行为检测，可以识别抽烟、打电话或吃东西等不规范行为。机器人研究中，动作的检测便于其理解人类行为的同时，也增强了其动作模仿能力。

2、上述检测均建立在正确识别人与物体动作交互之上，人物交互hoi检测任务是定位图像中人与物体的位置，并检测是否存在交互与其类别，从而推断得出场景中的hoi三元组<主语，谓语，宾语>。

3、通常，传统的hoi检测器使用卷积网络以间接的方式处理hoi预测任务，将其转化为人、物、交互的替代回归和分类问题。研究者通过不同的思路设计检测器：有利用点的方法如ppdm提出hoi并行点检测与匹配法，用人、物框的中心点替代表示人与物体。ggnet基于ppdm进一步改进，提出扫视和凝视网络，自适应地推断出一组动作感知点来表示交互区域。atl中通过本文档来自技高网...

【技术保护点】

1.一种基于智能感知的人物交互检测方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种基于智能感知的人物交互检测方法，其特征在于，骨干网络，包括：

3.根据权利要求1所述的一种基于智能感知的人物交互检测方法，其特征在于，交互位置建议分支中，有以下三部分：人-物实例检测、交互建议网络、交互结构；

4.根据权利要求1所述的一种基于智能感知的人物交互检测方法，其特征在于，人-物实例检测，包括：

5.根据权利要求1所述的一种基于智能感知的人物交互检测方法，其特征在于，交互建议网络，包括：

6.根据权利要求1所述的一种基于智能感...

【技术特征摘要】

1.一种基于智能感知的人物交互检测方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种基于智能感知的人物交互检测方法，其特征在于，骨干网络，包括：

3.根据权利要求1所述的一种基于智能感知的人物交互检测方法，其特征在于，交互位置建议分支中，有以下三部分：人-物实例检测、交互建议网络、交互结构；

4.根据权利要求1所述的一种基于智能感知的人物交互检测方法，其特征在于，人-物实例检测...

【专利技术属性】
技术研发人员：谭守标，王志方，
申请(专利权)人：安徽大学，
类型：发明
国别省市：