基于多模态手势动作识别信号控制的工业AGV及方法技术

本发明专利技术公开了一种基于多模态手势动作识别信号控制的工业AGV及方法，涉及手势识别技术领域，该工业AGV包括：肌电臂环、控制模块、蓝牙远程控制组件和动作模块；所述控制模块，包括训练程序和控制程序；所述训练程序包括：肌电臂环信号采集程序和模型训练程序；所述控制程序包括：肌电臂环信号接收程序、手势识别程序和电机控制程序；肌电臂环采集多模态手势信号发送到蓝牙远程控制组件，并由控制程序处理信号及识别手势动作；动作模块根据识别出的不同手势动作，完成相应的动作。本发明专利技术利用多模态手势信号控制工业AGV设备具有操作方式简易、培训成本低，控制设备轻便，以及具有单手操作、手部残疾可操作的优势。

【技术实现步骤摘要】

本专利技术涉及手势识别，特别是涉及一种基于多模态手势动作识别信号控制的工业agv及方法。

技术介绍

1、表面肌电信号(surface electromyography，semg)已经广泛应用于医学领域及残疾人康复领域研究。市面上衍生出直接佩戴在前臂、能够较为精准地识别多通道表面肌电信号及原始惯性测量单元(inertial measurementunit，imu)信号的肌电臂环设备。然而此类设备的研究与应用多数局限在只针对残疾人的手势识别、信号采集、屏幕控制等领域，而忽视了肌电臂环在可穿戴便捷性、操作可学习性、简易度和单手操作方面相较于传统控制方式的优势。以表面肌电信号为主的多模态信号控制可移动设备的控制系统研究尚未完善。

技术实现思路

1、本专利技术的目的是提供一种基于多模态手势动作识别信号控制的工业agv及方法，可实现手势识别操控、单手简易操控。

2、为实现上述目的，本专利技术提供了如下方案：

3、第一方面，本专利技术提供了一种基于多模态手势动作识别信号控制的工业agv，所述基于多模本文档来自技高网...

【技术保护点】

1.一种基于多模态手势动作识别信号控制的工业AGV，其特征在于，所述基于多模态手势动作识别信号控制的工业AGV包括：肌电臂环、控制模块、蓝牙远程控制组件和动作模块；

2.根据权利要求1所述的基于多模态手势动作识别信号控制的工业AGV，其特征在于，所述控制模块包括：控制单片机和上位机；所述控制单片机包括：上位机控制程序和独立控制程序；

3.根据权利要求1所述的基于多模态手势动作识别信号控制的工业AGV，其特征在于，所述模型训练程序用于对机器学习模型进行训练，得到手势识别模型，具体包括：

4.根据权利要求3所述的基于多模态手势动作识别信号控制的工业AGV，...

【技术特征摘要】

1.一种基于多模态手势动作识别信号控制的工业agv，其特征在于，所述基于多模态手势动作识别信号控制的工业agv包括：肌电臂环、控制模块、蓝牙远程控制组件和动作模块；

2.根据权利要求1所述的基于多模态手势动作识别信号控制的工业agv，其特征在于，所述控制模块包括：控制单片机和上位机；所述控制单片机包括：上位机控制程序和独立控制程序；

3.根据权利要求1所述的基于多模态手势动作识别信号控制的工业agv，其特征在于，所述模型训练程序用于对机器学习模型进行训练，得到手势识别模型，具体包括：

4.根据权利要求3所述的基于多模态手势动作识别信号控制的工业agv，其特征在于，获取训练集，具体包括：

5.根据权利要求1所述的基于多模态手势动作识别信号控制的工业agv，其特征...

【专利技术属性】
技术研发人员：卫文韬，孔一超，周明，马昭懿，
申请(专利权)人：南京理工大学，
类型：发明
国别省市：