【技术实现步骤摘要】
一种基于三维连续动态手势识别的无人机人机交互方法
本专利技术涉及人机交互
，更具体地，涉及一种基于三维连续动态手势识别的无人机人机交互方法。
技术介绍
手势识别技术是新一代自然人机交互的一项关键技术，相对于传统的鼠标，键盘等接触式的操作方式，手势具有自然直观、容易理解、操作简单、体验性好等优点，更加符合人类日常交流习惯，手势识别已经成为人机交互方案的研究热点。手势作为一门自然、方便的语言，在情感上和实用性上都非常适合用于人机交互。手势识别技术的研究意义在于将手势这种自然且直观的交流方式应用到人机交互的接口技术上，使得人机接口更加接近于人类的使用习惯，进而使得人机交互变得更自然方便。随着机器人控制技术的发展，人与机器人之间的交互活动变得越来越普遍。利用手势来控制机器人可方便地操纵机器人，向机器人发布命令，与机器人进行交互。手势是指人手产生的各种姿势和动作，广义的手势可分为两种，一种为由连续手部动作组成的动态手势(gesture)，另一种为静态的手部姿势(posture)。静态手势识别考虑某个时间点上手势的外形特征，动态手势关注一段时间内手部及手臂的一系列动作，...
【技术保护点】
一种基于三维连续动态手势识别的无人机人机交互方法，其特征在于，所述方法包括以下步骤：S1：通过Kinect传感器获取人体骨骼跟踪数据，所述人体骨骼跟踪数据至少包括右手、左手、右肘、左肘、右肩和左肩的骨骼点跟踪数据；S2：提取手势轨迹特征并对其进行预处理，所述预处理包括手势起止检测、平滑滤波处理、重采样和位置归一化；S3：使用神经网络算法进行手势识别；S4：将手势识别的结果转化对应成控制指令控制无人机的飞行。
【技术特征摘要】
1.一种基于三维连续动态手势识别的无人机人机交互方法，其特征在于，所述方法包括以下步骤：S1：通过Kinect传感器获取人体骨骼跟踪数据，所述人体骨骼跟踪数据至少包括右手、左手、右肘、左肘、右肩和左肩的骨骼点跟踪数据；S2：提取手势轨迹特征并对其进行预处理，所述预处理包括手势起止检测、平滑滤波处理、重采样和位置归一化；提取手势轨迹特征的具体方法为：S2.1.1：将左手LH、左肘LE、右手RH、右肘RE的骨骼点位置信息三维坐标值(x，y，z)的每一帧分别按顺序排列成一列向量，此时代表动态手势的原始三维轨迹特征为：其中，表示第n帧深度图的4个骨骼点的特征向量，表示第n帧深度图中左手的x轴坐标；S2.1.2：定义基准点A(xa，ya，za)为左肩和右肩连线的中心，则基准点A即为左肩节点LS(xLS，yLS，zLS)和右肩节点RS（xRS，yRS，zRS)的中间值；S2.1.3：计算出基准点A后，釆用左肩和右肩的距离作为标准长度对右手RH、左手LH、右肘RE及左肘LE这4个骨骼点进行归一化处理：其中，表示第n帧深度图基准点，表示第n帧深度图的左肩，表示第n帧深度图的右肩；S2.1.4：采用归一化后的骨骼点的空间坐标变化来表示一段手势的特征向量：其中，表示手势的特征向量，是由按顺序排列组成的列向量，N代表这个序列有N帧深度图；所述手势起止检测包括以下步骤：S2.2.1：定义手势的运动能量函数E为前后两帧深度图中手部骨骼点的三维位置的变化之和，即左手、左肘、右手、右肘这4个骨骼点的移动距离之和，则手势的运动能量函数为：E＝dLH+dLE+dRH+dRES2.2.2：如果连续M帧E的值都大于预设的E的阈值，M≥1，则将第一次检测到E大于该阈值的那一帧作为手势开始的起点；S2.2.3：当检测到连续M帧E的值都小于预设的E的阈值，则将第一次检测到的E小于该阈值的那一帧作为手势结束的终点，即可从长序列中截取出手势序列；平滑滤波处理、重采样和位置归一化的具体方法包括以下步骤：S2.3.1：平滑滤波处理：对左手、左肘、右手、右肘这4个骨骼点进行平滑滤波处理，使这4个骨骼点的坐标为对其前后帧的坐标值取均值；S2.3.2：重采样：对于获得的长短不一的手势序列段，重采样利用均匀线性重采样的方式将所有手势序列进行处理使得两两相邻轨迹点的间隔相等，以消除不同用户做手势的速度差异；...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。