一种用于遥操作的姿态识别方法、装置及系统制造方法及图纸

本申请实施例属于机器人技术领域，涉及一种用于遥操作的姿态识别方法，包括获取操作者N个部位的N组当前运动反馈数据，其中N为大于等于2的整数；及通过预设的姿态识别模型对当前运动反馈数据进行操作者的姿态识别，得到操作者的当前姿态，其中，当前姿态包括操作者M个部位的当前姿态，M为大于N的整数。本申请还提供一种用于遥操作的姿态识别装置、系统、计算机设备及存储介质。本申请可以基于更少数量的姿态传感器得到操作者更为精确的姿态识别结果。果。果。

【技术实现步骤摘要】
一种用于遥操作的姿态识别方法、装置及系统


[0001]本申请涉及遥操作
，尤其涉及一种用于遥操作的姿态识别方法、装置及系统。

技术介绍

[0002]随着科技的发展，机器人应用领域越发广泛，在一些复杂和危险环境中，需要机器人灵活性更高，具有更高的仿人工作的能力，为此，遥操作机器人应运而生。遥操作机器人是通过在操作人员身上安装姿态传感器，比如，惯性传感器(Inertial Measurement Unit IMU)，操作人员在另一真实或者虚拟场景下进行目标任务操作，通过IMU捕捉操作人员在操作过程中的动作并采集相应的运动反馈数据发送给控制器，控制器根据反馈数据生成相应的运动控制指令等，以控制从端机器人，从而实现遥操作的目的。
[0003]现有的动作捕捉方案主要是在人体上密集布置惯性传感器以获得动作相关的运动反馈数据，为实现全身动作捕捉一般需在操作者身上分布16
‑
20个IMU。
[0004]而通常IMU成本较高，需要处理的数据量也较大，算力要求高，不利于实时的动作捕捉。
专利技术内容
[000本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于遥操作的姿态识别方法，用于识别操作者的姿态，其特征在于，包括下述步骤：获取操作者N个部位的N组当前运动反馈数据，其中N为大于等于2的整数；及通过预设的姿态识别模型对当前运动反馈数据进行操作者的姿态识别，得到操作者的当前姿态，其中，当前姿态包括操作者M个部位的当前姿态，M为大于N的整数。2.根据权利要求1所述的用于遥操作的姿态识别方法，其特征在于，所述N等于4；所述操作者N个部位的N组当前运动反馈数据包括：对应操作者的左腕部的运动反馈数据；对应操作者的右腕部的运动反馈数据；对应操作者的腰部的反馈数据；对应操作者的头部的运动反馈数据。3.根据权利要求1或2所述的用于遥操作的姿态识别方法，其特征在于，获取操作者N个部位的N组当前运动反馈数据包括：获取满足预设时间间隔的当前时刻以及所述当前时刻前预设时间窗口内的运动反馈数据；和/或所述姿态识别模型为Transformer模型。4.根据权利要求1或2所述的用于遥操作的姿态识别方法，其特征在于，所述通过预设的姿态识别模型对当前运动反馈数据进行操作者的姿态识别之前还包括：构建在人体多个姿态下的N组运动反馈数据的训练样本集，其中，以基于SMPL上半身模型的姿态表示作为训练样本集的标注；设定预设的姿态识别模型的超参数；基于运动反馈数据的训练样本集对姿态识别模型进行训练。5.根据权利要求1或2所述的用于遥操作的姿态识别方法，其特征在于，所述通过预设的姿态识别模型对当前运动反馈数据进行操作者的姿态识别的步骤之后还包括：基于人体先验模型，以所述当前姿态为目标进行跟踪优化，得到优化后的当前姿态。6.根据权利要求5所述的用于遥操作的姿态识别方法，其特征在于，所述基于人体先验模型，以所述当前姿态为目标进行跟踪优化的步骤具体包括：将所述当前姿态作为优化目标；将所述人体先验模型的各个关节的转矩和脚部受力作为控制向量；定义所述人体先验模型跟踪所述当前姿态的目标函数和约束条件，对所述目标函数和所述约束条件进行联合最优化求解，得到当前最优控制向量；对所述人体先验模型执行所述当前最优控制向量，得到人体先验模型的当前姿态；将所述人体先验模型的当前姿态作为优化后的当前姿态。7.根据权利要求6所述的用于遥操作的姿态识别方...

【专利技术属性】
技术研发人员：何宇星，石炜烨，李向东，许晋诚，
申请(专利权)人：帕西尼感知科技张家港有限公司，
类型：发明
国别省市：