一种人与仿人机器人交互的多模态融合与控制平台及系统技术方案

本发明专利技术公开了一种人与仿人机器人交互的多模态融合与控制平台及系统，包括人体信号融合感知平台和双臂机器人镜像控制平台，其技术要点为：提供一种人与仿人机器人交互的多模态融合平台系统，通过多传感器布置和融合、结合稳定的多传感器坐标校准系统、自适应滤波技术以及泛化具身智能人机交互算法模型，提升了人与仿人机器人在动作识别、预测和追踪方面的交互质量；该平台能够有效捕捉和分析人类动作，通过精准的分类和回归算法，提高仿人机器人对人类动作的响应速度和准确性，从而增强人机交互的自然性和流畅度；此外，本发明专利技术还注重系统的稳定性和可靠性，确保在各种复杂环境下都能提供交互质量和体验。

【技术实现步骤摘要】

本专利技术涉及机器人交互，具体涉及一种人与仿人机器人交互的多模态融合与控制平台及系统。

技术介绍

1、在现有人机交互技术中，人与仿人机器人的互动面临诸多技术挑战。为了实现在复杂的人与机器人交互任务中精确、全面且持续的动作识别和预测，需要布置多传感器系统的布置进行更加多模态和全面的感知。多传感器能够以不同形式捕捉来自不同维度的信息，如视频图像信号，惯性信号、肌肉电信号等，这些信息相互补充，能够提供更全面的交互数据。

2、然而，对人的交互动作进行稳定且持续的数据采集困难重重，传感器本身的局限性以及外部环境干扰会导致数据采集的稳定性和可靠性不足。且多传感器中和位姿相关的传感器每个都有各自独立的参考坐标系，需要进行空间坐标校准和统一。这一过程复杂且耗时，因为每个传感器的位置和方向都需要精确校准，才能确保数据的准确性。这增加了平台的逻辑复杂度，尤其是在涉及多个传感器的情况下。

3、人体和机器人上的多传感器布局需要经过仔细筛选和设计。合理的布局不仅可以提高数据采集的精度，还能有效减少传感器之间的干扰和冗余信息。然而，实际应用中，如何布置这些传感本文档来自技高网...

【技术保护点】

1.一种人与仿人机器人交互的多模态融合与控制平台，其特征是：包含人体信号融合感知平台和双臂机器人镜像控制平台型材框架(2)；

2.如权利要求1所述的一种人与仿人机器人交互的多模态融合与控制系统，其特征是：所述系统包括多传感器融合模块、空间坐标校准融合模块、自适应滤波模块和人机交互算法模块；

3.如权利要求1所述的一种人与仿人机器人交互的多模态融合与控制平台，其特征是：所述人体信号融合感知平台型材框架(1)和双臂机器人镜像控制平台控制器(10)顶部皆设有若干的摄像头，所述摄像头为深度相机(5)。

4.如权利要求1所述的一种人与仿人机器人交互的多模态融合与...

【技术特征摘要】

1.一种人与仿人机器人交互的多模态融合与控制平台，其特征是：包含人体信号融合感知平台和双臂机器人镜像控制平台型材框架(2)；

2.如权利要求1所述的一种人与仿人机器人交互的多模态融合与控制系统，其特征是：所述系统包括多传感器融合模块、空间坐标校准融合模块、自适应滤波模块和人机交互算法模块；

3.如权利要求1所述的一种人与仿人机器人交互的多模态融合与控制平台，其特征是：所述人体信号融合感知平台型材框架(1)和双臂机器人镜像控制平台控制器(10)顶部皆设有若干的摄像头，所述摄像头为深度相机(5)。

4.如权利要求1所述的一种人与仿人机器人交互的多模态融合与控制平台，其特征是：所述运动感知穿戴手套...

【专利技术属性】
技术研发人员：齐雯，范浩宇，林铖威，杨小龙，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：