车载机械臂控制方法、装置、设备、存储介质和程序产品制造方法及图纸

本发明专利技术涉及车载机械臂控制技术领域，提供车载机械臂控制方法、装置、设备、存储介质和程序产品，该方法包括：通过摄像头组的实时拍摄获取车内图像数据；将车内图像数据采用时间帧对齐同步方式输入至特征提取模型得到位置信息图；位置信息图中包括各个实体的位置信息；特征提取模型用于通过混合注意力网络模块将至少两个摄像头的图像特征进行融合提取，并结合坐标变化矩阵定位车载机械臂的移动位置；根据位置信息图以及通过麦克风获取的语音指令，控制车载机械臂执行对应语音指令的操作任务。本发明专利技术采用摄像头组进行图像多视角拍摄，然后联合建模进行图像特征融合提取；同时集成语音识别技术，实现了车载智能机械臂的辅助应用。

【技术实现步骤摘要】

本专利技术涉及车载机械臂控制，尤其涉及车载机械臂控制方法、装置、设备、存储介质和程序产品。

技术介绍

1、随着智能汽车技术的快速发展，消费者希望智能汽车可以提供更多的便利性的功能。目前的技术方案中尚未出现车内设置智能机械臂的成熟应用，通用领域的智能机械臂大多依赖单目摄像头实现。然而，这种基于单目摄像头的智能机械臂存在显著局限性，主要体现在以下两个方面：

2、单一视角问题：单目摄像头只能从一个固定视角获取图像信息，难以识别遮蔽区域内的物体或场景。在复杂环境下，这种单一视角的局限性会导致识别不精准。

3、感知范围受限：单目摄像头的感知距离和宽度有限，无法有效识别视野范围之外的区域。视角与探测范围的矛盾进一步限制了其在复杂环境下的识别能力。

4、这些问题表明，仅依靠单目摄像头的智能机械臂难以满足智能汽车对高效、精准识别的需求。

技术实现思路

1、本专利技术提供车载机械臂控制方法、装置、设备、存储介质和程序产品，用以解决现有技术中智能汽车缺乏高效、精准识别的车载智能机械臂的辅助应用本文档来自技高网...

【技术保护点】

1.一种车载机械臂控制方法，其特征在于，所述车载机械臂设置在车辆的内部，所述车载机械臂控制方法包括：

2.根据权利要求1所述的车载机械臂控制方法，其特征在于，所述至少两个摄像头包括第一摄像头和第二摄像头；所述车内图像数据包括由所述第一摄像头获取的第一车内图像数据和由所述第二摄像头获取的第二车内图像数据；所述将所述车内图像数据采用时间帧对齐同步方式输入至特征提取模型，包括：

3.根据权利要求2所述的车载机械臂控制方法，其特征在于，

4.根据权利要求1所述的车载机械臂控制方法，其特征在于，所述将所述车内图像数据采用时间帧对齐同步方式输入至特征提取模型之前，...

【技术特征摘要】

1.一种车载机械臂控制方法，其特征在于，所述车载机械臂设置在车辆的内部，所述车载机械臂控制方法包括：

2.根据权利要求1所述的车载机械臂控制方法，其特征在于，所述至少两个摄像头包括第一摄像头和第二摄像头；所述车内图像数据包括由所述第一摄像头获取的第一车内图像数据和由所述第二摄像头获取的第二车内图像数据；所述将所述车内图像数据采用时间帧对齐同步方式输入至特征提取模型，包括：

3.根据权利要求2所述的车载机械臂控制方法，其特征在于，

4.根据权利要求1所述的车载机械臂控制方法，其特征在于，所述将所述车内图像数据采用时间帧对齐同步方式输入至特征提取模型之前，还包括：

5.根据权利要求1至4任一项所述的车载机械臂控制方法，其特征在于，所述根据所述位置信息图以及通过麦克风获取的语音指令，控制所述车载机械臂执行对应所述语音指令的操作任务，包括：

6....

【专利技术属性】
技术研发人员：罗永兵，丁源，邓森，周亚军，高才志，
申请(专利权)人：比邻智联重庆科技有限公司，
类型：发明
国别省市：