语义分割方法、装置和系统及挖掘机制造方法及图纸

技术编号:41472595 阅读:19 留言:0更新日期:2024-05-30 14:25
本公开提出一种语义分割方法、装置和系统及挖掘机,涉及工程机械智能化和自动化领域。语义分割方法,包括:获取作业环境的图像信息和雷达点云信息;确定所述图像信息的第一特征表示;基于所述图像信息和所述雷达点云信息中的目标的标记信息,确定所述目标的标记信息的第二特征表示;融合所述图像信息的第一特征表示和所述目标的标记信息的第二特征表示,以分割出所述图像信息中的所述目标。本公开全面检测作业环境的图像和雷达等多维传感信息,融合图像信息的特征表示以及图像信息和雷达信息中标记目标的特征表示进行语义分割,从而基于标记目标的提示更准确地从图像检测出目标,使得挖掘机全面感知作业面环境,为挖掘作业无人化作业提供基础。

【技术实现步骤摘要】

本公开涉及工程机械智能化和自动化领域,特别涉及一种语义分割方法、装置和系统及挖掘机


技术介绍

1、挖掘机是一种多功能工程机械,被广泛应用于矿山采掘、水利工程,交通运输和电力工程等场景的施工中。无人挖掘机可以替代挖掘机操作员在具备塌方危险、有毒有害气体等场景下进行操作及施工,同时缓解现代社会老龄化带来的劳动力短缺的问题。因此研发具有无人操控功能的挖掘机有巨大的行业需求和现实意义。感知挖掘机作业面环境信息,是实现挖掘作业无人化的基础,准确感知挖掘机作业面环境信息成为急需解决的问题。


技术实现思路

1、本公开实施例,全面检测作业环境的图像和雷达等多维传感信息,融合图像信息的特征表示以及图像信息和雷达信息中标记目标的特征表示进行语义分割,从而基于标记目标的提示更准确地从图像检测出目标,使得挖掘机全面感知作业面环境,为挖掘作业无人化作业提供基础。

2、本公开一些实施例提出种语义分割方法,包括:

3、获取作业环境的图像信息和雷达点云信息;

4、确定所述图像信息的第一特征表示;

本文档来自技高网...

【技术保护点】

1.一种语义分割方法,包括:

2.根据权利要求1所述的方法,获取作业环境的图像信息和雷达点云信息包括:

3.根据权利要求2所述的方法,还包括采用以下方法确定目标的标记信息:

4.根据权利要求3所述的方法,融合所述图像信息中的目标在图像坐标系中原始的第五标记信息以及图像坐标系中的第二标记信息和/或第四标记信息,以确定目标的标记信息包括:

5.根据权利要求3所述的方法,融合所述图像信息中的目标在图像坐标系中原始的第五标记信息以及图像坐标系中的第二标记信息和/或第四标记信息,以确定目标的标记信息包括:

6.根据权利要求1所述的方法,确...

【技术特征摘要】

1.一种语义分割方法,包括:

2.根据权利要求1所述的方法,获取作业环境的图像信息和雷达点云信息包括:

3.根据权利要求2所述的方法,还包括采用以下方法确定目标的标记信息:

4.根据权利要求3所述的方法,融合所述图像信息中的目标在图像坐标系中原始的第五标记信息以及图像坐标系中的第二标记信息和/或第四标记信息,以确定目标的标记信息包括:

5.根据权利要求3所述的方法,融合所述图像信息中的目标在图像坐标系中原始的第五标记信息以及图像坐标系中的第二标记信息和/或第四标记信息,以确定目标的标记信息包括:

6.根据权利要求1所述的方法,确定所述图像信息的第一特征表示包括:

7.根据权利要求1所述的方法,确定所述目标的标记信息的第二特征表示包括:

8.根据权利要求1...

【专利技术属性】
技术研发人员:史文婕张坚刘建
申请(专利权)人:江苏徐工国重实验室科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1