基于增强现实技术的特种机器人图像采集控制方法及系统技术方案

本发明专利技术涉及特种机器人技术领域，公开一种基于增强现实技术的特种机器人图像采集控制方法，包括如下步骤：S1.进行广角镜头到眼镜显示器图像的曲面投射；S2.实时图像数据传输；S3.进行人眼位置校正与广角镜头的变焦处理；S4.进行头盔姿态感应到三维云台控制的映射以及调整。本发明专利技术特种机器人的视频监控从二维图像变为三维图像，更具有身临其境的操作感，三维云台的控制从摇杆按钮方式变为体感式操作，解放手控制云台的操作，使控制特种机器人更加灵活和专注。

【技术实现步骤摘要】

本专利技术涉及特种机器人
，特别涉及一种基于增强现实技术的特种机器人图像采集控制方法及系统。
技术介绍
特种机器人是一种具有履带式结构，具有/不具有多个摆臂，具有/不具有操作机械臂的野外移动机器人；具有一个或多个摄像头用以采集环境图像。在移动过程中，需对外界环境进行视频采集并传输给控制端，以达到了解特种机器人车体周围环境的功能。现有方案中，使用一个或多个摄像头，带有云台的单目摄像头等图像拍摄装置，使用有线或者无线通讯方式，将视频信号传输给控制端的屏幕进行显示。现有技术方案属于动态图像查看，并没有对机器人本体周围环境进行真实还原为立体图像呈现给观察者，观察者对于机器人的状态和环境的感受不直观，并且现有的摄像头云台控制仍然使用摇杆或者按钮等控制方式，使用者控制机器人本体运动时观察四周环境很不方便。
技术实现思路
本专利技术旨在克服现有特种机器人的缺陷，实现特种机器人环境视觉图像的真实还原，，提供一种基于增强现实技术的特种机器人图像采集控制方法及系统。为实现上述目的，本专利技术采用以下技术方案：本专利技术提供一种基于增强现实技术的特种机器人图像采集控制方法，包括如下步骤：S1、进行广角镜头到眼镜显示器图像的曲面投射；S2、实时图像数据传输；S3、进行人眼位置校正与广角镜头的变焦处理；S4、进行头盔姿态感应到三维云台控制的映射以及调整。一些实施例中，所述广角镜头所拍摄的两幅图像经过裁剪、变形图像处理，传输至眼镜显示器的两个曲面镜片。一些实施例中，所述实时图像数据传输，用于实时流畅观察机器人周围环境三维图像。一些实施例中，所述人眼位置校正与广角镜头的变焦处理为，根据人眼瞳距调整三维云台两个广角摄像头的间距，并根据人眼瞳孔的定位校正镜头的变焦参数。一些实施例中，所述头盔姿态感应到三维云台控制的映射以及调整为，装有惯性导航传感器的眼镜感应到佩戴者头部运动后，向机器人本体发出控制指令，控制机器人三维云台的水平旋转和竖直起降。本专利技术还提供一种基于增强现实技术的特种机器人图像采集控制系统，包括广角镜头、眼镜、三维云台，其中，进行广角镜头到眼镜显示器图像的曲面投射；传输模块实时图像数据传输；进行人眼位置校正与广角镜头的变焦处理；进行头盔姿态感应到三维云台控制的映射以及调整。一些实施例中，所述广角镜头为电子可变焦。一些实施例中，所述三维云台可以水平360度旋转，竖直150度运动。一些实施例中，所述眼镜上装有惯性导航传感器，用于检测带眼镜人的运动姿态，以同步三维云台的水平运动姿态和竖直运动姿态。本专利技术的有益效果在于：特种机器人的视频监控从二维图像变为三维图像，更具有身临其境的操作感，三维云台的控制从摇杆按钮方式变为体感式操作，解放手控制云台的操作，使控制特种机器人更加灵活和专注。附图说明图1示意性示出根据本专利技术一个实施例的采集控制方法的流程图。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及具体实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本专利技术，而不构成对本专利技术的限制。如图1所示，本专利技术提供一种基于增强现实技术的特种机器人图像采集控制方法，包括如下步骤：S1、进行广角镜头到眼镜显示器图像的曲面投射；S2、实时图像数据传输；S3、进行人眼位置校正与广角镜头的变焦处理；S4、进行头盔姿态感应到三维云台控制的映射以及调整。本专利技术的有益效果在于：特种机器人的视频监控从二维图像变为三维图像，更具有身临其境的操作感，三维云台的控制从摇杆按钮方式变为体感式操作，解放手控制云台的操作，使控制特种机器人更加灵活和专注。一些实施例中，所述广角镜头所拍摄的两幅图像经过裁剪、变形图像处理，传输至眼镜显示器的两个曲面镜片，以达到模拟人眼所观测到得图像效果。所述实时图像数据传输，用于实时流畅观察机器人周围环境三维图像，具体为是操作控制台的使用者可以实时流畅观察到机器人周围环境三维图像的基础保证。所述人眼位置校正与广角镜头的变焦处理为，根据人眼瞳距调整三维云台两个广角摄像头的间距，并根据人眼瞳孔的定位校正镜头的变焦参数。优选地，所述头盔(头盔)姿态感应到三维云台控制的映射以及调整为，装有惯性导航传感器的眼镜感应到佩戴者头部运动后，向机器人本体发出控制指令，控制机器人三维云台的水平旋转和竖直起降。本专利技术还提供一种基于增强现实技术的特种机器人图像采集控制系统，包括广角镜头、眼镜、三维云台，其中，进行广角镜头到眼镜显示器图像的曲面投射；传输模块实时图像数据传输；进行人眼位置校正与广角镜头的变焦处理；进行头盔姿态感应到三维云台控制的映射以及调整。具体该系统为在室外机器人端安装的是带三维云台的双摄像头视觉系统，采用电子可变焦、广角镜头。一些实施例中，所述三维云台可以水平360度旋转，竖直150度运动。两个摄像头的横向间距可以通过第三维度的操作拉近或者拉远。所述眼镜上装有惯性导航传感器，用于检测带眼镜人的运动姿态，以同步三维云台的水平运动姿态和竖直运动姿态。在控制台端安装有增强视觉效果的眼镜(头盔)，眼镜(头盔)的两个镜片为弧面显示，可以分别显示经过投射处理的两个广角镜头所拍摄的图像，通过眼镜(头盔)正对眼睛的摄像头获取人眼的位置和瞳距，通过计算得到机器人端安装的两个广角镜头的距离等信息，机器人自动调整和校正镜头，以适应不同的使用者和观察不同距离的环境景物。在实际应用中，如在一个履带式特种机器人使用本专利技术所述的图像采集可控制方法时，可能会出现下列场景：机器人行走至野外时，操作员可以随时自由的观察机器人四周的情况不用切换摄像机视角或者手动控制摄像云台。本专利技术不仅限于履带式特种机器人应用范围，也包括其它室内外可移动式机器人(设备)使用该方案用于观察环境图像的应用场景。以上所述本专利技术的具体实施方式，并不构成对本专利技术保护范围的限定。任何根据本专利技术的技术构思所作出的各种其他相应的改变与变形，均应包含在本专利技术权利要求的保护范围内。本文档来自技高网...

【技术保护点】
一种基于增强现实技术的特种机器人图像采集控制方法，其特征在于，包括如下步骤：S1、进行广角镜头到眼镜显示器图像的曲面投射；S2、实时图像数据传输；S3、进行人眼位置校正与广角镜头的变焦处理；S4、进行头盔姿态感应到三维云台控制的映射以及调整。

【技术特征摘要】
1.一种基于增强现实技术的特种机器人图像采集控制方法，其
特征在于，包括如下步骤：
S1、进行广角镜头到眼镜显示器图像的曲面投射；
S2、实时图像数据传输；
S3、进行人眼位置校正与广角镜头的变焦处理；
S4、进行头盔姿态感应到三维云台控制的映射以及调整。
2.如权利要求1所述的特种机器人图像采集控制方法，其特征
在于，所述广角镜头所拍摄的两幅图像经过裁剪、变形图像处理，传
输至眼镜显示器的两个曲面镜片。
3.如权利要求1所述的特种机器人图像采集控制方法，其特征
在于，所述实时图像数据传输，用于实时流畅观察机器人周围环境三
维图像。
4.如权利要求1所述的特种机器人图像采集控制方法，其特征
在于，所述人眼位置校正与广角镜头的变焦处理为，根据人眼瞳距调
整三维云台两个广角摄像头的间距，并根据人眼瞳孔的定位校正镜头
的变焦参数。
5.如权利要求1所述的特种机器人图像采集控制方法，其特征
在于...

【专利技术属性】
技术研发人员：李邦宇，谭波悦，郑春晖，姜楠，张涛，王海鹏，
申请(专利权)人：沈阳新松机器人自动化股份有限公司，
类型：发明
国别省市：辽宁;21