一种带视觉系统的服务机器人技术方案

本发明专利技术公开了一种带视觉系统的服务机器人，包括机器人车体及安装在其上方机械手，所述机器人车体内装有机器人控制车体运动和机械手动作的控制系统，所述机器人车体内还装有嵌入式视觉跟踪系统和WIFI通信模块，视觉跟踪系统的摄像头通过云台安装在机械手上，WIFI通信模块实现控制系统、视觉跟踪系统与上位机的数据与指令的无线传输。本发明专利技术在服务机器人上采用嵌入式视觉跟踪系统，利用摄像头进行视觉跟踪，并利用WIFI通信模块与上位机实现视觉传输，以WIFI无线网络为数据传输载体，实现实时控制、音视频传输和图像采集等功能的智能系统，本发明专利技术所述的服务机器人可用于在反恐侦查、战场C4ISR系统、消防救灾、生命探测等民用及军事领域。

A service robot with vision system

The invention discloses a service robot with visual system, including the robot body and is installed in the machine above the hand control system of the robot body is arranged in the robot control vehicle and manipulator movement, embedded visual tracking system and WIFI communication module is also equipped with the robot body, visual tracking system mounted camera in the manipulator through the platform, the WIFI communication module to realize wireless transmission control system, data and instruction of visual tracking system and PC. The invention adopts the visual tracking system embedded in the service robot, visual tracking using the camera, and the use of WIFI communication module and PC visual transmission based on WIFI wireless network for data transmission carrier, intelligent real-time control system, audio and video transmission and image acquisition functions, service robot of the invention can be used for in the anti-terrorism investigation, battlefield C4ISR system, fire rescue, life detection and other civil and military fields.

【技术实现步骤摘要】
一种带视觉系统的服务机器人
本专利技术涉及服务机器人，特别涉及一种带视觉系统的服务机器人。
技术介绍
针对目前服务机器人都是基于半自动模式下开展任务，这使得需要人的参与控制，这成了服务机器人发展的短板，尤其是高分辨率的物体识别技术一直困扰服务机器人进一步智能化的发展难题，以往一直是使用PC机的参与复杂的图像处理，再通过无线来控制机器人的动作，这样一来消耗了大量的传输时间和受到了距离的限制。
技术实现思路
为克服上述现有技术的缺陷与不足，本专利技术提供一种带视觉系统的服务机器人。本专利技术所采用的技术方案是：一种带视觉系统的服务机器人，包括机器人车体及安装在其上方机械手，所述机器人车体内装有机器人控制车体运动和机械手动作的控制系统，所述机器人车体内还装有嵌入式视觉跟踪系统和WIFI通信模块，视觉跟踪系统的摄像头通过云台安装在机械手上，WIFI通信模块实现控制系统、视觉跟踪系统与上位机的数据与指令的无线传输。具体的，所述机器人车体装有四个车轮，每个车轮由一个直流电机驱动，四个直流电机由可充电电池供电。优选的，所述云台包括两个数字舵机，摄像头可在云台上可水平0°～180°、上下0°～180°旋转。优选的，所述机械手为五自由度机械手，包括五个微伺服舵机，分别对应于臂、肩、肘、前腕和夹持器的五个旋转关节。优选的，所述控制系统包括单片机及分别与其连接的直流电机驱动电路、舵机驱动电路、下载串口以及数据通信接口。优选的，所述机器人车体上还装有受控制系统控制的灯光装置。优选的，所述嵌入式视觉跟踪系统采用采用PropellerP8X32A八核32位芯片嵌入linux系统，在linux系统上运行OPENCV图像处理库驱动摄像头，完成视频采集，数据传输、转发。进一步优选的，所述上位机采用数据包格式传送指令到机器人WIFI模块，WIFI模块通过解包机制把数据包解开，通过串口发送到单片机并通过各驱动模块执行灯光控制、拍照和机器人运动操作。优选的、所述上位机的软件客户端包括主窗口和配置窗口，主窗口包括视频显示区及控制按钮，用于显示回传视频和控制机器人运动，配置窗口完成WIFI无线网络及机器人控制指令自定义键值的配置。优选的，所述上位机利用无线网卡通过Socket发送数据包到WIFI模块。本专利技术在服务机器人上采用嵌入式视觉跟踪系统，利用摄像头进行视觉跟踪，并利用WIFI通信模块与上位机实现视觉传输，以WIFI无线网络为数据传输载体，实现实时控制、音视频传输和图像采集等功能的智能系统，本专利技术所述的服务机器人可用于在反恐侦查、战场C4ISR系统、消防救灾、生命探测等民用及军事领域。附图说明图1是本专利技术所述的服务机器人的立体示意图；图2是本专利技术所述的服务机器人的侧视图；图3是本专利技术的系统整体实现框图；图4是本专利技术的电机驱动电路的实施例原理图；图5是本专利技术的舵机驱动电路的实施例原理图；图6是本专利技术的软件系统体系结构示意图。具体实施方式为了便于本领域技术人员理解，下面将结合附图以及实施例对本专利技术进行进一步详细描述。如图1、2和3所示，本专利技术所揭示的带视觉系统的服务机器人，包括机器人车体及安装在其上方的机械手，所述机器人车体内装有机器人控制车体运动和机械手动作的控制系统，所述机器人车体内还装有嵌入式视觉跟踪系统和WIFI通信模块，视觉跟踪系统的摄像头通过云台安装在机械手上，WIFI通信模块实现控制系统、视觉跟踪系统与上位机的数据与指令的无线传输。所述车体采用全铝合金钣金模型，面板上设计有多用途固定孔，满足以后升级的扩展，表面为氧化磨砂处理，可以起到抗氧化生锈等，车体装有4个车轮，内部主要由4个12V/120转直流电机和电池组构成，电机两两并联，相当于驱动两个电机，增大机器人的运载能力和爬坡能力。为方便电池充放电，设计了充放电电路，只需拨动开关即可实现充放电操作。电池组电源12V，可多个并联使用，为机器人提高持久动力。机械手采用五自由度铝合金机械手，包括五个精确的微伺服舵机，分别对应于臂、肩、肘、前腕、夹持器五个旋转关节，每个关节可在规定的范围内活动，其可安装到移动平台用于工作人员可视作业，实时修改控制指令，随时精确地完成每一项任务。机械手的总体架构使用铝合金钣金材料磨砂氧化处理机械件加角度舵机构成，角度舵机的控制方式为高脉冲控制信号控制，对应的有32路舵机控制器。摄像头选择高质量高清摄像头进行监控，摄像头满足0°～180°水平，0°～180°上下旋转，可以远程打开或关闭。摄像头型号为索尼PS2，通讯接口为USB协议。云台由2个MG995数字舵机及其他辅助材料构成。WIFI模块采用TP-LINK全新推出的150Mbit.s-1迷你型3G无线路由器。该路由器具有尺寸小，供电电压低的特点。其供电电压只有5V，且支持OpenWrt。OpenWrt是一个基于Linux的开源路由固件，提供了一个完全可写的文件系统及软件包管理，对支持OpenWrt的路由器刷机后，其相当于一个Linux小系统。路由器选择OpenWrt作为操作系统，将USB摄像头采集的现场图片发给远端的PC控制终端，并将上位机发出的命令通过串口转发给单片机控制系统。控制系统主要包括电源模块、电机驱动、舵机驱动、下载串口、单片机电路、红外壁障、车灯控制以及数据通信接口等。电机驱动采用英飞凌公司的BTS7960直流电刷电机驱动芯片，其具有大电流MOSFET半桥结构。芯片具有较高的集成度和足够的输出能力，并在能耗方面具有优势。在集成化和小型化的电机控制系统中，适合作为理想的电机驱动芯片。图4为BTS7960与单片机组成的H电机驱动单元。由于所采用驱动芯片是半桥，因此需要采用两片以构成全桥实现电机的正反转。单片机产生2路PWM输出作为两片BTS7960的控制信号，同时要求PWM0、PWM1不能同时为高电平。采用定时器输出硬件PWM脉冲，使得单片机CPU只在改变PWM占空比时参与运算，这样可大幅减轻系统运算负担和PWM软件编程成本。图5为舵机驱动方案电路图。为保证较高的电源利用率，舵机驱动采用LM2596开关型稳压芯片实现，它可以提供3A以上电流，驱动强劲。由于舵机型号为MG995，其工作电压为5.0V～7.0V.因此舵机驱动芯片选择了可调LM2596-ADJ芯片，其输出电压Vout＝Vref(1.0+R2/R1)，其中，Vref＝1.23V为芯片内部参考电压。嵌入式视觉跟踪系统采用parallax公司的PropellerP8X32A八核32位芯片嵌入linux系统，在linux系统上运行OPENCV图像处理库驱动OV7665摄像头来实现，把常用的算法全部以函数的方式写好，外部可以通过串口总线来调用指令来调用模块中的功能模块，这样做可以把视觉处理等复杂功能可以内置在一个集成模块中。WIFI视觉传输是以WIFI无线网络为数据传输载体，实现实时控制、音视频传输和图像采集等功能的智能系统。经测试，该机器人可用于在反恐侦查、战场C4ISR系统、消防救灾、生命探测等民用及军事领域。操作员在操作终端通过WIFI无线网络连接到小车内置的WIFI模块上，并向其发出相关操作指令，WIFI模块接收指令并传递给内置的单片机，单片机通过控制电路让机器人执行相应的指令；同时，安装在机器人上的各种传感器和摄像头可以通过WIFI网络将本文档来自技高网...

【技术保护点】
一种带视觉系统的服务机器人，包括机器人车体及安装在其上方的机械手，所述机器人车体内装有机器人控制车体运动和机械手动作的控制系统，其特征在于：所述机器人车体内还装有嵌入式视觉跟踪系统和WIFI通信模块，嵌入式视觉跟踪系统的摄像头通过云台安装在机械手上，WIFI通信模块实现控制系统、嵌入式视觉跟踪系统与上位机的数据与指令的无线传输；所述控制系统包括单片机及分别与其连接的直流电机驱动电路、舵机驱动电路、下载串口以及数据通信接口；所述嵌入式视觉跟踪系统采用PropellerP8X32A八核32位芯片嵌入linux系统，在linux系统上运行OPENCV图像处理库驱动摄像头，完成视频采集，数据传输、转发；所述机器人车体装有四个车轮，每个车轮由一个直流电机驱动，四个直流电机由可充电电池供电；所述直流电机两两并联；所述机械手为五自由度机械手，包括五个微伺服舵机，分别对应于臂、肩、肘、前腕和夹持器的五个旋转关节；所述机械手用于通过实时修改的控制指令驱动控制，且所述机械手的总体架构使用铝合金钣金材料磨砂氧化处理机械件加角度舵机构成，角度舵机的控制方式为高脉冲控制信号控制，对应的有32路舵机控制器。

【技术特征摘要】
1.一种带视觉系统的服务机器人，包括机器人车体及安装在其上方的机械手，所述机器人车体内装有机器人控制车体运动和机械手动作的控制系统，其特征在于：所述机器人车体内还装有嵌入式视觉跟踪系统和WIFI通信模块，嵌入式视觉跟踪系统的摄像头通过云台安装在机械手上，WIFI通信模块实现控制系统、嵌入式视觉跟踪系统与上位机的数据与指令的无线传输；所述控制系统包括单片机及分别与其连接的直流电机驱动电路、舵机驱动电路、下载串口以及数据通信接口；所述嵌入式视觉跟踪系统采用PropellerP8X32A八核32位芯片嵌入linux系统，在linux系统上运行OPENCV图像处理库驱动摄像头，完成视频采集，数据传输、转发；所述机器人车体装有四个车轮，每个车轮由一个直流电机驱动，四个直流电机由可充电电池供电；所述直流电机两两并联；所述机械手为五自由度机械手，包括五个微伺服舵机，分别对应于臂、肩、肘、前腕和夹持器的五个旋转...

【专利技术属性】
技术研发人员：谭立新，张卫兵，邓知辉，罗坚，李刚成，肖成，
申请(专利权)人：湖南信息职业技术学院，
类型：发明
国别省市：湖南,43