一种基于视觉的多传感器融合的智能防火机器人制造技术

本发明专利技术涉及一种基于视觉的多传感器融合的智能防火机器人，包括机器人本体、摄像头组和传感器组，摄像头组和传感器组均设置在机器人本体外侧，摄像头组包括深度相机、单目相机、红外摄像头和高清摄像头，传感器组包括红外传感器和烟雾传感器，机器人本体内设有控制系统，控制系统连接摄像头组和传感器组，控制系统执行以下步骤：控制机器人在场地内巡检，并实时获取红外摄像头的区域识别温度，当区域识别温度超过第一温度阈值时，定位目标区域，控制机器人移动至目标区域；获取红外传感器、烟雾传感器和高清摄像头的信息，判断是否起火，若起火则控制机器人使用灭火器灭火。与现有技术相比，本发明专利技术具有检测更精确等优点。本发明专利技术具有检测更精确等优点。本发明专利技术具有检测更精确等优点。

【技术实现步骤摘要】
一种基于视觉的多传感器融合的智能防火机器人


[0001]本专利技术涉及防火机器人领域，尤其是涉及一种基于视觉的多传感器融合的智能防火机器人。

技术介绍

[0002]防火机器人主要应用在仓库等物资存储区域的消防工作，可以极大地节省人力物力，一定程度上防止火情的进一步扩大。防火机器人的发展不仅符合时代，还能满足人们对消防安全要求日益增强的需要，提供安全保障。防火机器人的应用是做好消防防控工作，不间断消防检测是增强消防能力的有效措施。
[0003]现有技术中，提供了一些防火机器人，但大多是仅仅利用火焰传感器或烟雾传感器等检测着火点并进行灭火，或单纯通过视觉传感器获取图像并进行图像识别来分辨是否起火，但是上述方案检测准确度不高，容易产生误报，造成不必要的麻烦。

技术实现思路

[0004]本专利技术的目的就是为了克服上述现有技术存在的缺陷而提供一种基于视觉的多传感器融合的智能防火机器人。
[0005]本专利技术的目的可以通过以下技术方案来实现：
[0006]一种基于视觉的多传感器融合的智能防火机器人，包括机器人本体、摄像头组和传感器组，所述摄像头组和传感器组均设置在机器人本体外侧，所述摄像头组包括深度相机、单目相机、红外摄像头和高清摄像头，所述传感器组包括红外传感器和烟雾传感器，所述机器人本体内设有控制系统，所述控制系统连接摄像头组和传感器组，所述控制系统执行以下步骤：
[0007]步骤S1、控制机器人在场地内巡检，并实时获取红外摄像头的区域识别温度，当区域识别温度超过第一温度阈值时，将当前区域设为目标区域，执行步骤S2；
[0008]步骤S2、获取此时深度相机和单目相机的图像数据，定位目标区域，并控制机器人移动至目标区域；
[0009]步骤S3、当机器人移动至目标区域前时，获取红外传感器、烟雾传感器和高清摄像头的信息，判断是否起火，若起火则控制机器人使用灭火器灭火。
[0010]进一步地，所述步骤S3中，当红外传感器的数值高于第二温度阈值时、当烟雾传感器检测到存在烟雾时或通过高清摄像头获取的图像判定为存在火焰时，判断为起火。
[0011]进一步地，判定通过高清摄像头获取的图像是否存在火焰的方法为：
[0012]将高清摄像头获取的图像使用YOLO目标检测算法结合训练好的消防检测模型，获取判断结果；所述消防检测模型的训练过程如下：
[0013]将若干张带有火焰的图片和不带有火焰的图片作为输入，将其是否带有火焰的标签作为输出训练消防检测模型。
[0014]进一步地，还包括旋转盒体，所述旋转盒体设置在机器人本体上方，所述高清摄像
头和红外摄像头设置在旋转盒体上，所述旋转盒体保持360度旋转。。
[0015]进一步地，在步骤S3中，若判断为没有起火，控制系统将目标区域定位信息传输至远端计算机，管理人员根据该定位信息对目标区域进行查看。
[0016]进一步地，在步骤S3中，判断为起火后，控制系统将目标区域定位信息传输给远端计算机，远端计算机控制场地内所有空闲的灭火机器人前往目标区域协助灭火。
[0017]进一步地，所述传感器组还包括超声波传感器，在机器人移动时，所述控制系统获取超声波传感器的信息判断当前路径上是否存在障碍物，若存在则控制机器人本体进行避让。
[0018]进一步地，所述机器人本体底部设置有主动轮和万向从动轮，所述主动轮通过步进电机驱动，所述步进电机连接控制系统。
[0019]进一步地，当机器人电量不足时，控制系统将当前定位信息和待充电信息传输至远端计算机，同时控制机器人前往充电站；远端计算机控制距离较近的机器人执行充电机器人的巡检任务。
[0020]进一步地，所述灭火器固定在灭火器支撑结构上，所述灭火器支撑结构包括可旋转和调节高度的云梯，固定在机器人本体上，灭火器的喷头由继电器开关控制，所述继电器连接控制系统。
[0021]与现有技术相比，本专利技术具有以下优点：
[0022]1、本专利技术在灭火机器人上设置了红外摄像头，根据温度初步判定区域是否疑似起火，在移动到相应区域后又根据高清摄像头、红外传感器和烟雾传感器联合判断是否起火，融合了视觉设备以及相关传感器，相比起现有技术中仅采用摄像头或者仅采用传感器的方法，本专利技术的温度检测逻辑更合理，对起火的检测更精确。
[0023]2、本专利技术灭火机器人的高清摄像头和红外摄像头始终保持360度旋转，确保了机器人在巡检时周围的所有区域都能被检测到，保证了搜索范围的全面。
[0024]3、本专利技术采用多机协调的方案，在检测到起火时通过远端计算机控制空闲的机器人灭火，增加了灭火的效率；同时在机器人需要充电时，远端计算机可以及时协调附近的其它机器人接管工作。
[0025]4、本专利技术在机器人上设置了超声波传感器，结合摄像头为机器人提供了避障能力，确保机器人在巡检以及前往目标区域时的效率。
[0026]5、本专利技术中，若检测到目标区域未起火，会通知管理人员查看，防止由于传感器或高清摄像头故障引起的误报。
附图说明
[0027]图1为本专利技术的机器人正面示意图。
[0028]图2为本专利技术的机器人底部示意图。
[0029]附图标记：1
‑
机器人本体；2
‑
旋转轴；3
‑
旋转电机；4
‑
报警系统；5
‑
烟雾传感器；6
‑
超声波传感器；7
‑
烟雾传感器；8
‑
超声波传感器；9
‑
烟雾传感器；11
‑
灭火器；12
‑
灭火器支撑结构；13
‑
主动轮；14
‑
万向从动轮；18
‑
IMU；19控制系统；20
‑
旋转盒体；21
‑
红外摄像头；22
‑
高清摄像头；23
‑
红外传感器；24
‑
红外传感器；25
‑
单目相机
‑
；26
‑
深度相机；27
‑
电池仓。
具体实施方式
[0030]下面结合附图和具体实施例对本专利技术进行详细说明。本实施例以本专利技术技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本专利技术的保护范围不限于下述的实施例。
[0031]本实施例提供了一种基于视觉的多传感器融合的智能防火机器人，包括机器人本体、摄像头组和传感器组，摄像头组和传感器组均设置在机器人本体外侧，摄像头组包括深度相机、单目相机、红外摄像头和高清摄像头，传感器组包括超声波传感器、红外传感器和烟雾传感器，且机器人本体内设有控制系统，控制系统连接摄像头组和传感器组。
[0032]如图1所示，旋转盒体20设置在机器人本体1上方，机器人本体上设有旋转轴2和驱动旋转轴2的旋转电机3，机器人本体1的中央设有用于旋转轴2穿本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于视觉的多传感器融合的智能防火机器人，其特征在于，包括机器人本体(1)、摄像头组和传感器组，所述摄像头组和传感器组均设置在机器人本体(1)外侧，所述摄像头组包括深度相机(26)、单目相机(25)、红外摄像头(21)和高清摄像头(22)，所述传感器组包括红外传感器和烟雾传感器，所述机器人本体(1)内设有控制系统(19)，所述控制系统(19)连接摄像头组和传感器组，所述控制系统(19)执行以下步骤：步骤S1、控制机器人在场地内巡检，并实时获取红外摄像头(21)的区域识别温度，当区域识别温度超过第一温度阈值时，将当前区域设为目标区域，执行步骤S2；步骤S2、获取此时深度相机(26)和单目相机(25)的图像数据，定位目标区域，并控制机器人移动至目标区域；步骤S3、当机器人移动至目标区域前时，获取红外传感器、烟雾传感器和高清摄像头(22)的信息，判断是否起火，若起火则控制机器人使用灭火器灭火。2.根据权利要求1所述的一种基于视觉的多传感器融合的智能防火机器人，其特征在于，所述步骤S3中，当红外传感器的数值高于第二温度阈值时、当烟雾传感器检测到存在烟雾时或通过高清摄像头(22)获取的图像判定为存在火焰时，判断为起火。3.根据权利要求1所述的一种基于视觉的多传感器融合的智能防火机器人，其特征在于，判定通过高清摄像头(22)获取的图像是否存在火焰的方法为：将高清摄像头(22)获取的图像使用YOLO目标检测算法结合训练好的消防检测模型，获取判断结果；所述消防检测模型的训练过程如下：将若干张带有火焰的图片和不带有火焰的图片作为输入，将其是否带有火焰的标签作为输出训练消防检测模型。4.根据权利要求1所述的一种基于视觉的多传感器融合的智能防火机器人，其特征在于，还包括旋转盒体(20)，所述旋转盒体(20)设置在机器人本体(1)(1)上方，...

【专利技术属性】
技术研发人员：刘畅，党淑雯，张诚毅，凌晨飞，陈勇，
申请(专利权)人：上海工程技术大学，
类型：发明
国别省市：