自动驾驶智能扫路人机交互控制系统及设备技术方案

本发明专利技术公开了一种自动驾驶智能扫路人机交互控制系统及设备，包括融合建模模块将感知模块和定位模块的信息进行融合，设置光影交互信号的指令库，构建自动行驶所需要的行驶场景模型；决策规划模块是基于融合的感知信号和定位信号以及场景模型做决策规划，遍历预设的光影交互信号的定义启动指令，持续跟踪记录位置和后续动作，视频感知模块辐射范围为周围环境与红外感知模块共同感知并记录周围环境变化，进行光影算法融合；人机交互模块包括语音交互模块和光影交互模块；光影交互模块包括摄像设备、光影显示模块、光影控制模块。本发明专利技术设置光影交互信号的指令库，构建行驶场景模型；充分利用语音交互系统和光影交互系统，建立清扫环境决策系统。

【技术实现步骤摘要】
自动驾驶智能扫路人机交互控制系统及设备
本专利技术涉及自动环卫设备
和自动清洁设备
，尤其是涉及一种带有人机交互系统和自动驾驶系统的智能扫路车或扫路机和智能扫路车或扫路机器人。
技术介绍
随着城市的不断扩建，城镇化率逐年提高，城镇内部需要进行环卫清扫的道路面积大量增加，而环卫工人老龄化严重，为了提高道路清扫的效率以及降低环卫工人的安全风险，在大量的城镇市政道路上采用了人工驾驶的传统环卫清扫车辆。由于自动驾驶和人工智能领域在近年间有了突飞猛进的发展，可以将新兴技术引入至传统环卫行业。传统环卫扫路车或扫路机，人工驾驶，驱动方式为传统燃油车或者电动车，人工驾驶，需要实际操作人员，环卫工人老龄化严重，对于新技术难于掌握，带有自动驾驶系统的环卫扫路车或扫路机，按照工作指令和规划路线执行环卫工作的电动扫路车或扫路机，电动扫路车或扫路机仅能通过云端或者移动端进行管理，对于软件和硬件的操作水平要求较高，与现有的环卫工人技术能力差距较大，同时在与外界的信息交互中，基本没有沟通。
技术实现思路
1、本专利技术的目的本本文档来自技高网...

【技术保护点】
1.一种自动驾驶智能扫路人机交互控制系统，其特征在于包括：/n融合建模模块将感知模块和定位模块的信息进行融合，设置光影交互信号的指令库，构建人机交互作业场景模型；/n决策规划模块是基于融合的感知信号和定位信号以及场景模型做决策规划，遍历预设的光影交互信号的定义作业指令，持续跟踪记录互动对象的位置和行为动作，视频感知模块辐射范围为周围环境与红外感知模块共同感知并记录周围环境变化，进行光影算法融合；/n人机交互模块包括语音交互模块和光影交互模块；/n光影交互模块包括摄像设备、光影显示模块、光影控制模块；/n摄像设备检测记录互动对象的位置和行为动作的图像或视频信息；进一步行为动作可以是手势或肢体动作...

【技术特征摘要】
1.一种自动驾驶智能扫路人机交互控制系统，其特征在于包括：
融合建模模块将感知模块和定位模块的信息进行融合，设置光影交互信号的指令库，构建人机交互作业场景模型；
决策规划模块是基于融合的感知信号和定位信号以及场景模型做决策规划，遍历预设的光影交互信号的定义作业指令，持续跟踪记录互动对象的位置和行为动作，视频感知模块辐射范围为周围环境与红外感知模块共同感知并记录周围环境变化，进行光影算法融合；
人机交互模块包括语音交互模块和光影交互模块；
光影交互模块包括摄像设备、光影显示模块、光影控制模块；
摄像设备检测记录互动对象的位置和行为动作的图像或视频信息；进一步行为动作可以是手势或肢体动作或移动轨迹；将视频信号传输至光影控制模块；
光影显示模块向环境发射光影信号与环境的互动和联络；
光影控制模块，接收光影系统感知数据，对视频图像数据和红外感知数据做物体聚类识别和行为动作以及轨迹识别；动作轨迹识别，提取每帧图像数据中的特征点；激光发射器形成的光影在图像算法识别过程中，通过光影区域与周边环境亮度差异，识别交互指令；决策后的指令进一步传输回光影控制模块，通过光影显示设备发射互动的光影信号。


2.根据权利要求1所述的自动驾驶智能扫路人机交互控制系统，其特征在于，采集光影交互模块与目标交互的信息，交互对象包括光影、智能终端、声音，通过摄像设备和红外感知设备接收到的环境信息或光影投射采集的光影手势信息。


3.根据权利要求1所述的自动驾驶智能扫路人机交互控制系统，其特征在于，还包括定位模块为扫路车或扫路机提供精准位置定位。


4.根据权利要求1所述的自动驾驶智能扫路人机交互控制系统，其特征在于，还包括感知模块为扫路车或扫路机提供周围环境的实时检测信号，为扫路车或扫路机提供位置信息和环境信息。


5.根据权利要求1所述的自动驾驶智能扫路人机交互控制系统，其特征在于，...

【专利技术属性】
技术研发人员：陈海波，岳宗豪，
申请(专利权)人：深兰科技上海有限公司，
类型：发明
国别省市：上海;31