基于计算机视觉App的开门预警防撞系统技术方案

本实用新型专利技术公开了一种基于计算机视觉App的开门预警防撞系统，用来减少汽车车内乘客突然开启车门致使后方来车撞倒的事故的发生，其主要工作流程包括如下步骤：1）打开多媒体控制器（流媒体后视镜或者车载信息娱乐系统）上专门开发的App，App接收并显示来自摄像头的图像画面，此时可以当作后视镜或行车记录仪使用；2）当汽车停下后，App监测到车辆停车，乘客有开门下车的可能性，此时App的开门预警功能开始启动工作；3）如果App监测到有感兴趣目标靠近且足够危险，App将控制多媒体控制器发出报警提示声音；4）此外，车主可以在App里根据自己的喜好和实际情况，对App的功能开关、模式选择、调整阈值等进行个性化设置。本实用新型专利技术的优点是结构简单、可人机交互、用户体验好、可行性高、可通过OTA不断优化升级等优点。

【技术实现步骤摘要】
基于计算机视觉App的开门预警防撞系统
本技术涉及一种汽车开门预警防撞系统，属于汽车安全

技术介绍
随着汽车保有量的不断增加，道路变得越来越拥挤，因此，时常会遇到当汽车在路边停靠时，摩托车/电动车/自行车紧挨着汽车旁边驶过的情况。若车内乘客在没有仔细观察车外情况的情况下贸然开启车门，则会导致危险情况的发生，轻则使交通工具受损，重则致人伤亡，而这样的现象其实可以通过技术手段大大减少。经检索，我国国家知识产权局专利库里有不少关于车门开启预警防撞系统的专利，但这些解决方案，一部分是引入太多硬件、结构复杂，成本高、性价比低，没有人机交互界面、使用体验差，一部分是其具体实施例含糊不清、纸上谈兵，也正是因为这些原因，才导致目前这些解决方案迟迟没有落地普及。另一方面，随着计算机处理器性能的提升和计算机视觉技术的发展，现在在微型计算机上运行计算机视觉程序变得越来越可行，这为我们的技术方案提供了良好的硬件和软件基础。而且，随着电动汽车和无人驾驶汽车的增多，未来汽车上的摄像头、显示屏会越来越多，这将为我们的系统提供现成的硬件设施，在车上装载各种各样的软件系统将变得轻而易举。另外，开门预警功能也会是未来无人出租车、自动驾驶必备的一项汽车主动安全功能。
技术实现思路
为了减少突然开启车门撞倒行人的事故的发生，以及改善目前已有方案可行性低的问题，本技术提供了一种结构简单、用户体验好、可行性高的解决方案。为实现上述目的，本技术提供了一种基于计算机视觉App的开门预警系统的解决方案，它包括：多媒体控制器、装在多媒体控制器上的App、倒车影像摄像头、左外后视摄像头、右外后视摄像头；其中多媒体控制器与倒车影像摄像头、左外后视摄像头、右外后视摄像头通过电路连接，它上面能安装App；所述App用来对多媒体控制器接收到的摄像头图像信息进行算法处理，并控制多媒体控制器实现开门预警功能。一种基于计算机视觉App的开门预警系统，它的工作流程包括以下几个步骤：S1：打开多媒体控制器（流媒体后视镜或者车载信息娱乐系统）上专门开发的App，App接收并显示来自摄像头的图像画面，对于流媒体后视镜，此时它可以当作电子后视镜或行车记录仪使用；S2：当汽车停下后，App判断出车辆静止，有开门下车的可能性，此时App的开门预警功能开始启动工作；S3：如果App监测到有感兴趣目标靠近且足够危险，多媒体控制器将发出报警提示声音；S4：此外，车主可以在App里根据自己的喜好和实际情况，对App的功能开关、模式选择、调整阈值等进行个性化设置。进一步地，开门预警功能是通过安装在在多媒体控制器上的App实现的。进一步地，多媒体控制器包括流媒体后视镜和车载信息娱乐系统，上面可以安装App，车主可通过多媒体控制器的屏幕与App进行人机交互，从而对App进行自定义设置。进一步地，App判断出车辆静止，乘客有开门下车的可能性是通过画面中的像素变化和多媒体控制器内置的加速度传感器得出的。作为未来的备选方案，还可以使用汽车座椅坐垫靠背里的A面SBR监测到的电阻值变化来判断乘客是否有下车意图。进一步地，App的开门预警功能是通过目标检测、目标跟踪、目标测距、目标测速、目标测时、声音预警实现的；其中，目标检测：用来识别车辆后方情况感兴趣区域内是否有感兴趣目标出现，并确定它们在画面中的位置；目标跟踪：用于连续跟踪优选感兴趣目标的移动轨迹，所述优选感兴趣目标是指从检测到的感兴趣目标中再经过筛选得到的目标，筛选条件为：进入感兴趣区域内、置信度最高的几个目标，且目标是从车后往车前运动；目标测距：用于计算优选感兴趣目标和优先级车门的距离；目标测速：用于计算优选感兴趣目标移动的速度，目标测时：结合目标测距和目标测速的结果，计算优选感兴趣目标到达优先级车门的时间；声音预警：如果优选感兴趣目标达到优先级车门的时间低于设定的阈值，则App会判断现在开门足够危险，从而触发多媒体控制器的扬声器发出声光预警；上面所述的感兴趣类别包括骑助动车者（助动车包括电动车、摩托车）、骑自行车者、轿车，特别地，这里将骑行者与其交通工具合在一起检测识别；感兴趣目标是感兴趣类别的子集，即这3个感兴趣类别中被车主在设置界面的复选框选中后，成为感兴趣目标；上面所述的感兴趣区域是指感兴趣目标可能出现在画面中的位置的区域；上面所述的优先级车门是根据车主在App里的设置得出的，对于某一侧的车门，如果开启对该侧后排车门的预警，则该侧的优先级车门为后排车门，如果该侧后排车门没有开启预警，则该侧的前排车门为优先级车门，另外一侧同理，对于优先级车门是前排车门还是后排车门，在目标测距时有一定的差别，优先级车门是后排车门的目标测距结果会比优先级车门是前排车门的目标测距结果小。进一步地，车主可以对App进行个性化设置，包括：1）设置对汽车四个车门中哪几个车门所对应的后方情况进行监测和预警；2）设置只针对上述感兴趣类别的任意子集进行监测，对于没被选中的感兴趣类别，即使它有危险，也不会触发系统报警，这样做的目的是为了适量地减少系统可能频繁预警带来的误判；3）设置触发App报警的时间阈值，即调整App报警的灵敏度，当App的算法计算出来的优选感兴趣目标到达优先级车门的时间小于该阈值时，App就会通过多媒体控制器的扬声器发出声音预警；4）设置预警声音的音效，由车主选择一款喜欢的音效作为他的预警提示音；5）选择预警方式：有声音预警、车内灯光预警、车外灯光预警、干预车门锁4种方式可以选择，其中后3种适用于此基于计算机视觉app的开门预警系统是汽车原装功能的情况，这种情况的多媒体控制器是信息娱乐系统。如果多媒体控制器是流媒体后视镜，则声音预警是最适合它的预警方式。本技术与现有技术相比，具有以下优点：1）结构简单：由于本系统的大部分功能都通过App来实现，汽车机械结构无需改动，也不需要布置复杂的硬件设备；2）成本低廉：由于可以利用车上现有的硬件设备，无需另购其他硬件设备，无需增加额外成本；3）支持后装：对于后装流媒体后视镜的车主，这个系统也可以后装使用；4）性价比高：如果对App的功能进行进一步的升级迭代，功能越来也丰富和强大，而成本却不变，性价比就越来越高；5）对比其他专利技术，它们都没有人机交互功能，本技术中车主可通过App的人机交互界面对开门预警功能的一些参数进行自定义设置，提升用户体验；6）可行性高；集合以上优点，本技术还有可行性高、可落地的优点。附图说明这里的附图主要展示的是优选实施例，不构成对本技术保护范围的限制。图1是本技术一种基于计算机视觉App的开门预警防系统的硬件组成示意图。图中：1：多媒体控制器（包括流媒体后视镜和车载信息娱乐系统）、2：专门开发安装在多媒体控制器上的App，3：倒车影像摄像头；4-1：左外后视镜；4-2：右外后视镜。图2是App打开后的工作界面，图中5是被检测出来的优选感兴趣目标之一（骑助动车者）。图3是App的设置界面。具体实本文档来自技高网...

【技术保护点】
1.一种基于计算机视觉App的开门预警系统，其特征在于：所述开门预警系统包括：多媒体控制器、装在多媒体控制器上的App、倒车影像摄像头、左外后视摄像头、右外后视摄像头；所述多媒体控制器与倒车影像摄像头、左外后视摄像头、右外后视摄像头通过电路连接，它上面能安装App；所述App用来对多媒体控制器接收到的摄像头图像信息进行算法处理，并控制多媒体控制器实现开门预警功能。/n

【技术特征摘要】
1.一种基于计算机视觉App的开门预警系统，其特征在于：所述开门预警系统包括：多媒体控制器、装在多媒体控制器上的App、倒车影像摄像头、左外后视摄像头、右外后视摄像头；所述多媒体控制器与倒车影像摄像头、左外后视摄像头、右外后视摄像头通过电路连接，它上面能安装App；所述App用来对多媒体控制器接收到的摄像头图像信息进行算法处理，并控制多媒体控制器实现开门预警功能。

...

【专利技术属性】
技术研发人员：王伟达，
申请(专利权)人：王伟达，
类型：新型
国别省市：福建;35