用于交通信号验证的系统和密码硬化方法技术方案

提供了交通标志检测系统的示例。在一个示例中，一种车辆中的交通检测系统包括：图像传感器；通信系统；处理器；以及存储装置，所述存储装置存储指令，所述指令可由所述处理器执行以：经由所述图像传感器捕获所述车辆的环境的图像；处理所述图像以检测关于所述图像中的交通标志的视觉信息，所述视觉信息指示所识别标志；经由所述通信系统从与所述交通标志相关联的发射器接收密码数据，所述密码数据包括用于控制所述交通标志的交通标志信号的密码表示；以及使用所述密码数据基于所识别标志的密码验证来选择性地控制所述车辆的一个或多个车辆系统。辆系统。辆系统。

【技术实现步骤摘要】
【国外来华专利技术】用于交通信号验证的系统和密码硬化方法


[0001]本公开涉及车辆中的交通信号和/或标志验证，包括使用计算机视觉系统和密码数据发射。

技术介绍

[0002]智能交通系统(ITS)是智慧城市持续发展的一个组成部分，可用于交通规划和交通管理中的决策制定。汽车、交通灯、驾驶员、传感器、路边单元和其他公共基础设施构成了一个复杂的网络系统。基于ITS的应用可包括最佳交通信号控制、安全交叉路口和紧急警报通知，目的是提高出行效率、公共安全、紧急响应和甚至灾难恢复。智能交通灯、信号和/或标志作为ITS的组成部分，越来越多地用于交通管理。一些车辆(诸如自主或半自主车辆)可利用成像系统来检测交通灯、信号和/或标志并相应地调整车辆操作。

技术实现思路

[0003]本公开提供了用于执行交通灯、信号和/或标志的实时检测和识别的机制，其中对检测到的数据进行稳健的认证和验证以解决数据安全问题。例如，一些交通标志识别系统可采用多种深度学习算法来理解各种图像识别场景下的不同交通标志。然而，专利技术人认识到的基于计算机视觉的交通标志识别系统面临的一个挑战是将原始交通标志信号与伪造或被入侵的交通标志信号区分开的能力，所述伪造或被入侵的交通标志信号与合法交通信号几乎相似，但实际上旨在用于一些其他应用和/或由未授权实体修改而产生(例如，通过入侵现有交通信号控制系统而显示)。现有的算法在区分开伪造标志信号和原始交通标志信号方面也存在挑战。在一些示例中，本公开的各方面提供了一种基于密码的交通标志验证系统，所述基于密码的交通标志验证系统补充基于计算机视觉的交通标志识别。在公开的系统中的一些中，指示交通标志的数据是安全的(例如，经加密和/或数字签名)并被发射到车辆。所述车辆使用来自计算机视觉系统的所识别标志来验证安全数据，以便使用密码认证来检查基于所述计算机视觉的所识别标志的真实性。
[0004]在交通标志标识系统的一个示例中，所述系统包括：图像传感器；通信系统；处理器；以及存储装置，所述存储装置存储指令，所述指令可由所述处理器执行以：经由所述图像传感器捕获所述车辆的环境的图像；处理所述图像以检测关于所述图像中的交通标志的视觉信息，所述视觉信息指示所识别标志；经由所述通信系统从与所述交通标志相关联的发射器接收密码数据，所述密码数据包括用于控制所述交通标志的交通标志信号的密码表示；以及使用所述密码数据基于所识别标志的密码验证来选择性地控制所述车辆的一个或多个车辆系统。
[0005]在一种用车辆验证交通标志的方法的示例中，所述方法包括：经由图像传感器捕获所述车辆的环境的图像；处理所述图像以检测关于所述图像中的交通标志的视觉信息，所述视觉信息指示所识别标志；经由通信系统从与所述交通标志相关联的发射器接收密码数据，所述密码数据包括与所述交通标志相关联的经授权标志输出的密码表示；以及使用
所述密码数据基于所识别标志的密码验证来选择性地控制所述车辆的一个或多个车辆系统。
[0006]一种验证车辆环境中的外部信息图像的方法的示例包括：分析在所述车辆处所接收的包括电子显示信息的外部信息图像，以标识来自显示源的所述电子显示信息并生成特性字段；将所述特性字段与在所述车辆处从所述显示源所接收的密码数据进行比较；以及基于所述比较来选择性地控制所述车辆的一个或多个车辆系统。
附图说明
[0007]通过参考附图阅读对非限制性实施方案的以下描述，可更好地理解本公开，在附图中：
[0008]图1示意性地示出根据本公开的一个或多个实施方案的可在其中执行交通标志检测和验证的示例性环境；
[0009]图2示出根据本公开的一个或多个实施方案的示例性交通标志验证收发器系统；
[0010]图3示出根据本公开的一个或多个实施方案的使用计算机视觉和密码数据来标识交通标志的示例性方法的流程图；
[0011]图4示出根据本公开的一个或多个实施方案的保护交通标志数据以供发射器系统发射的示例性方法的流程图；
[0012]图5示出根据本公开的一个或多个实施方案的在接收器系统处标识交通标志的示例性方法的流程图；
[0013]图6示出根据本公开的一个或多个实施方案的车辆车厢的示例性局部视图；并且
[0014]图7示出根据本公开的一个或多个实施方案的车载计算系统的框图。
具体实施方式
[0015]一些对象识别系统可利用机器学习来提高基于计算机视觉的对象识别的准确性。然而，现有对象识别系统并没有充分解决与交通信息的信息和数据安全相关的各种问题，包括例如与交通系统和交通信号的连通性的进步相关的问题。在软件级别或无线拦截级别对交通信号系统的黑客或其他网络攻击可能试图修改交通信号(由自主或半自主车辆使用，或仅由车辆操作者或乘员使用)，并且也可能显示在车辆的交通标志显示屏上。基于计算机视觉的对象识别系统可能不知道交通信号控制系统中的此类漏洞，并且容易受到此类漏洞的影响，并且可能仅关注或主要关注对所获得图像执行图像处理操作。为改变交通标志显示板上的标志而对交通信号控制系统进行的任何更改对于车辆中的其他对象识别系统都是不可见的。如果没有机制来验证传入的交通信号的合法性，非交通/非法交通标志信号可能会渗透到交通标志识别系统中，这可能导致操作者采取不正确的行动，并可能导致车辆操作不正确和/或超出预期交通规则。
[0016]本公开通过扩展交通标志检测系统以利用交通信号的安全通信用于验证目的至少部分地解决了对象识别系统中的上述问题中的一个或多个。例如，图1示出了用于在车辆102和交通标志104之间执行安全交通标志检测的示例性环境100(如本文所用，术语“交通标志”可用于表示交通信号、交通灯、交通标志和/或可在交通场景中使用来控制和/或告知道路上的车辆和/或操作者交通规定、条例、警报、指令等的任何其他指示符)。
[0017]交通标志检测系统可包括收发器，其中发射器容纳在交通标志104中和/或可由交通标志104访问。发射器可使用安装在交通信号灯杆108上和/或以其他方式安装在交通标志104上或交通标志附近的天线来发射数字密码信息(由发射信号106表示)，并且车辆接收器使用安装在车辆上的天线来接收数字信息。数字发射信息可以是显示在相关联的交通信号显示器上的对应交通标志104的密码表示。所述密码表示使用单独分配给每个交通标志的唯一ID来将一个交通标志与另一交通标志区分开来。在非限制性示例中，当交通标志104的交通显示器上显示“停车”标志时，则发射器发射分配给“停车”标志的唯一ID的密码表示。
[0018]在车辆102处接收使用发射器所发射的交通标志的所接收密码表示，并且在车辆102的车辆信息娱乐系统/车辆处理器内验证密码信息。所述验证可包括使用所接收密码表示来验证由车辆的计算机视觉系统所识别的交通标志。例如，车辆102可包括一个或多个相机，所述一个或多个相机被配置为对车辆周围的环境区域(例如，由视野110表示)进行成像，其中对所得图像进行处理以定位成像数据中的交通标志。在成像数据中所识别的任何交通标志都可与所接收密码数据一起使用，以便验证本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种车辆中的交通标志检测系统，所述交通标志检测系统包括：图像传感器；通信系统；处理器；以及存储装置，所述存储装置存储指令，所述指令能由所述处理器执行以：经由所述图像传感器捕获所述车辆的环境的图像；处理所述图像以检测关于所述图像中的交通标志的视觉信息，所述视觉信息指示所识别标志；经由所述通信系统从与所述交通标志相关联的发射器接收密码数据，所述密码数据包括用于控制所述交通标志的交通标志信号的密码表示；以及使用所述密码数据基于所述所识别标志的密码验证来选择性地控制所述车辆的一个或多个车辆系统。2.根据权利要求1所述的交通标志检测系统，其中所述交通标志信号的所述密码表示包括使用第一公钥来加密的与所述交通标志相关联的唯一ID。3.根据权利要求2所述的交通标志检测系统，其中所述交通标志信号的所述密码表示使用第一私钥进行数字签名，所述第一私钥仅能由与所述交通标志相关联的所述发射器访问。4.根据权利要求2或3所述的交通标志检测系统，其中所述所识别标志的所述密码验证还包括使用仅能由所述处理器访问的第二私钥来将所述密码数据解密。5.根据权利要求4所述的交通标志检测系统，其中所述第二私钥存储在所述存储装置的重放保护存储器块中，并且其中所述密码数据是从与所述交通标志相关联的天线无线地广播的。6.根据权利要求3所述的交通标志检测系统，其中所述所识别标志的所述密码验证还包括使用第二公钥执行所述密码数据的数字签名的验证，并且其中处理所述图像以检测所述图像中的所述交通标志包括利用一种或多种深度学习算法。7.根据权利要求2或3所述的交通标志检测系统，其中所述所识别标志响应于使用与所述所识别标志相对应的所述第二私钥将所述密码数据成功解密以检索所述唯一ID而被确定为经密码验证。8.根据权利要求7所述的交通标志检测系统，其中基于所述第二私钥与本地存储到所述车辆且与所述所识别标志相对应的所存储ID的关联来检索所述第二私钥，其中所述所识别标志仅进一步响应于确定经由用所述第二私钥将所述密码数据解密而检索到的所述唯一ID与和所述所识别标志相关联的所述所存储ID相同才被确定为经密码验证。9.根据权利要求1所述的交通标志检测系统，其中基于所述所识别标志的所述密码验证来选择性地控制所述车辆的一个或多个车辆系统包括：响应于确定所述所识别标志经密码验证，调整所述车辆的操作以遵守与所述所识别标志相关联的规定；以及响应于确定所述所识别标志未经密码验证，不基于所述所识别标志调整所述车辆的操作。10.一种用车辆验证交通标志的方法，所述方法包括：经由图像传感器捕获所述车辆的环境的图像；处理所述图像以检测关于所述图像中的交通标志的视觉信息，所述视觉信息指示所识
别标志；经由通信系统从与所述交通标志相关联的发射器接收密码数据，所述密码数据包括与所述交通标志相关联的经授权标志输出的密码表示；以及使用所述密码数据基于所述所识别标志的密码验证来选择性地控制所述车辆的一个或多个车辆...

【专利技术属性】
技术研发人员：A安萨里，SYD赫曼塔拉贾，J乔斯，
申请(专利权)人：哈曼国际工业有限公司，
类型：发明
国别省市：