用于处理交通声音数据以提供驾驶员辅助的系统和方法技术方案

本申请涉及用于处理交通声音数据以提供驾驶员辅助的系统和方法。本文公开了处理交通声音数据以提供车载驾驶员辅助的系统和方法的各个方面。系统包括第一车辆的电子控制单元(ECU)内的一个或多个电路。ECU内的一个或多个电路被配置为接收由与第一车辆关联的两个或更多个音频输入设备采集的声音数据。声音数据对应于从一个或多个其它车辆发出的声音。此后，基于所接收的声音数据来确定第一车辆到一个或多个其它车辆的第二车辆的相对位置(距离和/或角度)。此外，基于所确定的相对位置为第一车辆生成车内警报。车内警报包括代表从第二车辆发出的声音的虚拟声音。

A system and method for handling traffic sound data to provide driver assistance

The application relates to systems and methods for processing traffic sound data to provide driver assistance. This article has disclosed various aspects of the system and methods for dealing with traffic sound data to provide vehicle driver assistance. The system includes one or more circuits in the electronic control unit (ECU) of the first vehicle. One or more circuits within the ECU are configured to receive sound data collected by two or more audio input devices associated with the first vehicle. Sound data corresponds to the sound emitted from one or more other vehicles. Thereafter, the relative position (distance and / or angle) of the second vehicles of the first vehicle to one or more other vehicles is determined based on the received sound data. In addition, an internal alarm is generated for the first vehicle based on the determined relative position. The internal alarm includes a virtual sound representing the sound from the second vehicles.

【技术实现步骤摘要】
用于处理交通声音数据以提供驾驶员辅助的系统和方法相关申请的交叉引用无。
本公开的各种实施例涉及音频处理。更具体地，本公开的各种实施例涉及用于处理用于驾驶辅助的交通声音数据的系统和方法。
技术介绍
驾驶车辆对于大部分人来说可能是繁琐并且困难的任务。可能需要持续集中精力来根据道路上的交通状况行驶并遵守交通规则，诸如行驶在正确的车道上，遵守速度限制，以及无风险超车。此外，万一发生道路交通事故，生命和财产还有可能存在重大风险。实际上，跨各种地区和各种时间段进行的多次道路交通事故调查已经揭示了道路交通事故中的伤亡人数高得惊人。因而，道路上的安全对车辆制造商、车主、乘客和驾驶员来说可能是至关重要的。随着汽车行业及相关行业的发展，若干产品已经被开发出来，这些产品可以安装于车辆中以指导车辆驾驶员小心驾驶。但是，存在许多以下情况：驾驶员可能会忽略或错过该指导或者所提供的指导可能是不准确的或者过于杂乱难以跟随。因此，需要改进的系统和方法来提供有效的车载的驾驶员辅助。此外，最近在无人自主驾驶车辆领域得到了快速发展。这样的自主车辆同样会获益于改进的驾驶辅助方法和系统。通过所述系统与如本申请的其余部分以及参考附图阐述的本公开的某些方面之间的比较，常规的和传统的方法的更多局限和缺点对于本领域技术人员将是显而易见的。
技术实现思路
基本上如附图中的至少一个附图示出和/或结合附图中的至少一个附图描述的一种为驾驶辅助处理交通声音数据的系统和方法，在权利要求书中更全面地阐述。通过连同附图一起阅读下面关于本公开的详细描述，将会认识到本公开的这些及其它特征和优点，在附图中相同的附图标记始终表示相同的部件。附图说明图1是示出根据本公开的一种实施例的处理交通声音数据以提供车载驾驶员辅助的网络环境的框图。图2是示出根据本公开的一种实施例的车辆的各种示例性部件或系统的框图。图3示出根据本公开的一种实施例的道路部分的第一示例性顶视图，该第一示例性顶视图描绘采集从第一车辆附近的车辆发出的交通声音。图4示出根据本公开的一种实施例的基于交通声音数据的处理的附近车辆相对于第一车辆的位置的示例性计算。图5示出根据本公开的一种实施例的由第一车辆从附近车辆采集的用于确定附近车辆相对于第一车辆的相对位置的交通声音数据的第一示例性图案。图6示出根据本公开的一种实施例的道路部分的第二示例性顶视图，该第二示例性顶视图描绘采集从在第一车辆附近的车辆发出的交通声音。图7示出根据本公开的一种实施例的由第一车辆从一个或多个附近车辆采集的用于确定附近车辆相对于第一车辆的相对位置的交通声音数据的第二示例性图案。图8示出根据本公开的一种实施例的由第一车辆执行的用于确定附近车辆相对于第一车辆的相对位置的示例性波束形成过程。图9A和9B示出根据本公开的一种实施例的描绘在交通区域内的第二车辆或其它对象的虚拟声音的再现的第一车辆的内部的两个示例性顶视图。图10示出根据本公开的一种实施例的处理交通声音数据以提供车载驾驶员辅助的第一示例性交通场景。图11示出根据本公开的一种实施例的处理交通声音数据以提供车载驾驶员辅助的第二示例性交通场景。图12示出根据本公开的一种实施例的处理交通声音数据以提供车载驾驶员辅助的第三示例性交通场景。图13示出根据本公开的一种实施例的处理交通声音数据以提供车载驾驶员辅助的第四示例性交通场景。图14A和14B共同示出根据本公开的一种实施例描绘说明处理交通声音数据以提供车载驾驶员辅助的示例性方法的流程图。具体实施方式可以在提供车载驾驶员辅助的公开的系统和方法中找到下面所描述的实施方式。本公开的示例性方面可以包括可以在第一车辆的电子控制单元(ECU)中实现的方法。该方法可以包括接收由与第一车辆关联的两个或更多个音频输入设备采集的声音数据。声音数据可以对应于从一个或多个其它车辆发出的声音。此后，可以基于所接收的声音数据来确定一个或多个其它车辆中的第二车辆到第一车辆的距离。此外，还可以基于所确定的距离为第一车辆生成车内警报。车内警报可以包括代表从第二车辆发出的声音的虚拟声音。根据一种实施例，第一车辆可以包括第一组音频输出设备和第二组音频输出设备。第一组音频输出设备可以与第一车辆的驾驶员关联，而第二组音频输出设备可以与第一车辆的驾驶员及一个或多个共同乘客关联。根据一种实施例，可以经由第一组音频输出设备为第一车辆的驾驶员重现车内警报。根据一种实施例，附加地或者可替代地，可以基于与第一车辆的行驶路径关联的交通状况经由第二组音频输出设备来重现车内警报。车内警报的示例还可以包括但并不限于事故预警、驾驶操纵指示、变速推荐、超车推荐、变道推荐、驾驶状况信息、障碍预警和/或选定车辆跟踪。根据一种实施例，为了在第一车辆内重现虚拟声音，可以确定第二车辆相对于第一车辆的相对位置和/或角度。该相对位置和/或角度的确定可以基于所接收的声音数据。此外，为了重现代表从第二车辆发出的声音的虚拟声音，还可以基于所确定的距离和/或角度来应用头部相关传递函数(HRTF)。根据一种实施例，可以基于同第二车辆关联的(一个或多个)预存储的音频签名与从第二车辆发出的声音的比较来确定第二车辆的类型。根据一种实施例，可以根据第二车辆的所确定的类型来重现车内警报的虚拟声音。此外，当第一车辆与第二车辆之间的所确定的距离小于预指定的阈值距离时，可以重现虚拟声音。根据一种实施例，可以基于所采集的从一个或多个其它车辆发出的声音来确定一个或多个其它车辆的速度。此外，可以基于从第二车辆发出的声音来确定第二车辆相对于第一车辆的相对速度。根据一种实施例，可以基于所确定的距离和/或相对速度连同虚拟声音一起生成用于第一车辆的驾驶员的音频警告。根据一种实施例，与第一车辆关联的一个或多个图像采集设备可以采集一个或多个图像，该一个或多个图像可能包括在第一车辆的行驶路径上的一个或多个对象。可以基于由与第一车辆关联的一个或多个图像采集设备采集的一个或多个图像来识别一个或多个对象(诸如人、动物或其它对象)。此外，可以基于所采集的一个或多个图像来确定一个或多个对象到第一车辆的距离。根据一种实施例，车内警报还可以包括第二音频输出，该第二音频输出指示在行驶路径上在到第一车辆的预指定距离内的一个或多个对象的出现。根据一种实施例，可以基于所采集的一个或多个图像经由第一车辆的信息娱乐系统控制虚拟对象的显示。虚拟对象可以代表出现于第一车辆的行驶路径上的所识别的一个或多个对象。根据一种实施例，车内警报可以包括出现于第一车辆的行驶路径上的这种所识别的一个或多个对象的指示。根据一种实施例，可以经由第一车辆的信息娱乐系统在地图上显示至少第二车辆。可以基于所采集的一个或多个图像以及第一车辆与第二车辆之间的所确定的距离来控制地图上的第二车辆的显示。第一车辆与第二车辆之间的所确定的距离可以包括第一车辆相对于第二车辆的相对位置和/或和角度。根据一种实施例，信息娱乐系统的用户可以选择将由第一车辆的一个或多个传感器(诸如音频采集设备和图像采集设备)跟踪的特定车辆。信息娱乐系统的用户可以是第一车辆的驾驶员，也可以是第一车辆的一个或多个共同乘客中的一个。基于由第一车辆的一个或多个传感器从用户选择的特定车辆采集的音频和/或一个或多个图像，可以跟踪用户选择的特定车辆相对于第一车辆的相对位置。此本文档来自技高网...

【技术保护点】
一种用于提供车载驾驶员辅助的系统，所述系统包括：第一车辆的电子控制单元(ECU)中的一个或多个电路，所述一个或多个电路被配置为：接收由与所述第一车辆关联的两个或更多个音频输入设备采集的声音数据，其中所述声音数据对应于从一个或多个其它车辆发出的声音；基于接收的声音数据来确定所述第一车辆到所述一个或多个其它车辆中的第二车辆的距离；以及基于确定的距离为所述第一车辆生成车内警报，其中所述车内警报包括代表从所述第二车辆发出的声音的虚拟声音。

【技术特征摘要】
2016.08.19 US 15/241,3471.一种用于提供车载驾驶员辅助的系统，所述系统包括：第一车辆的电子控制单元(ECU)中的一个或多个电路，所述一个或多个电路被配置为：接收由与所述第一车辆关联的两个或更多个音频输入设备采集的声音数据，其中所述声音数据对应于从一个或多个其它车辆发出的声音；基于接收的声音数据来确定所述第一车辆到所述一个或多个其它车辆中的第二车辆的距离；以及基于确定的距离为所述第一车辆生成车内警报，其中所述车内警报包括代表从所述第二车辆发出的声音的虚拟声音。2.根据权利要求1所述的系统，其中所述第一车辆包括：与所述第一车辆的驾驶员关联的第一组音频输出设备，以及与所述第一车辆的所述驾驶员和一个或多个共同乘客关联的第二组音频输出设备。3.根据权利要求2所述的系统，其中经由与所述第一车辆的所述驾驶员关联的所述第一组音频输出设备来重现所述车内警报。4.根据权利要求2所述的系统，其中基于与所述第一车辆的行驶路径关联的交通状况经由所述第二组音频输出设备来重现所述车内警报。5.根据权利要求1所述的系统，其中所述车内警报包括以下中的一个或多个：事故预警、驾驶操纵指令、变速推荐、超车推荐、变道推荐、驾驶状况信息、障碍预警和/或选定车辆跟踪。6.根据权利要求1所述的系统，其中所述一个或多个电路还被配置为基于所述接收的声音数据来确定所述第二车辆相对于所述第一车辆的位置和/或角度以在所述第一车辆内重现所述虚拟声音。7.根据权利要求6所述的系统，其中所述一个或多个电路还被配置为基于确定的距离和/或所述角度来应用头部相关传递函数(HRTF)，用于代表从所述第二车辆发出的所述声音的所述虚拟声音的所述重现。8.根据权利要求1所述的系统，其中所述一个或多个电路还被配置为基于同所述第二车辆关联的预存储的音频签名与从所述第二车辆发出的所述声音的比较来确定所述第二车辆的类型。9.根据权利要求8所述的系统，其中当所述确定的距离小于预指定的阈值距离时和/或当所述第二车辆相对于所述第一车辆的相对速度超过预定的阈值速度时，根据所述第二车辆的确定的类型来重现所述车内警报的所述虚拟声音。10.根据权利要求1所述的系统，其中所述一个或多个电路还被配置为基于采集的从所述一个或多个其它车辆发出的声音来确定所述一个或多个其它车辆的速度。11.根据权利要求1所述的系统，其中所述一个或多个电路还被配置为基于从所述第二车辆发出的所述声音来确定所述第二车辆相对于所述第一车辆的相对速度，其中基于所述确定的距离和/或所述相对速度连同所述虚拟声音一起生成用于所述第一车辆的驾驶员的音频警告。12.根据权利要求1所述的系统，其中所述一个或多个电路还被配置为通过使用一个或多个图像采集设备来采集出现于所述第一车辆的行驶路径上的一个或多个对象的一个或多个图像，并且其中基于采集的一个或多个图像来确定所述一个或多个对象到所述第一车辆的距离。13.根据权利要求12所...

【专利技术属性】
技术研发人员：S·L·帕蒂尔，藤下金章，武鑓由纪夫，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP