用于检测和分类与车辆相关联的对象的方法和设备技术

提供了一种用于检测和分类与车辆相关联的对象的方法和设备。该方法包括捕获车辆的驾驶室的第一图像和第二图像；将第一图像和第二图像分割成多个区域；将第一图像的第一区域与第二图像的第二区域进行比较；响应于检测到第二区域与第一区域之间的差异，对第二区域与第一区域之间的差异中存在的对象进行分类并标记所分类的对象；以及向车辆的乘员和车辆的操作员中的至少一个提供所分类的对象的通知。

【技术实现步骤摘要】
用于检测和分类与车辆相关联的对象的方法和设备引言与示例性实施例一致的设备和方法涉及基于图像的对象识别。更具体地，与示例性实施例一致的设备和方法涉及检测车辆驾驶室的图像中的对象。
技术实现思路
一个或多个示例性实施例提供了一种比较车辆内部的图像以确定是否发生改变的方法和设备。更具体地，一个或多个示例性实施例提供了一种分割车辆的区域的图像、比较所分割图像的区域以确定是否发生了改变并且向车辆或车队的操作员通知图像的变化的方法和设备。该方法和设备可用于提供车辆损坏的通知或者对象留在车辆中的通知。根据示例性实施例的一个方面，提供了一种用于检测和分类与车辆相关联的对象的方法。该方法包括：捕获车辆的驾驶室的第一图像和第二图像；将第一图像和第二图像分割成多个区域；将第一图像的第一区域与第二图像的第二区域进行比较，第二图像的第二区域对应于第一图像中的第一区域中的位置；响应于检测到第二区域与第一区域之间的差异，对第二区域与第一区域之间的差异中存在的对象进行分类并标记所分类的对象；以及向车辆的乘员和车辆的操作员中的至少一个提供所分类的对象的通知。可在乘员进入车辆之前执行捕获驾驶室的第一图像，并且可在乘员离开车辆之后执行捕获驾驶室的第二图像。该方法可进一步包括从车辆的操作员接收输入以重新标记所分类的对象；以及基于所接收的输入对第二区域与第一区域之间的差异中存在的对象进行重新分类。多个区域可包括前排乘客座椅、前排驾驶员侧、左后排座椅、右后排座椅、后排座椅区域、前排乘客底板、前排驾驶员底板、左后排底板、右后排底板、后排底板、仪表板、杯架、中央控制台、行李箱区域和靠近后窗的表面中的两个或更多个区域。提供所检测到的差异的通知可包括将关于第二图像或所分类的对象的信息传输到操作员。捕获车辆的驾驶室的第一图像和第二图像可由相机执行。比较第一图像的第一区域与第二图像的第二区域可包括检测第二区域与第一区域之间的差异中的像素值的变化。对第二区域与第一区域之间的差异中存在的对象进行分类可包括将对象的图像与存储在数据库中的对象的图像进行比较并且根据存储在数据库中与对象的图像最接近的图像的分类来对该对象进行分类。对第二区域与第一区域之间的差异中存在的对象进行分类可包括通过执行边缘匹配、灰度匹配和梯度匹配中的至少一个来识别对象。根据示例性实施例的方面，提供了一种检测和分类与车辆相关联的对象的设备。该设备包括至少一个存储器，其包括计算机可执行指令；以及至少一个处理器，其配置为读取并执行计算机可执行指令。计算机可执行指令使至少一个处理器捕获车辆的区域的第一图像和第二图像；将第一图像和第二图像分割成多个区域；将第一图像的第一区域与第二图像的第二区域进行比较，第二图像的第二区域对应于第一图像中的第一区域；响应于检测到第二区域与第一区域之间的差异，对第二区域与第一区域之间的差异中存在的对象进行分类并标记所分类的对象；以及向车辆的乘员和车辆的操作员中的至少一个提供所分类的对象的通知。计算机可执行指令可使至少一个处理器在乘员进入车辆之前捕获第一图像并且在乘员离开车辆之后捕获第二图像。计算机可执行指令可使至少一个处理器从车辆的操作员接收输入以重新标记所分类的对象；并且基于所接收的输入对第二区域与第一区域之间的差异中存在的对象进行重新分类。多个区域可包括前排乘客座椅、前排驾驶员侧、左后排座椅、右后排座椅、后排座椅区域、前排乘客底板、前排驾驶员底板、左后排底板、右后排底板、后排底板、仪表板、杯架、中央控制台、行李箱区域和靠近后窗的表面中的两个或更多个区域。计算机可执行指令可进一步使至少一个处理器通过将关于第二图像或所分类的对象的信息传输到操作员来提供检测到的差异的通知。该设备可进一步包括被安装在车辆中的相机。计算机可执行指令还可使至少一个处理器控制相机以捕获第一图像和第二图像。计算机可执行指令可进一步使至少一个处理器通过检测第二区域与第一区域之间的差异中的像素值的变化来将第一图像的第一区域与第二图像的第二区域进行比较。计算机可执行指令可进一步使至少一个处理器通过将对象的图像与存储在数据库中的对象的图像进行比较并且根据存储在数据库中与对象的图像最接近的图像的分类来对该对象进行分类来对第二区域与第一区域之间的差异中存在的对象进行分类。计算机可执行指令可进一步使至少一个处理器通过执行边缘匹配、灰度匹配和梯度匹配中的至少一个来识别对象以对第二区域与第一区域之间的差异中存在的对象进行分类。根据示例性实施例的方面，提供了一种包括计算机可读指令的非暂时性计算机可读介质。计算机可读指令可由计算机执行以执行包括以下项的方法：接收车辆的驾驶室的第一图像和第二图像；将第一图像和第二图像分割成多个区域；将第一图像的第一区域与第二图像的第二区域进行比较，第二图像的第二区域对应于第一图像中的第一区域；响应于检测到第二区域与第一区域之间的差异，对第二区域与第一区域之间的差异中存在的对象进行分类并标记所分类的对象；以及向车辆的乘员和车辆的操作员中的至少一个提供所分类的对象的通知。从示例性实施例的以下详细描述和附图，示例性实施例的其它目的、优点和新颖特征将变得更加明显。附图说明图1示出了根据示例性实施例的检测和分类与车辆相关联的对象的设备的框图；图2示出了根据示例性实施例的用于检测和分类与车辆相关联的对象的方法的流程图；并且图3示出了根据示例性实施例的一个方面的将图像分割成区域以实施对象检测的图示；并且图4示出了根据示例性实施例的一个方面的能够提供所分类的对象的通知的系统。具体实施方式现在将参考附图中的图1到4详细描述检测和分类与车辆相关联的对象的设备和方法，其中相同的附图标记始终指代相同的元件。以下公开内容将使得本领域技术人员能够实践专利技术概念。然而，本文所公开的示例性实施例仅仅是示例性的并且不会将专利技术概念限于本文所述的示例性实施例。另外，每个示例性实施例的特征或方面的描述应通常视为对于其它示例性实施例的方面而言是可用的。还应理解的是，当本文陈述第一元件“连接到”、“附接到”第二元件、“形成在第二元件上”或“设置在第二元件上”时，除非陈述第一元件“直接”连接到、附接到第二元件、直接形成在第二元件上或直接设置在第二元件上，否则第一元件可直接连接到第二元件、直接形成在第二元件上或直接设置在第二元件上，或者第一元件与第二元件之间可存在介入元件。另外，如果第一元件配置为从第二元件“发送”或“接收”信息，则除非第一元件被指示为“直接”发送信息到第二元件或直接从第二元件接收信息，否则第一元件可直接发送信息到第二元件或直接从第二元件接收信息、经由总线发送或接收信息、经由网络发送或接收信息或者经由中间元件发送或接收信息。在整个公开内容中，所公开的一个或多个元件可以组合到单个装置中或组合到一个或多个装置中。另外，单个元件可被设置在单独装置上。车辆配备有能够检测车辆中和周围的环境的状况的传感器。传感器提供关于环境中存在的状况的信息，并且该信息可用于控制车辆或辅助车辆的操作员。一个上述传感器(例如，相机)可配置为检测车辆中的对象、人员和/或变化。例如，由相机获取的图像可由操作员使用来识别对象、人员和/或车辆的变化。识别变化的一种方法是比较在不同时间点获取的车辆的图像。然而，由于车辆的某些区域在检测车辆中的对象或人员或者本文档来自技高网...

【技术保护点】
1.一种检测和分类与车辆相关联的对象的设备，所述设备包括：至少一个存储器，其包括计算机可执行指令；以及至少一个处理器，其配置为读取并执行所述计算机可执行指令，所述计算机可执行指令使得所述至少一个处理器：捕获车辆的区域的第一图像和第二图像；将所述第一图像和所述第二图像分割成多个区域；将所述第一图像的第一区域与所述第二图像的第二区域进行比较，所述第二图像的所述第二区域对应于所述第一图像中的所述第一区域；响应于检测到所述第二区域与所述第一区域之间的差异，对所述第二区域与所述第一区域之间的所述差异中存在的对象进行分类并标记所分类的对象；以及向所述车辆的乘员和所述车辆的操作员中的至少一个提供所述分类的对象的通知。

【技术特征摘要】
2017.05.03 US 15/5857641.一种检测和分类与车辆相关联的对象的设备，所述设备包括：至少一个存储器，其包括计算机可执行指令；以及至少一个处理器，其配置为读取并执行所述计算机可执行指令，所述计算机可执行指令使得所述至少一个处理器：捕获车辆的区域的第一图像和第二图像；将所述第一图像和所述第二图像分割成多个区域；将所述第一图像的第一区域与所述第二图像的第二区域进行比较，所述第二图像的所述第二区域对应于所述第一图像中的所述第一区域；响应于检测到所述第二区域与所述第一区域之间的差异，对所述第二区域与所述第一区域之间的所述差异中存在的对象进行分类并标记所分类的对象；以及向所述车辆的乘员和所述车辆的操作员中的至少一个提供所述分类的对象的通知。2.根据权利要求1所述的设备，其中所述计算机可执行指令使所述至少一个处理器在乘员进入所述车辆之前捕获所述第一图像，并且其中所述计算机可执行指令使所述至少一个处理器在所述乘员离开所述车辆之后捕获所述第二图像。3.根据权利要求1所述的设备，其中所述计算机可执行指令使所述至少一个处理器：从所述车辆的所述操作员接收输入以重新标记所述分类的对象；以及基于所接收的输入对所述第二区域与所述第一区域之间的所述差异中存在的所述对象进行重新分类。4.根据权利要求1所述的设备，其中所述多个区域包括前排乘客座椅、前排驾驶员侧、左后排座椅、右后排座椅、后排座椅区域、前排乘客底板、前排驾驶员底板、左后排底板、右后排底板、后排底板、仪表板、杯架、中央控制台、行李箱区域和靠近后窗的表面中的两个或更多个。5.根据权利要求1所述的设备，其中所述计算机可执行指令进一步使所述至少一个处理器通过将关...

【专利技术属性】
技术研发人员：D·克利福德，O·德米罗维奇，O·布兰，E·哈特菲尔德，D·西蒙格，M·穆拉德，
申请(专利权)人：通用汽车环球科技运作有限责任公司，
类型：发明
国别省市：美国,US