使用过渡图像重建对象的系统及方法技术方案

在一实施例中，一种方法包括通过对象重建模块接收第一图像及第二图像的步骤。所述第一图像包括对象的第一区域，并且所述第二图像包括所述对象的第二区域。所述方法还包括通过所述对象重建模块识别过渡图像的步骤。所述过渡图像包括所述对象的所述第一区域及所述对象的所述第二区域。所述方法还包括：通过所述对象重建模块确定所述过渡图像中的所述对象的所述第一区域及所述第一图像中的所述对象的所述第一区域是第一等效区域的步骤；以及通过所述对象重建模块，使用所述第一图像及所述过渡图像生成所述对象的重建的步骤。所述对象的所述重建包括所述对象的所述第一区域及所述对象的所述第二区域，并且排除等效区域。并且排除等效区域。并且排除等效区域。

【技术实现步骤摘要】
【国外来华专利技术】使用过渡图像重建对象的系统及方法


[0001]本公开总体上涉及重建对象，更具体地，涉及一种用于使用过渡图像重建对象的系统及方法。

技术介绍

[0002]对象检测模型处理大量图像数据，同时也独立地推断每个图像。深度学习模型的速度与准确性之间存在固有的权衡。当对模型进行训练以检测具有显著变化的大小的对象和/或具有非常小百分比的整体像素数据的对象部分时，这种权衡会被放大。虽然可以训练对象检测模型以准确地识别多个图像中的对象，但某些系统无法承受为准确检测对象的极小部分而导致的延迟惩罚(delay penalty)。

技术实现思路

[0003]根据一实施例，一种方法包括通过对象重建模块接收第一图像及第二图像的步骤。第一图像包括对象的第一区域，并且第二图像包括对象的第二区域。所述方法还包括通过对象重建模块识别过渡图像的步骤。过渡图像包括对象的第一区域及对象的第二区域。所述方法还包括通过对象重建模块确定过渡图像中的对象的第一区域及第一图像中的对象的第一区域是第一等效区域的步骤，以及通过对象重建模块使用第一图像和过渡图像生成对象的重建的步骤。对象的重建包括对象的第一区域和对象的第二区域，并且排除第一等效区域。
[0004]在某些实施例中，第一图像还包括对象的第三区域、对象的第四区域及对象的第五区域，并且过渡图像包括对象的第三区域及对象第四区域。在一些实施例中，所述方法包括通过对象重建模块确定过渡图像中的对象的第三区域及第一图像中对象的第三区域是第三等效区域的步骤，以及通过对象重建模块确定过渡图像中的对象的第四区域及第一图像中对象的第四区域是第四等效区域的步骤。在某些实施例中，对象的重建排除第三及第四等效区域。在一些实施例中，所述方法包括通过对象重建模块串联对象的第一区域、对象的第二区域、对象第三区域、对象第四区域及对象第五区域，以生成对象的重建的步骤，其中对象的重建表示对象整体。
[0005]在某些实施例中，所述方法包括通过对象重建模块识别第一图像中的对象的第一部分、以及通过对象重构模块围绕第一图像中对象的第一部构建第一边界框的步骤。第一边界框可以包括对象的第一区域。在一些实施例中，所述方法包括通过对象重建模块识别过渡图像中的对象的第二部分、以及通过对象重构模块围绕过渡图像中对象的第三部分构建第二边界框的步骤。第二边界框可以包括对象的第一区域及对象的第二区域。在某些实施例中，所述方法包括使用交并比(IoU)来确定过渡图像中的对象的第一区域及第一图像中的对象的第一区域是等效区域的步骤。在一些实施例中，过渡图像包括第一图像的一半和第二图像的一半。
[0006]根据另一实施例，一种装置包括一个或多个处理器以及耦合到所述一个或多个处
理器的一个或多个计算机可读非暂时性存储介质。所述一个或多个计算机可读非暂时性存储介质包括指令，当所述指令由一个或多个处理器执行时，所述指令使所述装置执行包括接收第一图像及第二图像的步骤的操作。第一图像包括对象的第一区域，并且第二图像包括对象的第二区域。所述操作还包括识别过渡图像的步骤。过渡图像包括对象的第一区域及对象的第二区域。所述操作还包括确定过渡图像中的对象的第一区域及第一图像中的对象的第一区域是第一等效区域的步骤，以及使用第一图像和过渡图像生成对象的重建的步骤。对象的重建包括对象的第一区域及对象的第二区域，并且排除第一等效区域。
[0007]根据又一实施例，一个或多个计算机可读存储介质包含指令，当所述指令由处理器执行时，所述指令使处理器执行包括通过对象重建模块接收第一图像及第二图像的步骤的操作。第一图像包括对象的第一区域，并且第二图像包括对象的第二区域。所述操作还包括通过对象重建模块识别过渡图像的步骤。过渡图像包括对象的第一区域及对象的第二区域。所述操作还包括通过所述对象重建模块确定所述过渡图像中的对象的第一区域及所述第一图像中的所述对象的第一区域是第一等效区域的步骤，以及通过所述对象重建模块使用所述第一区域和过渡图像生成所述对象的重建的步骤。对象的重建包括对象的第一区域及对象的第二区域，并且排除第一等效区域。
[0008]本公开的某些实施例的技术优势可以包括以下一个或多个。本公开描述了用于使用过渡图像重建对象的系统及方法。在某些实施例中，用于重建对象的边界框减少算法可以与标准的非最大值抑制算法结合使用，这些算法基于每个图像来减少包括在单个图像和单个推断结果中的边界框。在某些实施例中，通过以预定百分比重叠两个图像来生成过渡图像。虽然在本公开的某些实施例中使用了50％的预定百分比，但本公开考虑了任何合适的预定百分比(例如，25％、75％等)。在某些实施例中，本文公开的系统及方法可以使用减少标准，例如两个或多个框之间的IoU分数、检测标签等效性和/或置信度分数阈值。
[0009]在本公开的某些实施例中，本文所公开的系统和方法可用于同一图像中的多个对象类。例如，在一些实施例中，属于同一类的边界框可以在逻辑上减少，从而产生几个完全组合的对象。在某些实施例中，与使用标准非最大值抑制算法来计算等效性的方式类似，可以使用IoU来计算边界框的等效区域和/或其他感兴趣区域。本公开中描述的系统及方法可以推广到不同的交通基础设施，包括铁路、公路和水路。
[0010]从以下附图、描述和权利要求中，其他技术优势对于本领域技术人员来说将显而易见。此外，虽然上面列举了具体的优势，但各种实施例可以包括所有优势、一些优势或不包括所列举的优势。
附图说明
[0011]为了帮助理解本公开，现在参考以下结合附图的描述，其中：
[0012]图1示出使用过渡图像重建对象的示例系统；
[0013]图2示出可由图1的系统使用的示例图像；
[0014]图3示出可由图1的系统使用的示例过渡图像；
[0015]图4示出可由图1的系统确定的示例等效区域；
[0016]图5示出可由图1的系统生成的示例对象重建；
[0017]图6示出使用过渡图像重建对象的示例方法；以及
[0018]图7示出可由本文描述的系统及方法使用的示例计算机系统。
具体实施方式
[0019]图1至图7示出用于使用过渡图像重建对象的示例系统及方法。图1示出使用过渡图像重建对象的示例系统，图2示出可由图1的系统使用的示例图像。图3示出可由图1的系统使用的示例过渡图像，图4示出可由图1的系统确定的示例等效区域。图5示出可由图1的系统生成的示例对象重建。图6示出使用过渡图像重建对象的示例方法。图7示出可由本文描述的系统及方法使用的示例计算机系统。
[0020]图1示出使用过渡图像重建对象的示例系统100。系统100或其部分可以与实体相关联，所述实体可以包括使用过渡图像重建对象的任何实体，例如企业、公司(例如，铁路公司、运输公司等)或政府机构(例如，交通部、公共安全部等)。可以使用硬件、固件和软件的任何适当组合来实现系统100的组件。例如，系统100的元件可以使用图7的计算机系统的一个或多个组件来实现。系统100包括网络110、铁路环境120、铁路轨道130、本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种装置，包括：一个或多个处理器；以及一个或多个计算机可读非暂时性存储介质，其耦合到所述一个或多个处理器，并且包括指令，所述指令在由所述一个或多个处理器执行时使所述装置执行包括以下步骤的操作：接收第一图像及第二图像，其中所述第一图像包括对象的第一区域，并且所述第二图像包括所述对象的第二区域；识别过渡图像，其中所述过渡图像包括：所述对象的所述第一区域；以及所述对象的所述第二区域；确定所述过渡图像中的所述对象的所述第一区域及所述第一图像中的所述对象的所述第一区域是第一等效区域；以及使用所述第一图像及所述过渡图像生成所述对象的重建，其中：所述对象的所述重建包括所述对象的所述第一区域及所述对象的所述第二区域；并且所述对象的所述重建排除所述第一等效区域。2.根据权利要求1所述的装置，其中：所述第一图像还包括所述对象的第三区域、所述对象的第四区域及所述对象的第五区域；并且所述过渡图像包括所述对象的所述第三区域及所述对象的所述第四区域。3.根据权利要求2所述的装置，所述操作还包括以下步骤：确定所述过渡图像中的所述对象的所述第三区域及所述第一图像中的所述对象的所述第三区域是第三等效区域；以及确定所述过渡图像中的所述对象的所述第四区域及所述第一图像中的所述对象的所述第四区域是第四等效区域，其中所述对象的所述重建排除所述第三及第四等效区域。4.根据权利要求2所述的装置，所述操作还包括串联所述对象的所述第一区域、所述对象的所述第二区域、所述对象的所述第三区域、所述对象的所述第四区域及所述对象的所述第五区域，以生成所述对象的所述重建的步骤，其中所述对象的所述重建表示所述对象整体。5.根据权利要求1所述的装置，所述操作还包括使用交并比(IoU)来确定所述过渡图像中的所述对象的所述第一区域及所述第一图像中的所述对象的所述第一区域是所述第一等效区域的步骤。6.根据权利要求1所述的装置，所述操作还包括以下步骤：识别所述第一图像中的所述对象的第一部分；在所述第一图像中围绕所述对象的所述第一部分构建第一边界框，其中所述第一边界框包括所述对象的所述第一区域；在所述过渡图像中识别所述对象的第二部分；以及在所述过渡图像中围绕所述对象的所述第二部分构建第二边界框，其中所述第二边界框包括所述对象的所述第一区域及所述对象的所述第二区域。7.根据权利要求1所述的装置，其中所述过渡图像包括所述第一图像的一半及所述第二图像的一半。
8.一种方法，包括以下步骤：通过对象重建模块，接收第一图像及第二图像，其中所述第一图像包括对象的第一区域，并且所述第二图像包括所述对象的第二区域；通过所述对象重建模块，识别过渡图像，其中所述过渡图像包括：所述对象的所述第一区域；以及所述对象的所述第二区域；通过所述对象重建模块，确定所述过渡图像中的所述对象的所述第一区域及所述第一图像中的所述对象的所述第一区域是第一等效区域；以及通过所述对象重建模块，使用所述第一图像及所述过渡图像生成所述对象的重建，其中：所述对象的所述重建包括所述对象的所述第一区域及所述对象的所述第二区域；并且所述对象的所述重建排除所述第一等效区域。9.根据权利要求8所述的方法，其中：所述第一图像还包括所述对象的第三区域、所述对象的第四区域及所述对象的第五区域；并且所述过渡图像包括所述对象的所述第三区域及所述对象的所述第四区域。10.根据权利要求9所述的方法，还包括以下步骤：通过所述对象重建模块，确定所述过渡图像中的所述对象的所述第三区域及所述第一图像中的所述对象的所述第三区域是第三等效区域；以及通过所述对象重建模块，确定所述过渡图像中的所述对象的所述第四区域及所述第一图像中的所述对象的所述第四区域是第四等效区域，其中所述对象的所述重建排除所述第三及第四等效区域。11.根据权利要求9所述的方法，还包括通过所述对象重建模块串联所述对象的所述第一区域、所述对象的所述第二区域、所述对象的所述第三区域、所述对象的所述第四区域及所述对象的所述第五区域，以生成所述对象的所述重建的步骤，其中所述对象的所述重建表示所述对象整体。12.根据权利要求8所述的方法，还包括使用交并比(IoU)来确定所述过渡图像中的所述对象的所述第一区域及所述第一图像中的所述对象的所述第一区域是所述第一等效区域的步骤。13.根据权利要求8所述的方法...

【专利技术属性】
技术研发人员：雷切尔，
申请(专利权)人：北伯林顿铁路公司，
类型：发明
国别省市：