智能门系统技术方案

提供在计算机上实现的用于智能门操作的方法、系统、智能门装置以及非暂时性计算机可读介质。所述方法可以包括获取一个或以上对象的图像数据(410)，基于图像数据确定一个或以上对象中的至少一个对象的一个或以上步态特征，至少部分地基于一个或以上步态特征，确定一个或以上对象中的至少一个对象的身份信息(420)以及将解锁信号发送到锁，以使锁基于解锁信号解锁(430)。

【技术实现步骤摘要】
【国外来华专利技术】智能门系统优先权信息本申请要求于2018年4月27日提交的美国临时申请62/664,070的优先权，其内容通过引用合并于此。
本申请涉及智能门系统，并且更具体地涉及在门上实现的视频监视系统以及经由智能门系统提供的应用。
技术介绍
视频监视已广泛用于各种环境中，例如，建筑物、停车场、交通信号灯、城市街道、车辆等。建筑物视频监视系统依赖于安装在建筑物的门、大厅、走廊、电梯、房间和其他必要场所的多个相机。安装在建筑物前门上的相机视频监控系统能够检测到接近前门的对象，并在该对象被认为是被授权可以进入建筑物的人员时解锁前门。当前的视频监视系统存储大量的用户信息，并且至少一部分用户信息是相互关联的。然而，当前的视频监视系统基于个体对象进行独立检测，并且在解锁门之后几乎不向对象提供额外的信息和/或服务。因此，除了开门外，还需要考虑用户信息的相关性并向对象(例如，授权进入建筑物的人员)提供信息和/或服务以改善用户体验。
技术实现思路
本申请的一方面提供了一种在计算机上实现的用于智能门操作的方法。所述方法可以包括：获取一个或以上对象的图像数据，所述图像数据由与所述计算机通信的一个或多个相机获取；基于所述图像数据，确定所述一个或以上对象中的至少一个对象的一个或以上步态特征；至少部分地基于所述一个或以上步态特征，确定所述一个或以上对象中的所述至少一个对象的身份信息；以及基于所述一个或以上对象中的所述至少一个对象的所述身份信息，向锁发送解锁信号，以使所述锁解锁。在一些实施例中，至少部分地基于所述一个或以上步态特征确定所述一个或以上对象中的所述至少一个对象的所述身份信息包括：基于所述一个或以上步态特征，确定所述身份信息对应于一个或以上允许进入身份中的一个允许进入身份的第一置信度；基于从所述图像数据确定的所述一个或以上对象中的所述至少一个对象的一个或以上面部特征，确定所述身份信息对应所述一个或以上允许进入身份中所述一个允许进入身份的第二置信度；以及响应于以下至少之一，将所述一个或以上允许进入身份中的所述一个允许进入身份识别为所述一个或以上对象中所述至少一个对象的所述身份信息：确定所述第一置信度超过或等于第一阈值，或者确定所述第二置信度超过或等于第二阈值。在一些实施例中，基于所述一个或以上步态特征确定所述身份信息对应于所述一个或以上允许进入身份中的所述一个允许进入身份的所述第一置信度包括：获取步态识别模型；以及使用所述步态识别模型基于所述一个或以上步态特征确定所述第一置信度。在一些实施例中，通过以下过程确定所述步态识别模型：获取与所述一个或以上允许进入身份相关的视频数据作为训练样本；从每个所述训练样本中提取步态特征；以及基于每个所述训练样本的所述步态特征训练所述步态识别模型。在一些实施例中，所述基于从所述图像数据确定的所述一个或以上对象中的所述至少一个对象的一个或以上面部特征，确定所述身份信息对应于所述一个或以上允许进入身份中的所述一个允许进入身份的第二置信度包括：获取面部识别模型；以及使用所述面部识别模型基于所述一个或以上对象中的所述至少一个对象的所述面部特征来确定所述第二置信度。在一些实施例中，通过以下过程确定所述面部确定模型：获取所述一个或以上允许进入身份的面部图像作为训练样本；从每个所述训练样本中提取面部特征；以及基于每个所述训练样本的所述面部特征训练所述面部识别模型。在一些实施例中，所述步态特征包括以下至少之一：腿的摆动幅度、腿的摆动频率、腿的摆动周期、腰部的摆动幅度、腰部的摆动频率、腰部的摆动周期、关节的线速度、关节的角速度、步长、步频、目标速度或目标加速度。在一些实施例中，面部特征可包括以下中的至少一项：眼睛中心点、鼻尖、嘴唇点、面部轮廓点、眼睛轮廓点、鼻子轮廓点、嘴唇轮廓点或眉毛轮廓点。在一些实施例中，所述方法还包括：基于所述一个或以上对象中的所述至少一个对象的所述身份信息向所述一个或以上对象中的所述至少一个对象显示消息。在一些实施例中，所述消息包括预设问题，所述方法还包括：基于所述一个或以上对象中的所述至少一个对象对所述预设问题的响应，验证所述一个或以上对象中的所述至少一个对象的所述身份信息。在一些实施例中，所述方法还包括：获取与所述一个或以上对象中的所述至少一个对象之一相关的信息；基于所述一个或以上对象中的所述至少一个对象的当前进入信息和离开信息以及与所述一个或以上对象中的所述至少一个对象相关联的所述信息，确定与所述一个或以上对象中的所述至少一个对象相关联的事件信息；以及向所述一个或以上对象中的所述至少一个对象显示所述事件信息。在一些实施例中，获取与所述一个或以上允许进入身份中的所述一个允许进入身份相关联的个性化信息；以及向所述一个或以上对象中的所述至少一个对象显示所述个性化信息。在一些实施例中，所述方法还包括：基于所述身份信息，将与所述一个或以上对象中的所述至少一个对象相关联的信息发送给客户端；基于所述身份信息为所述一个或以上对象中的所述至少一个对象生成警报信号；基于所述身份信息，将与所述一个或以上对象中的所述至少一个对象相关联的所述信息发送给与特定联系人相关联的客户端；基于所述身份信息进行报警；或者记录与所述一个或以上对象中的所述至少一个对象相关联的所述信息。根据本申请的另一方面，提供了一种在计算机上实现的用于通过计算机进行智能门操作的系统，所述系统包括计算机，并且所述计算机包括：获取模块，被配置为获取一个或多个对象的图像数据，所述图像数据由与所述计算机通信的一个或以上相机获取；识别模块，被配置为基于所述图像数据确定所述一个或以上对象中的所述至少一个对象的一个或以上步态特征；以及至少部分地基于所述一个或以上步态特征，确定所述一个或以上对象中的所述至少一个对象的身份信息；以及执行模块，被配置为基于所述一个或以上对象中的所述至少一个对象的所述身份信息向锁发送解锁信号，以使所述锁解锁。根据本申请的另一方面，提供了一种智能门设备，包括至少一个处理器和至少一个存储设备；所述至少一个存储设备被配置为存储指令；以及所述处理器被配置为执行所述指令以实现用于智能门操作的方法，所述方法包括：获取一个或多个对象的图像数据，所述图像数据由与所述计算机通信的一个或多个相机获取；基于所述图像数据，确定所述一个或以上对象中的所述至少一个对象的一个或以上步态特征；至少部分地基于所述一个或以上步态特征，确定所述一个或以上对象中的所述至少一个对象的身份信息；基于所述一个或以上对象中的所述至少一个对象的所述身份信息向所述门发送解锁信号，以使所述锁解锁。根据本申请的另一方面，提供一种存储指令的非暂时性计算机可读介质，所述指令在由至少一个处理器执行时使所述至少一个处理器实现一种方法，包括：获取一个或以上对象的图像数据，所述图像数据由与所述计算机通信的一个或多个相机获取；基于所述图像数据确定所述一个或以上对象中的所述至少一个对象的一个或以上步态特征；至少部分地基于所述一个或以上步态特征，确定所述一个或以上对象中的所述至少一个的身份信息；基于所述本文档来自技高网...

【技术保护点】
1.一种在计算机上实现的用于通过计算机进行智能门操作的方法，所述方法包括：/n获取一个或以上对象的图像数据，所述图像数据由与所述计算机通信的一个或多个相机获取；/n基于所述图像数据，确定所述一个或以上对象中的至少一个对象的一个或以上步态特征；/n至少部分地基于所述一个或以上步态特征，确定所述一个或以上对象中的所述至少一个对象的身份信息；以及/n基于所述一个或以上对象中的所述至少一个对象的所述身份信息，向锁发送解锁信号，以使所述锁解锁。/n

【技术特征摘要】
【国外来华专利技术】20180427 US 62/664,0701.一种在计算机上实现的用于通过计算机进行智能门操作的方法，所述方法包括：
获取一个或以上对象的图像数据，所述图像数据由与所述计算机通信的一个或多个相机获取；
基于所述图像数据，确定所述一个或以上对象中的至少一个对象的一个或以上步态特征；
至少部分地基于所述一个或以上步态特征，确定所述一个或以上对象中的所述至少一个对象的身份信息；以及
基于所述一个或以上对象中的所述至少一个对象的所述身份信息，向锁发送解锁信号，以使所述锁解锁。


2.根据权利要求1所述的方法，其中，至少部分地基于所述一个或以上步态特征确定所述一个或以上对象中的所述至少一个对象的所述身份信息包括：
基于所述一个或以上步态特征，确定所述身份信息对应于一个或以上允许进入身份中的一个允许进入身份的第一置信度；
基于从所述图像数据确定的所述一个或以上对象中的所述至少一个对象的一个或以上面部特征，确定所述身份信息对应所述一个或以上允许进入身份中所述一个允许进入身份的第二置信度；以及
响应于以下至少之一，将所述一个或以上允许进入身份中的所述一个允许进入身份识别为所述一个或以上对象中所述至少一个对象的所述身份信息：
确定所述第一置信度超过或等于第一阈值，或者
确定所述第二置信度超过或等于第二阈值。


3.根据权利要求2所述的方法，其中，基于所述一个或以上步态特征确定所述身份信息对应于所述一个或以上允许进入身份中的所述一个允许进入身份的所述第一置信度包括：
获取步态识别模型；以及
使用所述步态识别模型基于所述一个或以上步态特征确定所述第一置信度。


4.根据权利要求3所述的方法，其中，所述步态识别模型通过以下过程确定：
获取与所述一个或以上允许进入身份相关的视频数据作为训练样本；
从所述训练样本中每个训练样本提取步态特征；以及
基于所述每个训练样本的所述步态特征训练所述步态识别模型。


5.根据权利要求2所述的方法，其中，所述基于从所述图像数据确定的所述一个或以上对象中的所述至少一个对象的一个或以上面部特征，确定所述身份信息对应于所述一个或以上允许进入身份中的所述一个允许进入身份的第二置信度包括：
获取面部识别模型；以及
使用所述面部识别模型基于所述一个或以上对象中的所述至少一个对象的所述面部特征来确定所述第二置信度。


6.根据权利要求5所述的方法，其中，所述面部确定模型通过以下过程确定：
获取所述一个或以上允许进入身份的面部图像作为训练样本；
从所述训练样本中每个训练样本提取面部特征；以及
基于所述每个训练样本的所述面部特征训练所述面部识别模型。


7.根据权利要求2所述的方法，其中，所述步态特征包括以下至少之一：
腿的摆动幅度、腿的摆动频率、腿的摆动周期、腰部的摆动幅度、腰部的摆动频率、腰部的摆动周期、关节的线速度、关节的角速度、步长、步频、目标速度或目标加速度。


8.根据权利要求2所述的方法，其中，所述面部特征包括以下至少之一：
眼睛中心点、鼻尖、嘴唇角点、面部轮廓点、眼睛轮廓点、鼻子轮廓点、嘴唇轮廓点或眉毛轮廓点。


9.根据权利要求1所述的方法，其中，所述方法还包括：
基于所述一个或以上对象中的所述至少一个对象的所述身份信息向所述一个或以上对象中的所述至少一个对象显示消息。


10.根据权利要求9所述的方法，其中，所述消息包括预设问题，所述方法还包括：
基于所述一个或以上对象中的所述至少一个对象对所述预设问题的响应，验证所述一个或以上对象中的所述至少一个对象的所述身份信息。


11.根据权利要求1所述的方法，其中，所述方法还包括：
获取与所述一个或以上对象中的所述至少一个对象之一相关的信息；
基于所述一个或以上对象中的所述至少一个对象的当前进入信息和离开信息以及与所述一个或以上对象中的所述至少一个对象相关的所述信息，确定与所述一个或以上对象中的所述至少一个对象相关联的事件信息；以及
向所述一个或以上对象中的所述至少一个对象显示所述事件信息。


12.根据权利要求1所述的方法，其中，所述方法还包括：
获取与所述一个或以上对象中的所述至少一个对象相关的建筑物中的设备的设置信息；以及
根据所述设备的所述设置信息操作所述设备。


13.根据权利要求1所述的方法，其中，所述方法还包括：
获取与所述一个或以上允许进入身份中的所述一个允许进入身份相关的个性化信息；以及
向所述一个或以上对象中的所述至少一个对象显示所述个性化信息。


14.根据权利要求1所述的方法，其中，所述方法还包括：
基于所述身份信息，将与所述一个或以上对象中的所述至少一个对象相关的信息发送给客户端；
基于所述身份信息为所述一个或以上对象中的所述至少一个对象生成警报信号；
基于所述身份信息，将与所述一个或以上对象中的所述至少一个对象相关联的所述信息发送给与特定联系人相关联的客户端；
基于所述身份信息进行报警；或者
记录与所述一个或以上对象中的所述至少一个对象相关联的所述信息。


15.一种在计算机上实现的用于通过计算机进行智能门操作的系统，其中，所述系统包括计算机，所述计算机包括：
获取模块，被配置为获取一个或以上对象的图像数据，所述图像数据由与所述计算机通信的一个或多个相机获取；
识别模块，被配置为基于所述图像数据确定所述一个或以上对象中的所述至少一个对象的一个或以上步态特征；
以及至少部分地基于所述一个或以上步态特征，确定所述一个或以上对象中的所述至少一个对象的身份信息；以及
执行模块，被配置为基于所述一个或以上对象中的所述至少一个对象的所述身份信息向锁发送解锁信号，以使所述锁解锁。


16.根据权利要求15所述的系统，其中，所述识别模块还被配置为：
基于所述一个或以上步态特征，确定所述身份信息对应于所述一个或以上允许进入身份中的一个允许进入身份的第一置信度；
基于从所述图像数据确定的所述一个或以上对象中...

【专利技术属性】
技术研发人员：张忠，
申请(专利权)人：上海趋视信息科技有限公司，
类型：发明
国别省市：上海;31