实时物体识别方法、装置以及计算机设备制造方法及图纸

本发明专利技术公开了一种实时物体识别方法，该方法包括：监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；接收用户的物体识别执行指令，降低所述视频画面的播放帧率，截取当前视频窗口的视频图像；根据所述最新版本物体识别模型对所述视频图像进行识别；将识别结果显示到所述视频窗口的预设位置。本发明专利技术还提供一种实时物体识别装置、计算机设备以及计算机可读存储介质。本发明专利技术提供的实时物体识别方法、装置、计算机设备及计算机可读存储介质能够实现在带宽较低，网速较慢的情况下也能够在终端设备执行实时物体识别。

Real-time object recognition methods, devices and computer equipment

【技术实现步骤摘要】
实时物体识别方法、装置以及计算机设备
本专利技术涉及实时物体识别
，尤其涉及一种实时物体识别方法、装置、计算机设备及计算机可读存储介质。
技术介绍
在日常生活中，经常会遇到这样的场景，看到某个没见过的但是很有趣的东西时，想要了解其名字或者种类。基于这样的需要，目前有很多企业提供用于解决物体识别的移动终端应用APP。这种物体识别APP在进行物体识别时，需要连接到识别服务器，然后将拍摄的视频流或者视频画面发送到识别服务器，然后识别服务器根据预设的识别模型对所述视频流或者视频画面进行识别，然后将识别结果返回到该终端应用APP。然而通过将实时的视频流或者视频画面不断地传送到识别服务器并接收识别服务器反馈的识别结果，这一过程需要耗费很多传输带宽。而且，在移动网络信号较差的区域，识别的过程将要耗费更长的时间，效率低下。
技术实现思路
有鉴于此，本专利技术提出一种实时物体识别方法、装置、计算机设备及计算机可读存储介质，能够通过javascript组件加载最新版本物体识别模型到终端设备的浏览器物体识别页面，接着，获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；然后再接收用户的物体识别执行指令后降低所述视频画面的播放帧率，再截取当前视频窗口的视频图像；最后根据所述最新版本物体识别模型对所述视频图像进行识别并将识别结果显示到所述视频窗口的预设位置。通过以上方式，能够将识别模型加载到终端并在获取视频画面时降低帧率，从而在带宽较低，网速较慢的情况下也能够在终端设备实现快速实时物体识别。首先，为实现上述目的，本专利技术提供一种实时物体识别方法，所述方法包括：监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；接收用户的物体识别执行指令，降低所述视频画面的播放帧率，截取当前视频窗口的视频图像；根据所述最新版本物体识别模型对所述视频图像进行识别；将识别结果显示到所述视频窗口的预设位置。可选地，所述“加载最新版本的物体识别模型”的步骤包括：获取服务器上的最新版本物体识别模型的第一版本号；将所述第一版本号与所述浏览器的javascript组件所包括的物体识别模型的第二版本号进行比对；当所述第一版本号高于所述第二版本号时，则从所述服务器端下载所述最新版本物体识别模型替换所述浏览器的javascript组件所包括的物体识别模型并进行加载；否则，直接加载所述javascript组件中的物体识别模型。可选地，所述物体识别模型采用MobileNetV2结构，所述“根据所述最新版本物体识别模型对所述视频图像进行识别”步骤之前还包括：对所述视频图像进行格式处理，所述格式处理包括：尺寸和颜色处理，以及归一化处理。可选地，所述“将识别结果显示到所述视频窗口的预设位置”的步骤还包括：获取所述物体识别模型对所述视频图像的目标物体的识别相似度，并作为所述目标物体的识别概率；将大于预设阈值的识别概率的所有物体名称及对应的识别概率通过文字控件显示出来到所述视频窗口预设位置。此外，为实现上述目的，本专利技术还提供一种实时物体识别装置，所述装置包括：加载模块，用于监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；显示模块，用于获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；截取模块，用于接收用户的物体识别执行指令，降低所述视频画面的播放帧率，截取当前视频窗口的视频图像；识别模块，用于根据所述最新版本物体识别模型对所述视频图像进行识别；所述显示模块，用于将识别结果显示到所述视频窗口的预设位置。可选地，所述加载模块还用于：获取服务器上的最新版本物体识别模型的第一版本号；将所述第一版本号与所述浏览器的javascript组件所包括的物体识别模型的第二版本号进行比对；当所述第一版本号高于所述第二版本号时，则从所述服务器端下载所述最新版本物体识别模型替换所述浏览器的javascript组件所包括的物体识别模型并进行加载；否则，直接加载所述javascript组件中的物体识别模型。可选地，所述物体识别模型采用MobileNetV2结构，所述识别模块还用于：对所述视频图像进行格式处理，所述格式处理包括：尺寸和颜色处理，以及归一化处理。可选地，所述显示模块，还用于获取所述物体识别模型对所述视频图像的目标物体的识别相似度，并作为所述目标物体的识别概率；将大于预设阈值的识别概率的所有物体名称及对应的识别概率通过文字控件显示出来到所述视频窗口预设位置。进一步地，本专利技术还提出一种计算机设备，所述计算机设备包括存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上述的实时物体识别方法的步骤。进一步地，为实现上述目的，本专利技术还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序可被至少一个处理器执行，以使所述至少一个处理器执行如上述的实时物体识别方法的步骤。相较于现有技术，本专利技术所提出的实时物体识别方法、装置、计算机设备及计算机可读存储介质，能够通过javascript组件加载最新版本物体识别模型到终端设备的浏览器物体识别页面，接着，获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；然后再接收用户的物体识别执行指令后降低所述视频画面的播放帧率，再截取当前视频窗口的视频图像；最后根据所述最新版本物体识别模型对所述视频图像进行识别并将识别结果显示到所述视频窗口的预设位置。通过以上方式，能够将识别模型加载到终端并在获取视频画面时降低帧率，从而在带宽较低，网速较慢的情况下也能够在终端设备实现快速实时物体识别。附图说明图1是本专利技术计算机设备一可选的硬件架构的示意图；图2是本专利技术实时物体识别装置一实施例的程序模块示意图；图3是本专利技术实时物体识别方法一实施例的流程示意图。附图标记：计算机设备1存储器11处理器12网络接口13实时物体识别装置200加载模块201显示模块202截取模块203识别模块204本专利技术目的实现、功能特点及优点将结合实施例，参照附图做进一步说明。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本专利技术，并不用于限定本专利技术。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。需要说明的是，在本专利技术中涉及“第一”、“第二”等的描述仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外，各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本专利技术要求的保护范围之内。参阅图1所示，是本专利技术计算机设备1一可选的硬件架构的示意图。本实施例中，所述计算机设备1可包括，但不仅限于，可通过系统总线相互通信连接存储器11、处理器12、网络接口13。所述计算机设备1通过网络接口13连接网络(图1未标出)，通过本文档来自技高网...

【技术保护点】
1.一种实时物体识别方法，其特征在于，所述方法包括步骤：监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；接收用户的物体识别执行指令，降低所述视频画面的播放帧率，截取当前视频窗口的视频图像；根据所述最新版本物体识别模型对所述视频图像进行识别；将识别结果显示到所述视频窗口的预设位置。

【技术特征摘要】
1.一种实时物体识别方法，其特征在于，所述方法包括步骤：监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；接收用户的物体识别执行指令，降低所述视频画面的播放帧率，截取当前视频窗口的视频图像；根据所述最新版本物体识别模型对所述视频图像进行识别；将识别结果显示到所述视频窗口的预设位置。2.如权利要求1所述的实时物体识别方法，其特征在于，所述“加载最新版本的物体识别模型”的步骤包括：获取服务器上的最新版本物体识别模型的第一版本号；将所述第一版本号与所述浏览器的javascript组件所包括的物体识别模型的第二版本号进行比对；当所述第一版本号高于所述第二版本号时，则从所述服务器端下载所述最新版本物体识别模型替换所述浏览器的javascript组件所包括的物体识别模型并进行加载；否则，直接加载所述javascript组件中的物体识别模型。3.如权利要求1或2所述的实时物体识别方法，其特征在于，所述物体识别模型采用MobileNetV2结构，所述“根据所述最新版本物体识别模型对所述视频图像进行识别”步骤之前还包括：对所述视频图像进行格式处理，所述格式处理包括：尺寸和颜色处理，以及归一化处理。4.如权利要求1所述的实时物体识别方法，其特征在于，所述“将识别结果显示到所述视频窗口的预设位置”的步骤还包括：获取所述物体识别模型对所述视频图像的目标物体的识别相似度，并作为所述目标物体的识别概率；将大于预设阈值的识别概率的所有物体名称及对应的识别概率通过文字控件显示出来到所述视频窗口预设位置。5.一种实时物体识别装置，其特征在于，所述装置包括：加载模块，用于监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；显示模块，用于获取摄像头...

【专利技术属性】
技术研发人员：黄文韬，王健宗，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：广东,44