[发明专利]实时物体识别方法、装置以及计算机设备

说明书

本发明公开了一种实时物体识别方法，该方法包括：监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；接收用户的物体识别执行指令，降低所述视频画面的播放帧率，截取当前视频窗口的视频图像；根据所述最新版本物体识别模型对所述视频图像进行识别；将识别结果显示到所述视频窗口的预设位置。本发明还提供一种实时物体识别装置、计算机设备以及计算机可读存储介质。本发明提供的实时物体识别方法、装置、计算机设备及计算机可读存储介质能够实现在带宽较低，网速较慢的情况下也能够在终端设备执行实时物体识别。

技术领域

本发明涉及实时物体识别技术领域，尤其涉及一种实时物体识别方法、装置、计算机设备及计算机可读存储介质。

背景技术

在日常生活中，经常会遇到这样的场景，看到某个没见过的但是很有趣的东西时，想要了解其名字或者种类。基于这样的需要，目前有很多企业提供用于解决物体识别的移动终端应用APP。这种物体识别APP在进行物体识别时，需要连接到识别服务器，然后将拍摄的视频流或者视频画面发送到识别服务器，然后识别服务器根据预设的识别模型对所述视频流或者视频画面进行识别，然后将识别结果返回到该终端应用APP。然而通过将实时的视频流或者视频画面不断地传送到识别服务器并接收识别服务器反馈的识别结果，这一过程需要耗费很多传输带宽。而且，在移动网络信号较差的区域，识别的过程将要耗费更长的时间，效率低下。

发明内容

有鉴于此，本发明提出一种实时物体识别方法、装置、计算机设备及计算机可读存储介质，能够通过javascript组件加载最新版本物体识别模型到终端设备的浏览器物体识别页面，接着，获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；然后再接收用户的物体识别执行指令后降低所述视频画面的播放帧率，再截取当前视频窗口的视频图像；最后根据所述最新版本物体识别模型对所述视频图像进行识别并将识别结果显示到所述视频窗口的预设位置。通过以上方式，能够将识别模型加载到终端并在获取视频画面时降低帧率，从而在带宽较低，网速较慢的情况下也能够在终端设备实现快速实时物体识别。

首先，为实现上述目的，本发明提供一种实时物体识别方法，所述方法包括：

监控到开启浏览器物体识别页面之后，通过javascript组件加载最新版本物体识别模型；获取摄像头拍摄的视频画面并显示到浏览器页面的视频窗口；接收用户的物体识别执行指令，降低所述视频画面的播放帧率，截取当前视频窗口的视频图像；根据所述最新版本物体识别模型对所述视频图像进行识别；将识别结果显示到所述视频窗口的预设位置。

可选地，所述“加载最新版本的物体识别模型”的步骤包括：获取服务器上的最新版本物体识别模型的第一版本号；将所述第一版本号与所述浏览器的javascript组件所包括的物体识别模型的第二版本号进行比对；当所述第一版本号高于所述第二版本号时，则从所述服务器端下载所述最新版本物体识别模型替换所述浏览器的javascript组件所包括的物体识别模型并进行加载；否则，直接加载所述javascript组件中的物体识别模型。

可选地，所述物体识别模型采用MobileNetV2结构，所述“根据所述最新版本物体识别模型对所述视频图像进行识别”步骤之前还包括：对所述视频图像进行格式处理，所述格式处理包括：尺寸和颜色处理，以及归一化处理。

可选地，所述“将识别结果显示到所述视频窗口的预设位置”的步骤还包括：获取所述物体识别模型对所述视频图像的目标物体的识别相似度，并作为所述目标物体的识别概率；将大于预设阈值的识别概率的所有物体名称及对应的识别概率通过文字控件显示出来到所述视频窗口预设位置。

此外，为实现上述目的，本发明还提供一种实时物体识别装置，所述装置包括：