[发明专利]行为识别方法及装置、设备和存储介质在审
申请号: | 202111234621.2 | 申请日: | 2021-10-22 |
公开(公告)号: | CN113920585A | 公开(公告)日: | 2022-01-11 |
发明(设计)人: | 苏海昇 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V20/40;G06V20/52;G06V10/82;G06N3/02 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 崔晓岚;张颖玲 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 行为 识别 方法 装置 设备 存储 介质 | ||
1.一种行为识别方法,其特征在于,所述方法包括:
获取所述待识别视频序列中每一帧图像中每一对象的检测框;
基于所述每一帧图像中所述检测框的分布情况,确定所述待识别视频序列的第一识别结果;
在所述第一识别结果满足第一条件的情况下,对群体对象的轨迹序列进行行为识别,得到第四识别结果;其中,所述群体对象的轨迹序列是基于所述待识别视频序列生成的;所述群体对象包括空间距离小于距离阈值的至少两个目标对象;
至少基于所述第一识别结果或所述第四识别结果,确定所述待识别视频序列的目标识别结果。
2.如权利要求1所述的方法,其特征在于,所述至少基于所述第一识别结果或所述第四识别结果,确定所述待识别视频序列的目标识别结果,包括:
在所述第一识别结果表征所述待识别视频序列中未发生异常行为的情况下,基于所述第一识别结果,确定所述待识别视频序列的目标识别结果;或者,
在所述第一识别结果表征所述待识别视频序列中发生异常行为的情况下,基于所述第四识别结果,确定所述待识别视频序列的目标识别结果。
3.如权利要求1或2所述的方法,其特征在于,所述基于所述每一帧图像中所述检测框的分布情况,确定所述待识别视频序列的第一识别结果,包括:
基于所述每一帧图像中所述检测框的分布情况,确定所述每一帧图像中的密集区域;所述密集区域中包括与所述每一帧图像中其他检测框重叠次数大于等于第一次数阈值的中心检测框;
基于所述每一帧图像中的密集区域所包括的对象数目,确定所述待识别视频序列的第一识别结果。
4.如权利要求1至3任一项所述的方法,其特征在于,所述在所述第一识别结果满足第一条件的情况下,对群体对象的轨迹序列进行行为识别,得到第四识别结果,包括:
在所述第一识别结果表征所述待识别视频序列中发生异常行为的情况下,确定所述待识别视频序列中相邻帧之间所述密集区域的面积变化值;
基于所述密集区域的面积变化值和变化阈值,确定所述待识别视频序列的第二识别结果;
在所述第二识别结果表征所述待识别视频序列未发生异常行为的情况下,对群体对象的轨迹序列进行行为识别,得到所述第四识别结果。
5.如权利要求4所述的方法,其特征在于,所述在所述第二识别结果表征所述待识别视频序列未发生异常行为的情况下,对群体对象的轨迹序列进行行为识别,得到所述第四识别结果,包括:
在所述第二识别结果表征所述待识别视频序列未发生异常行为的情况下,基于所述待识别视频序列中所述每一帧图像中的密集区域的覆盖范围,确定所述待识别视频序列中每一帧图像中的包围框区域;所述每一帧图像中的包围框区域所在的位置一致、尺寸相同且包围所述密集区域;
基于所述待识别视频序列中相邻帧之间的所述包围框区域的像素变化情况,确定所述待识别视频序列的第三识别结果;
在所述第三识别结果表征所述待识别视频序列未发生异常行为的情况下,对群体对象的轨迹序列进行行为识别,得到所述第四识别结果。
6.如权利要求5所述的方法,其特征在于,所述方法还包括:
在所述第二识别结果表征所述待识别视频序列发生异常行为的情况下,确定所述待识别视频序列的目标识别结果为发生异常行为;或者,
在所述第三识别结果表征所述待识别视频序列发生异常行为的情况下,确定所述待识别视频序列的目标识别结果为发生异常行为。
7.如权利要求5或6所述的方法,其特征在于,所述基于所述待识别视频序列中相邻帧之间的所述包围框区域的像素变化情况,确定所述待识别视频序列的第三识别结果,包括:
在所述待识别视频序列中相邻帧之间所述包围框区域的像素差值大于等于像素阈值的情况下,确定所述待识别视频序列的第三识别结果为发生异常行为;或者,
在所述待识别视频序列中相邻帧之间所述包围框区域的像素差值小于所述像素阈值的情况下,确定所述待识别视频序列的第三识别结果为未发生异常行为。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111234621.2/1.html,转载请声明来源钻瓜专利网。