[发明专利]目标行为识别方法、装置、电子设备及存储介质有效
申请号: | 202210688810.5 | 申请日: | 2022-06-17 |
公开(公告)号: | CN114943936B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 姬东飞;杜雨亭 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06V20/52 | 分类号: | G06V20/52;G06V10/25;G06V10/762;G06V20/40;G06V10/77 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 罗岚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标 行为 识别 方法 装置 电子设备 存储 介质 | ||
1.一种目标行为识别方法,包括:
对采集的视频流进行抽帧,以获取N个目标图像帧,并对所述目标图像帧进行行为识别,以获取所述目标图像帧上的行为检测框,其中,所述N为正整数;
对所述行为检测框进行聚类处理,获取M个聚类簇,其中,所述M均为正整数;
获取所述图像帧上的感兴趣区域,并基于所述感兴趣区域和所述聚类簇中包括的行为检测框,确定目标行为检测框,所述感兴趣区域是指对目标行为进行识别的关注区域,所述目标行为检测框是指包括目标行为的行为检测框;
其中,所述基于所述感兴趣区域和所述聚类簇中包括的行为检测框,确定目标行为检测框包括:
从所述聚类簇中的行为检测框中,确定出候选行为检测框;
确定与所述感兴趣区域存在区域重叠的候选行为检测框为所述目标行为检测框。
2.根据权利要求1所述的方法,其中,所述从所述聚类簇中的行为检测框中,确定出候选行为检测框,包括:
获取每个所述聚类簇中包括的候选行为检测框的数量,并基于所述数量从所述M个聚类簇中筛选出预告警聚类簇;
从所述预告警聚类簇中识别出时间戳最近的候选行为检测框,作为所述候选行为检测框。
3.根据权利要求1或2所述的方法,其中,所述确定目标行为检测框之后,还包括:
基于所述目标行为检测框的位置信息和所述感兴趣区域的位置信息,获取重叠区域的面积;
响应于所述重叠区域的面积大于设定阈值,生成告警信息。
4.根据权利要求3所述的方法,其中,所述生成所述告警信息,包括:
对所述感兴趣区域进行目标检测,以获取所述感兴趣区域内的实体目标;
获取所述实体目标的联系信息,并基于所述联系信息,向所述实体目标发送所述告警信息。
5.根据权利要求1-2中任一项所述的方法,其中,所述对采集的视频流进行抽帧,以获取N个目标图像帧,包括:
对所述视频流进行间隔或连续的抽帧,以获取N个源图像帧;
对所述N个源图像帧进行预处理,得到预处理后的所述N个目标图像帧。
6.根据权利要求5所述的方法,其中,所述对所述N个源图像帧进行预处理,得到预处理后的所述N个目标图像帧,包括:
对所述N个源图像帧进行缩放,以得到缩放至目标尺寸的N个第一图像帧;
对所述N个第一图像帧的像素值进行归一化,并减去像素值的均值,得到N个第二图像帧;
获取所述N个第二图像帧的像素值的方差,并将所述N个第二图像帧的像素值除以所述方差,得到所述N个目标图像帧。
7.根据权利要求4所述的方法,其中,所述向所述实体目标发送所述告警信息之后,还包括:
基于所述视频流的采集位置,获取所述采集位置所隶属的网格区域;
对后续视频流继续进行行为识别,以获取所述后续视频流中后续图像帧上的行为检测框;
响应于所述后续图像帧上的行为检测框中存在所述目标行为检测框,则向所述网格区域对应的管理服务端发送提醒信息。
8.一种目标行为识别装置,包括:
抽帧模块,用于对采集的视频流进行抽帧,以获取N个目标图像帧,并对所述目标图像帧进行行为识别,以获取所述目标图像帧上的行为检测框,其中,所述N为正整数;
聚类模块,用于对所述行为检测框进行聚类处理,获取M个聚类簇,其中,所述M均为正整数;
确定模块,用于获取所述图像帧上的感兴趣区域,并基于所述感兴趣区域和所述聚类簇中包括的行为检测框,确定目标行为检测框,所述感兴趣区域是指对目标行为进行识别的关注区域,所述目标行为检测框是指包括目标行为的行为检测框;
其中,所述确定模块,进一步用于:
从所述聚类簇中的行为检测框中,确定出候选行为检测框;
确定与所述感兴趣区域存在区域重叠的候选行为检测框为所述目标行为检测框。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210688810.5/1.html,转载请声明来源钻瓜专利网。