[发明专利]基于RoI编码的边缘协同目标检测方法及装置在审
申请号: | 202011158513.7 | 申请日: | 2020-10-26 |
公开(公告)号: | CN112287803A | 公开(公告)日: | 2021-01-29 |
发明(设计)人: | 杨铮;王需;赵毅 | 申请(专利权)人: | 清华大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06T7/246;H04N19/176;H04N19/42;H04N19/70 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 杨明月 |
地址: | 100084 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 roi 编码 边缘 协同 目标 检测 方法 装置 | ||
1.一种基于RoI编码的边缘协同目标检测方法,其特征在于,包括:
设备端将当前视频帧划分为多个区域块,对每个区域块进行RoI编码;其中,对包含目标的区域块进行编码的QP值小于第一预设阈值,对不包含所述目标的区域块进行编码的QP值大于第二预设阈值,所述目标为边缘端从当前视频帧的上一个视频帧检测出的目标;
所述设备端将编码后的当前视频帧发送给所述边缘端,以供所述边缘端基于第一目标检测模型对编码后的当前视频帧进行目标检测。
2.根据权利要求1所述的基于RoI编码的边缘协同目标检测方法,其特征在于,还包括:
所述设备端基于第二目标检测模型对当前视频帧进行目标检测;
若所述设备端从当前视频帧检测出的任一目标与所述边缘端从当前视频帧检测出的目标相同,则判断相同的所述目标的尺寸是否小于第三预设阈值;
若是,则从所述设备端检测出的目标中删除相同的所述目标;
若否,则从所述边缘端对当前视频帧检测出的目标中删除相同的所述目标;
将保留的所述设备端和边缘端检测出的目标作为当前视频帧中的最终目标。
3.根据权利要求2所述的基于RoI编码的边缘协同目标检测方法,其特征在于,所述对每个区域块进行RoI编码,包括:
将保留的所述边缘端从当前视频帧的上一个视频帧检测出的目标作为所述边缘端从所述上一个视频帧中检测出的最终目标;
对当前视频帧中包含所述边缘端从所述上一个视频帧中检测出的最终目标的区域块进行编码的QP值小于第一预设阈值;
对当前视频帧中不包含所述边缘端从所述上一个视频帧中检测出的最终目标的区域块进行编码的QP值大于第二预设阈值。
4.根据权利要求2或3所述的基于RoI编码的边缘协同目标检测方法,其特征在于,所述判断相同的所述目标的尺寸是否小于第三预设阈值,包括:
根据相同的所述目标的类别,确定相同的所述目标的类别对应的第三预设阈值;其中,相同的所述目标的类别与所述第三预设阈值预先关联存储;
判断相同的所述目标的尺寸是否小于相同的所述目标的类别对应的第三预设阈值。
5.根据权利要求2或3所述的基于RoI编码的边缘协同目标检测方法,其特征在于,所述第二目标检测模型为YOLOv3模型。
6.根据权利要求2或3所述的基于RoI编码的边缘协同目标检测方法,其特征在于,所述将保留的所述设备端和边缘端检测出的目标作为当前视频帧中的最终目标之后还包括:
基于KCF算法对所述当前视频帧中的每个最终目标进行跟踪。
7.根据权利要求6所述的基于RoI编码的边缘协同目标检测方法,其特征在于,所述基于KCF算法对所述当前视频帧中的每个最终目标进行跟踪,包括:
根据所述当前视频帧中的每个最终目标从所述当前视频帧的上一个视频帧到所述当前视频帧的运动距离,计算每个最终目标的速度;
根据每个最终目标的速度所属的预设速度范围,确定所述预设速度范围对应的权重;其中,所述预设速度范围与所述权重预先关联存储;
根据每个最终目标最近一次跟踪所在的视频帧与所述当前视频帧相隔的帧数,确定每个最终目标的初始优先级;
根据每个最终目标的速度所属的预设速度范围对应的权重和每个最终目标的初始优先级,确定每个最终目标的最终优先级;
根据每个最终目标的最终优先级,对每个最终目标进行跟踪更新。
8.一种基于RoI编码的边缘协同目标检测装置,其特征在于,包括:
编码模块,用于将当前视频帧划分为多个区域块,对每个区域块进行RoI编码;其中,对包含目标的区域块进行编码的QP值小于第一预设阈值,对不包含所述目标的区域块进行编码的QP值大于第二预设阈值,所述目标为边缘端从当前视频帧的上一个视频帧检测出的目标;
发送模块,用于将编码后的当前视频帧发送给所述边缘端,以供所述边缘端基于第一目标检测模型对编码后的当前视频帧进行目标检测。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011158513.7/1.html,转载请声明来源钻瓜专利网。