[发明专利]基于RGB_D和深度卷积网络的无人机识别定位系统在审

专利信息
申请号: 201811606339.0 申请日: 2018-12-27
公开(公告)号: CN109697428A 公开(公告)日: 2019-04-30
发明(设计)人: 樊宽刚;邱海云;王渠;刘平川;王文帅;杨杰;侯浩楠;逄启寿;陈宇航;匡以顺 申请(专利权)人: 江西理工大学
主分类号: G06K9/00 分类号: G06K9/00;G06K9/46;G06T7/73
代理公司: 北京科亿知识产权代理事务所(普通合伙) 11350 代理人: 汤东凤
地址: 341000 *** 国省代码: 江西;36
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 监控区域 三维网格 摄像头监控 图像 测距 双目摄像头 定位模块 定位系统 二维图像 模块获取 卷积 无人机图像 关系计算 神经网络 图像生成 预存 匹配 网络
【权利要求书】:

1.一种基于RGB_D和深度卷积网络的无人机识别定位系统,其特征在于,包括摄像头监控模块、无人机识别模块、二维图像生成三维网格模块和RGB_D测距定位模块;

所述摄像头监控模块用于获取整个监控区域的图像;

所述无人机识别模块接收到摄像头监控模块获取的监控区域的图像,与预存的无人机图像特征进行匹配,识别监控区域中是否存在无人机;

二维图像生成三维网格模块用于当无人机识别模块识别出监控区域中存在无人机时,通过图卷积神经网络将摄像头监控模块获取的监控区域的图像生成三维网格图;

RGB_D测距定位模块用于当无人机识别模块识别出监控区域中存在无人机时,通过双目摄像头获取监控区域的RGB_D图像,并根据监控区域的RGB_D图像中无人机与双目摄像头颜色深度的关系计算得到两者之间的距离,结合三维网格图得到的无人机方向,实现对无人机的具体定位;RGB_D测距定位模块根据下式计算无人机和双目摄像头之间的距离:

其中,C1和C2表示无人机和双目摄像头的颜色,C1,R和C2,R分别表示无人机和双目摄像头的颜色的R通道,C1,G和C2,G分别表示无人机和双目摄像头的颜色的G通道,C1,B和C2,B分别表示无人机和双目摄像头的颜色的B通道;根据无人机与双目摄像头的颜色差得到两者间的距离;

所述摄像头监控模块包括若干摄像头,各个摄像头分别布置于监控区域的不同位置,所有摄像头的摄像范围加总起来涵盖整个监控区域;

各个摄像头分散地环绕式安装,保证在任一摄像头的视角中能够看到该摄像头左右两侧相邻的摄像头。

2.一种利用权利要求1所述的系统进行无人机识别定位的方法,其特征在于,包括如下步骤:

S1、摄像头监控模块用于获取整个监控区域的图像;

S2、无人机识别模块接收到摄像头监控模块获取的监控区域的图像,与预存的无人机图像特征进行匹配,识别监控区域中是否存在无人机;

S3、当无人机识别模块识别出监控区域中存在无人机时,二维图像生成三维网格模块通过图卷积神经网络将摄像头监控模块获取的监控区域的图像生成三维网格图;RGB_D测距定位模块通过双目摄像头获取监控区域的RGB_D图像,并根据监控区域的RGB_D图像中无人机与双目摄像头颜色深度的关系计算得到两者之间的距离,结合三维网格图得到的无人机方向,实现对无人机的具体定位;

步骤S1中,摄像头监控模块中所有摄像头均将获取的图像传输至无人机识别模块;步骤S2中,所述无人机识别模块对在同一时间点上所有摄像头采集的监控区域的各帧图像进行分析,同时将各帧图像与预存的无人机图像特征进行匹配,识别出各帧图像中是否出现无人机,从而确定在该时间点上监控区域是否出现无人机;步骤S3中,二维图像生成三维网格模块同时结合了所有摄像头在同一时间点上采集的监控区域的各帧图像计算生成整个监控区域的三维网格图;

步骤S3中,RGB_D测距定位模块根据下式计算无人机和双目摄像头之间的距离:

其中,C1和C2表示无人机和双目摄像头的颜色,C1,R和C2,R分别表示无人机和双目摄像头的颜色的R通道,C1,G和C2,G分别表示无人机和双目摄像头的颜色的G通道,C1,B和C2,B分别表示无人机和双目摄像头的颜色的B通道;根据无人机与双目摄像头的颜色差得到两者间的距离。

3.根据权利要求2所述的方法,其特征在于,步骤S2中,所述预存的无人机图像特征的获得过程为:无人机自动识别模块中预存一组功能和设计都不相同的无人机图像并从中提取无人机图像特征。

4.根据权利要求2所述的方法,其特征在于,步骤S2中,所述二维图像生成三维网格模块具体通过一个多层的图卷积神经网络提取监控区域的图像的不同层次的特征,进而通过级联网格变形网络生成三维网格图。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江西理工大学,未经江西理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811606339.0/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top