[发明专利]一种双目异构相机与RFID的双重目标定位与身份辨识方法有效
申请号: | 202010110245.5 | 申请日: | 2020-02-24 |
公开(公告)号: | CN111340884B | 公开(公告)日: | 2023-07-07 |
发明(设计)人: | 周海波;王硕;李晨铭;陈胜勇;杨守瑞;赵萌;沈创芸;刘彪;韩慧轩;刘淑键 | 申请(专利权)人: | 天津理工大学 |
主分类号: | G06T7/73 | 分类号: | G06T7/73;G06T7/80;G06T5/00 |
代理公司: | 天津赛凌知识产权代理事务所(特殊普通合伙) 12270 | 代理人: | 李蕊 |
地址: | 300384 *** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 双目 相机 rfid 双重 目标 定位 身份 辨识 方法 | ||
1.一种双目异构相机与RFID的双重目标定位与身份辨识方法,其特征在于:包括如下步骤:
步骤S1,对双目异构相机进行标定,建立图像坐标系与双目异构相机坐标系映射关系,得到其内参矩阵、外参矩阵和畸变参数;在双目异构相机进行标定中,主要包括单目相机标定和双目相机标定两个过程,通过单目相机标定获取:相机内参矩阵与畸变参数:径向畸变系数k1,k2,k3;切向畸变系数:p1,p2;通过双目相机标定获得相机的外参矩阵,包括旋转矩阵Rot,平移矩阵Trans,如下式:
步骤S2,根据相机与机器人之间位姿变换,机器人与养殖场之间位姿变换,获取相机坐标系到养殖场坐标系的位姿变换矩阵,利用该位姿变换矩阵实现双目相机三维坐标到养殖场三维坐标的转换;针对养殖场巡检环境建立不同的坐标系,包括相机坐标系C、机器人坐标系R以及养殖场整体的世界坐标系w;
在各坐标系中分别建立位姿矩阵,包括旋转矩阵Rot和平移矩阵Trans,相机坐标系到养殖场坐标系的转换公式表示为:
步骤S3,采集双目图像,检测目标分别在双目相机图像中的区域,然后将两图像中相同目标进行匹配为一组,最后提取各组目标的局部图像;首先将双目相机采集的图像利用步骤S1中标定出的畸变参数去除畸变,作为输入图像;然后使用目标检测神经网络检测模型对输入图像进行目标检测,得到目标在图像中所在的区域;最后将两幅图像中检测到的目标进行特征提取与匹配,找出其对应关系,得到目标图像坐标;
步骤S4,根据目标图像坐标以及图像坐标系与世界坐标系的单应性矩阵,计算出目标的相机世界坐标,然后转换到养殖场世界坐标;首先对步骤S3得到畸变校正后的图像进行立体校正,把消除畸变后的两幅图像在水平方向严格的对齐,使得两幅图像的对极线恰好在同一水平线上,这样一幅图像上任意一点与其在另一幅图像上的匹配点就必然具有相同的行号,只需要在该行进行一维搜索就可匹配到对应点;
之后,将步骤S3得到的目标图像坐标进行三维重建,得到目标在双目相机坐标系下的坐标;
最后,将目标在双目相机坐标系下的坐标转换到养殖场坐标系;
步骤S5,利用RFID定位信息,获得目标的养殖场世界坐标系坐标,以及其身份ID相关信息;
步骤S6,对双目视觉计算出的养殖场世界坐标与RFID得到的养殖场世界坐标进行坐标匹配,将坐标相同或相近的目标匹配为同一目标,从而将某一目标的位置信息、身份相关信息与图像信息联系到一起。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津理工大学,未经天津理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010110245.5/1.html,转载请声明来源钻瓜专利网。