[发明专利]一种水下目标精细三维感知方法有效
申请号: | 202110162626.2 | 申请日: | 2021-02-05 |
公开(公告)号: | CN112995639B | 公开(公告)日: | 2022-04-15 |
发明(设计)人: | 丛杨;冯云;古长军;唐旭 | 申请(专利权)人: | 中国科学院沈阳自动化研究所 |
主分类号: | H04N13/204 | 分类号: | H04N13/204;H04N9/04;H04N5/232;G06T7/80 |
代理公司: | 沈阳科苑专利商标代理有限公司 21002 | 代理人: | 王倩 |
地址: | 110016 辽*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 水下 目标 精细 三维 感知 方法 | ||
1.一种水下目标精细三维感知系统,其特征在于,包括点云重建相机、线激光、图片采集相机、泛光灯、刚性横杆、水下转台、嵌入式处理器;
点云重建相机,用于采集目标的点云重建用图;
线激光,用于投射线激光;
图片采集相机,用于采集目标的彩色图片;
泛光灯,用于为图片采集相机提供照明;
刚性横杆,用于固定点云重建相机、线激光、图片采集相机和泛光灯;
水下转台,与刚性横杆连接,用于转动刚性横杆扫描整个目标;
嵌入式处理器,用于控制水下转台转动,控制线激光和泛光灯的亮度,控制点云重建相机、图片采集相机分别采集目标点云和彩色图片,实时生成存储点云数据,和离线向外部传输数据;
所述图片采集相机、点云重建相机、泛光灯、嵌入式处理器、线激光分别设于密封舱内,且固定在刚性横杆上;刚性横杆固定在水下转台上;所述图片采集相机、点云重建相机设于刚性横杆一端,线激光设于刚性横杆另一端;
通过控制刚性横杆动作,对点云重建相机进行标定;
使用点云重建相机和图片采集相机进行水下目标三维感知;
所述通过控制刚性横杆动作,对点云重建相机进行标定,包括以下步骤:
标定点云重建相机内参和畸变参数;
标定点云重建相机密封舱前盖的位姿参数;
标定点云重建相机与转台的坐标变换矩阵;
标定点云重建相机坐标系下的激光平面方程;
所述使用点云重建相机和图片采集相机进行水下目标三维感知,包括以下步骤:
1)通过点云重建相机进行水下目标局部单线重建;
2)通过转台转动控制刚性横杆,进行水下目标扫描重建;
3)通过图片采集相机和泛光灯的同步照明进行水下目标彩色图片拍摄并储存;
所述标定点云重建相机密封舱前盖的位姿参数,包括以下步骤:
1)测量点云重建相机密封舱前盖窗口厚度d1,获取密封舱前盖窗口折射率ng,使用环境中水的折射率nw;
2)将棋盘格放在点云重建相机正前方并固定;
3)点云重建相机放在空气中,并拆除其密封舱前盖,拍摄棋盘格图片Ia;
4)点云重建相机安装其密封舱前盖,并放在水中,拍摄棋盘格图片Iw;
5)分别求出图片Ia和Iw中的棋盘格角点像素坐标Ca和Cw;
6)分别求出角点像素坐标Ca和Cw对应的相机入射光向量Va和Vw;
7)求出每个角点的窗口分界面方向Va×Vw,每个角点的分界面方向的共同垂线即为密封舱前盖窗口法线方向n;所述窗口分界面为密封舱前盖窗口平面,为用于隔离密封舱内空气与密封舱外水的分界面;
8)根据棋盘格的方格数量、尺寸参数和图片Ia中的棋盘格角点计算点云重建相机与棋盘格坐标系之间的转换矩阵RT,并求出棋盘格角点在相机坐标系下的坐标P;
9)根据图片Iw中的棋盘格角点和相机内参得到密封舱内光线传播方向va;根据密封舱前盖窗口法线方向n,利用菲涅尔定律计算出密封舱窗口中光线传播方向vg和密封舱外光线传播方向vw;
10)根据va经过相机坐标系原点O、vw经过棋盘格角点坐标P、密封舱前盖窗口法线方向n和密封舱前盖窗口厚度d1,通过几何约束关系求得密封舱前盖窗口到点云重建相机的距离d0;
所述标定点云重建相机坐标系下的激光平面方程,包括以下步骤:
1)点云重建相机安装其密封舱前盖,并放在水中;
2)棋盘格在点云重建相机视场内相对于点云重建相机前后移动,保证每个位置线激光均照射在棋盘格上,棋盘格在每个位置各采集关闭线激光图片Ic和打开线激光图片Il,并构成一对图片;
3)提取图片Ic的棋盘格角点,计算点云重建相机坐标系与棋盘格坐标系之间的转换矩阵;
4)利用转换矩阵将棋盘格角点坐标转换为空间三维点,利用密封舱前盖窗口的折射参数d0,d1,va,vg,vw,n和点云重建相机内参求出棋盘格角点的反投影坐标,迭代修正转换矩阵使原始的棋盘格角点坐标和反投影坐标误差最小;
5)根据棋盘格角点坐标和修正后的转换矩阵求出棋盘格所在平面的方程;
6)提取图片Il中的线激光中心像素坐标;
7)求出线激光中心像素坐标对应的水中光线方程;
8)水中光线方程与棋盘格所在平面的交点为线激光三维坐标;
9)将所有图片的线激光三维坐标拟合成一个平面方程,即激光平面方程;
所述通过点云重建相机进行水下目标局部单线重建,包括以下步骤:
1)点云重建相机拍摄目标图片,线激光在拍摄时同步投射线激光;
2)嵌入式处理器提取图片的线激光中心;
3)嵌入式处理器根据线激光中心坐标、密封舱前盖窗口的折射参数d0,d1,n与点云重建相机内参修正水中的相机入射光线;
4)嵌入式处理器根据水中的相机入射光线和激光平面方程重建出线激光照射目标的单线点云;
5)嵌入式处理器实时存储点云和图片结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院沈阳自动化研究所,未经中国科学院沈阳自动化研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110162626.2/1.html,转载请声明来源钻瓜专利网。