[发明专利]一种机器人对人嘴的识别定位方法在审

专利信息
申请号: 202110617884.5 申请日: 2021-06-03
公开(公告)号: CN113505641A 公开(公告)日: 2021-10-15
发明(设计)人: 程奥华;丘铱可;郝瀚;徐奕舟;聂宇轩;蒋玉骅;潘周捷;郑钢铁 申请(专利权)人: 清华大学
主分类号: G06K9/00 分类号: G06K9/00;G06T7/73
代理公司: 北京清亦华知识产权代理事务所(普通合伙) 11201 代理人: 罗文群
地址: 100084*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 机器人 识别 定位 方法
【说明书】:

本发明属于自动化控制技术领域,涉及一种机器人对人嘴的识别定位方法。本发明通过深度彩色图像识别定位人脸关键特征点,进而计算建立人嘴坐标系,再计算相机相对人脸的最佳观测位置主动感知,最终准确定位口腔空间位置。具体步骤为:获取相机的深度彩色图像;将彩色图像输入到集成回归树中,计算出人脸特征点坐标;将彩色图像与深度图像耦合,坐标变换得到相机系中特征点的坐标;提取关键特征点计算建立人嘴坐标系;根据人嘴坐标最佳观测位置移动机械臂。本方法提高了深度相机的定位精度的问题,为机器人基于深度相机进行位置判断、采集数据等提供了坚实基础。

技术领域

本发明属于自动化控制技术领域,涉及一种机器人对人嘴的识别定位方法,尤其涉及一种基于深度相机的机器人人嘴识别定位的主动感知方法。

背景技术

传统的运用深度相机定位人脸的方式,往往专注于提高数据处理方式的精度,但却忽略了其测量的精度与准度也往往受到相机相对人脸的位置、角度等环境因素影响,在实际操作中,这种误差往往不可量化,造成实际测量过程中的风险增加。例如,专利CN108764089B《基于深度相机的人体背部脊柱中线识别方法》采取三次样条插值法处理获取曲率坐标;但数据点的获取精度依赖于观测角度与位置。在许多场景中,尤其是对于测量的精度与准度都有着很高要求的应用场景,这种误差引起的风险是不可接受的。本实用新型在采用传统的图像识别的方法提高精度而外,还能自主运动到最佳的观测位置,从数据本身和处理方式两方面提升深度相机的功效。

发明内容

本发明的目的是提出一种机器人对人嘴的识别定位方法,以克服传统技术的缺点,在各类高精度要求的应用场景中,能够自主寻找最优拍摄位置,以使人脸识别误差最小化,有效提高相机主动感知和识别定位的精度的。

本发明提出的机器人对人嘴的识别定位方法,首先获取相机的深度彩色图像,将彩色图像输入到集成回归树中,计算出人脸特征点坐标,将彩色图像与深度图像耦合,坐标变换得到相机系中特征点的坐标,提取关键特征点,计算建立人嘴坐标系,根据人嘴坐标最佳观测位置移动机械臂。

本发明提出的机器人对人嘴的识别定位方法,其优点是:

本发明的机器人对人嘴的识别定位方法,通过深度彩色图像识别定位人脸关键特征点,进而计算建立人嘴坐标系,再计算相机相对人脸的最佳观测位置主动感知,最终准确定位口腔空间位置。本发明的识别定位方法,较好地解决了人脸识别和定位的精度问题,有效降低了深度相机的测量误差,为医疗机器人的系统搭建、数据采集、实验分析打下了坚实的基础。

附图说明

图1是本发明提出的机器人对人嘴识别定位方法的流程框图。

图2是深度彩色图像到相机坐标系坐标变换示意图。

具体实施方式

本发明提出的机器人对人嘴的识别定位方法,首先获取相机的深度彩色图像,将彩色图像输入到集成回归树中,计算出人脸特征点坐标,将彩色图像与深度图像耦合,坐标变换得到相机系中特征点的坐标,提取关键特征点,计算建立人嘴坐标系,根据人嘴坐标最佳观测位置移动机械臂。

上述识别定位方法的流程框图如图1所示,具体包括以下步骤:

(1)利用深度相机获取人脸的深度彩色图像(简称RGBD图像),深度彩色图像的深度坐标为z;

(2)采用梯度提升树算法,学习得到一个集成回归树;

(3)将步骤(1)的彩色图像输入到步骤(2)的集成回归树中,计算出人脸的多个特征点在彩色图像上的二维坐标(xv,yv);

(4)将步骤(3)的二维坐标(xv,yv)和相应的步骤(1)的深度坐标z转换为深度相机坐标系下的三维坐标(x,y,z),其中为深度相机焦距(以像素为单位),h为彩色图像的像素高度,θ是深度相机的视野角度,如图2所示;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110617884.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top