[发明专利]一种基于光流法的受限局部人脸关键点检测与跟踪方法在审
申请号: | 201811511988.2 | 申请日: | 2018-12-11 |
公开(公告)号: | CN109800635A | 公开(公告)日: | 2019-05-24 |
发明(设计)人: | 褚晶辉;张姗;王鹏;李敏;吕卫 | 申请(专利权)人: | 天津大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08 |
代理公司: | 天津市北洋有限责任专利代理事务所 12201 | 代理人: | 李林娟 |
地址: | 300072*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于光流法的受限局部人脸关键点检测与跟踪方法,包括:建立人脸关键点附近邻域响应的神经网络响应模型,构建训练集,该训练集中含有人脸图像及对应图像的人脸关键点的坐标;以训练集中标记好的人脸关键点为中心位置取预设大小的邻域建立卷积神经网络,使用梯度下降法训练卷积神经网络;在第一帧处通过检测器进行人脸检测,以新的迭代更新点为中心取另一预设大小的邻域图像块,在某一邻域内以每一个像素点为中心向外扩展预设大小的邻域,送入训练好的卷积神经网络,逐像素地得到响应图块,重复操作,总计得到68个关键点位置;取68个人脸关键点之中的7个点,用光流法根据这7个点来确定下一帧图像的68个点的位置,作为下一帧的68个点的初始位置,然后根据初始位置使用受限局部模型确定人脸68个关键点的位置。 | ||
搜索关键词: | 人脸 关键点 卷积神经网络 光流法 邻域 受限 预设 关键点检测 检测器 关键点位置 迭代更新 局部模型 邻域建立 邻域图像 人脸检测 人脸图像 神经网络 响应模型 重复操作 下降法 像素点 训练集 帧图像 响应 跟踪 构建 图块 像素 送入 图像 总计 | ||
【主权项】:
1.一种基于光流法的受限局部人脸关键点检测与跟踪方法,其特征在于,所述方法包括:建立人脸关键点附近邻域响应的神经网络响应模型,构建训练集,该训练集中含有人脸图像及对应图像的人脸关键点的坐标;以训练集中标记好的人脸关键点为中心位置取预设大小的邻域建立卷积神经网络,使用梯度下降法训练卷积神经网络;在第一帧处通过检测器进行人脸检测,以新的迭代更新点为中心取另一预设大小的邻域图像块,在某一邻域内以每一个像素点为中心向外扩展预设大小的邻域,送入训练好的卷积神经网络,逐像素地得到响应图块,重复操作,总计得到68个关键点位置;取68个人脸关键点之中的7个点,用光流法根据这7个点来确定下一帧图像的68个点的位置,作为下一帧的68个点的初始位置,然后根据初始位置使用受限局部模型确定人脸68个关键点的位置,以此类推,完成对视频中人脸关键点的检测和跟踪。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津大学,未经天津大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811511988.2/,转载请声明来源钻瓜专利网。