[发明专利]一种基于头部姿态实现非接触式人机交互的方法在审
申请号: | 202210150603.4 | 申请日: | 2022-02-18 |
公开(公告)号: | CN114201054A | 公开(公告)日: | 2022-03-18 |
发明(设计)人: | 袁宏宇;刘国清;杨广;王启程;徐涵;全丹辉 | 申请(专利权)人: | 深圳佑驾创新科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06T17/00 |
代理公司: | 深圳市查策知识产权代理事务所(普通合伙) 44527 | 代理人: | 郭晓露 |
地址: | 518000 广东省深圳市福田区梅林街*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 头部 姿态 实现 接触 人机交互 方法 | ||
1.一种基于头部姿态实现非接触式人机交互的方法,其特征在于,包括以下步骤:
步骤一、建立3D人脸模型,确保3D人脸模型的特征点数量与特征点坐标确定单元的输出结果相匹配,并以此3D人脸模型建立头部坐标系;
步骤二、建立相机坐标系,实时采集用户的人脸图像视频数据流,对单帧图像建立图像坐标系;
步骤三、通过特征点坐标确定单位自动定位面部特征点,输出当前帧的特征点坐标,特征点坐标位于图像坐标系;
步骤四、根据特征点坐标确定单位的输出结果,头部姿态确定单元选取特征点与3D人脸模型中的点对应,计算相机坐标系下的俯仰角和偏航角;
步骤五、根据头部姿态确定单元输出的偏航角和俯仰角,利用角度-坐标转换单元记录第一次的输出的偏航角和俯仰角为初始位置,使当前角度对应至显示器上的中心点,计算角度的差值乘一个系数对应到屏幕的像素点上;
步骤六、移动头部实现非接触式人机交互。
2.根据权利要求1所述的基于头部姿态实现非接触式人机交互的方法,其特征在于:对步骤二中单帧图像进行裁剪、旋转缩放至符合特征点坐标确定电源的输入要求。
3.根据权利要求2所述的基于头部姿态实现非接触式人机交互的方法,其特征在于:所述特征点包括左右眼内眼角、鼻梁、鼻尖、下巴点。
4.根据权利要求3所述的基于头部姿态实现非接触式人机交互的方法,其特征在于:所述俯仰角和航偏角的角度范围为-90~90度。
5.根据权利要求4所述的基于头部姿态实现非接触式人机交互的方法,其特征在于:所述俯仰角的绝对值大于25度或偏航角的绝对值大于40度时,不进行角度-坐标转换,所述转换的公式为:
其中,x, y为图像坐标系下特征点的坐标,U, V,W为头部坐标系的特征点坐标,R为旋转矩阵,T为平移向量,fx, fy, cx,cy为相机畸变参数。
6.根据权利要求5所述的基于头部姿态实现非接触式人机交互的方法,其特征在于:所述图像坐标系下特征点的坐标的计算公式为:
其中:k为系数,yaws为初始位置的偏航角,yawn为当前位置的偏航角,pitchs为初始位置的俯仰角,pitchn为当前位置的俯仰角。
7.根据权利要求6所述的基于头部姿态实现非接触式人机交互的方法,其特征在于:所述k值的大小与显示器的尺寸成正相关。
8.根据权利要求7所述的基于头部姿态实现非接触式人机交互的方法,其特征在于:所述方法还包括:根据用户面部图像中特征点的变化,计算用户头部是否俯仰过度;若判定为俯仰过度,则对移动光标动作进行锁定。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳佑驾创新科技有限公司,未经深圳佑驾创新科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210150603.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:内存换页方法、系统及存储介质
- 下一篇:内窥镜及手术机器人