[发明专利]头部姿势的估计方法、装置、设备及存储介质在审
申请号: | 201910979696.X | 申请日: | 2019-10-15 |
公开(公告)号: | CN110717467A | 公开(公告)日: | 2020-01-21 |
发明(设计)人: | 淮静 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 11659 北京远智汇知识产权代理有限公司 | 代理人: | 范坤坤 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 头部姿势 视频帧 坐标信息 关键点 人脸 视频 存储介质 信息获得 滑性 算法 | ||
本公开实施例公开了一种头部姿势的估计方法、装置、设备及存储介质。包括:获取当前视频帧中设定人脸关键点的2D坐标信息和3D坐标信息;获取上一视频帧的头部姿势信息;对所述2D坐标信息、3D坐标信息和上一视频帧的头部姿势信息按照设定算法进行计算,获得当前视频的头部姿势信息。本公开实施例提供的头部姿势的估计方法,根据当前视频帧中设定人脸关键点的2D坐标信息、3D坐标信息和上一视频帧中的头部姿势信息获得当前视频的头部姿势信息,可以提高头部姿势估计的稳定性和平滑性。
技术领域
本公开实施例涉及姿态估计技术领域,尤其涉及一种头部姿势的估计方法、装置、设备及存储介质。
背景技术
头部姿势估计及运动检测常被用于人机交互领域,通过检测头部姿势来实现对设备的控制。如:通过头部姿势来控制游戏指令,进行互动式游戏,以及随机指令让人做出点头、摇头或者摆头的动作来判断当前摄像头采集的是否为真实人脸等。
现有技术中,一种方式是采用传统的运动传感器来检测头部姿势,该方式硬件成本较高。另一种方式是基于人脸关键点进行姿态估计,这种方式在视频中的头部姿势估计中,求解出的相邻两帧的姿势差距可能很大,从而出现姿势估计抖动的情况。
发明内容
本公开实施例提供一种头部姿势的估计方法、装置、设备及存储介质,以实现视频中头部姿势的估计,提高头部姿势估计的稳定性和平滑性。
第一方面,本公开实施例提供了一种头部姿势的估计方法,包括:
获取当前视频帧中设定人脸关键点的2D坐标信息和3D坐标信息;
获取上一视频帧的头部姿势信息;
对所述2D坐标信息、3D坐标信息和上一视频帧的头部姿势信息按照设定算法进行计算,获得当前视频的头部姿势信息。
第二方面,本公开实施例还提供了一种头部姿势的估计装置,包括:
坐标信息获取模块,用于获取当前视频帧中设定人脸关键点的2D坐标信息和3D坐标信息;
上一头部姿势信息获取模块,用于获取上一视频帧的头部姿势信息;
当前头部姿势信息获取模块,用于对所述2D坐标信息、3D坐标信息和上一视频帧的头部姿势信息按照设定算法进行计算,获得当前视频的头部姿势信息。
第三方面,本公开实施例还提供了一种电子设备,所述电子设备包括:
一个或多个处理装置;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理装置执行,使得所述一个或多个处理装置实现如本公开实施例所述的头部姿势的估计方法。
第四方面,本公开实施例还提供了一种计算机可读介质,其上存储有计算机程序,其特征在于,该程序被处理装置执行时实现如本公开实施例所述的头部姿势的估计方法。
本公开实施例,首先获取当前视频帧中设定人脸关键点的2D坐标信息和3D坐标信息,然后获取上一视频帧的头部姿势信息,最后对2D坐标信息、3D坐标信息和上一视频帧的头部姿势信息按照设定算法进行计算,获得当前视频的头部姿势信息。本公开实施例提供的头部姿势的估计方法,根据当前视频帧中设定人脸关键点的2D坐标信息、3D坐标信息和上一视频帧中的头部姿势信息获得当前视频的头部姿势信息,可以提高头部姿势估计的稳定性和平滑性。
附图说明
图1是本公开实施例一中的一种头部姿势的估计方法的流程图;
图2是本公开实施例一中的一种人脸关键点的示意图;
图3是本公开实施例二中的一种头部姿势的估计装置的结构示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910979696.X/2.html,转载请声明来源钻瓜专利网。