[发明专利]用于控制三维场景的方法和装置在审
申请号: | 201810055487.1 | 申请日: | 2018-01-19 |
公开(公告)号: | CN108170282A | 公开(公告)日: | 2018-06-15 |
发明(设计)人: | 杜雅洁 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06F3/0481;G06K9/00 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请实施例公开了用于控制三维场景的方法和装置。该方法的一具体实施方式包括:确定目标用户的面部姿态在预设时间段内是否发生改变;响应于确定目标用户的面部姿态在预设时间段内发生改变,确定目标用户当前的面部姿态坐标;基于预先设置的面部姿态坐标与三维场景坐标之间的对应关系,将目标用户当前的面部姿态坐标映射至三维场景中;基于映射后的坐标,改变三维场景。该实施方式提高了用户与三维场景的交互能力。 1 | ||
搜索关键词: | 三维场景 面部姿态 目标用户 方法和装置 预设时间段 交互能力 预先设置 坐标映射 映射 响应 申请 | ||
确定目标用户的面部姿态在预设时间段内是否发生改变;
响应于确定所述目标用户的面部姿态在预设时间段内发生改变,确定所述目标用户当前的面部姿态坐标;
基于预先设置的面部姿态坐标与三维场景坐标之间的对应关系,将所述目标用户当前的面部姿态坐标映射至三维场景中;
基于映射后的坐标,改变所述三维场景。
2.根据权利要求1所述的方法,其中,所述确定目标用户的面部姿态在预设时间段内是否发生改变,包括:利用拍摄设备获取所述目标用户的当前面部图像;
将所述当前面部图像与存储的预设时间段内的面部图像进行比较,确定所述当前面部图像的面部位姿与所述预设时间段内的面部图像的面部位姿之差是否大于预设阈值;
响应于所述当前面部图像的面部位姿与所述预设时间段内的面部图像的面部位姿之差大于预设阈值,确定所述目标用户的面部姿态发生改变。
3.根据权利要求2所述的方法,其中,所述确定所述当前面部图像的面部位姿与所述预设时间段内的面部图像的面部位姿之差是否大于预设阈值,包括:基于预先建立的人脸模型,在所述人脸模型的特征点向所述当前面部图像的投影与所述当前面部图像的特征点重合的状态下,利用非线性最小二乘法确定所述当前面部图像的面部位姿的第一坐标;
旋转所述人脸模型,在所述人脸模型的特征点向所述预设时间段内的面部图像的投影与所述预设时间段内的面部图像的特征点重合的状态下,利用非线性最小二乘法确定所述预设时间段内的面部图像的面部位姿的第二坐标;
确定所述第一坐标与所述第二坐标的向量差值为所述面部位姿之差。
4.根据权利要求3所述的方法,其中,所述人脸模型通过如下步骤建立:获取人脸图像样本;
将人脸图像样本输入至预先训练的主动形状模型,得到基于人脸图像样本的特征点分布;
基于所述特征点分布,调整预先存储的初始人脸模型,得到所述人脸模型。
5.根据权利要求1所述的方法,其中,所述基于映射后的坐标,改变所述三维场景,包括:将所述三维场景根据坐标维度划分为三个坐标平面;
将所述映射后的坐标与当前的三维场景坐标比较,确定改变的维度;
基于所述改变的维度中的每一个维度,调整所述三个坐标平面中包含该维度的坐标平面;
基于改变的坐标平面,改变所述三维场景。
6.一种用于控制三维场景的装置,包括:第一确定单元,配置用于确定目标用户的面部姿态在预设时间段内是否发生改变;
第二确定单元,配置用于响应于确定所述目标用户的面部姿态在预设时间段内发生改变,确定所述目标用户当前的面部姿态坐标;
映射单元,配置用于基于预先设置的面部姿态坐标与三维场景坐标之间的对应关系,将所述目标用户当前的面部姿态坐标映射至三维场景中;
改变单元,配置用于基于映射后的坐标,改变所述三维场景。
7.根据权利要求6所述的装置,其中,所述第一确定单元,包括:获取子单元,配置用于利用拍摄设备获取所述目标用户的当前面部图像;
第一确定子单元,配置用于将所述当前面部图像与存储的预设时间段内的面部图像进行比较,确定所述当前面部图像的面部位姿与所述预设时间段内的面部图像的面部位姿之差是否大于预设阈值;
第二确定子单元,配置用于响应于所述当前面部图像的面部位姿与所述预设时间段内的面部图像的面部位姿之差大于预设阈值,确定所述目标用户的面部姿态发生改变。
8.根据权利要求7所述的装置,其中,所述第一确定子单元进一步配置用于:基于预先建立的人脸模型,在所述人脸模型的特征点向所述当前面部图像的投影与所述当前面部图像的特征点重合的状态下,利用非线性最小二乘法确定所述当前面部图像的面部位姿的第一坐标;
旋转所述人脸模型,在所述人脸模型的特征点向所述预设时间段内的面部图像的投影与所述预设时间段内的面部图像的特征点重合的状态下,利用非线性最小二乘法确定所述预设时间段内的面部图像的面部位姿的第二坐标;
确定所述第一坐标与所述第二坐标的向量差值为所述面部位姿之差。
9.根据权利要求8所述的装置,其中,所述人脸模型通过如下步骤建立:获取人脸图像样本;
将人脸图像样本输入至预先训练的主动形状模型,得到基于人脸图像样本的特征点分布;
基于所述特征点分布,调整预先存储的初始人脸模型,得到所述人脸模型。
10.根据权利要求6所述的装置,其中,所述改变单元进一步配置用于:将所述三维场景根据坐标维度划分为三个坐标平面;
将所述映射后的坐标与当前的三维场景坐标比较,确定改变的维度;
基于所述改变的维度中的每一个维度,调整所述三个坐标平面中包含该维度的坐标平面;
基于改变的坐标平面,改变所述三维场景。
11.一种电子设备,包括:一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1‑5中任一所述的方法。
12.一种计算机可读存储介质,其上存储有计算机程序,其中,该程序被处理器执行时实现如权利要求1‑5中任一所述的方法。该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810055487.1/,转载请声明来源钻瓜专利网。
- 上一篇:一种工作姿势分析系统测算方法
- 下一篇:虚拟现实显示设备的瞳距调节方法和装置