[发明专利]用于确定头部相关传递函数的方法和存储介质有效
申请号: | 201980031849.6 | 申请日: | 2019-05-10 |
公开(公告)号: | CN112106384B | 公开(公告)日: | 2022-01-07 |
发明(设计)人: | 安东尼奥·约翰·米勒;拉维什·迈赫拉 | 申请(专利权)人: | 脸谱科技有限责任公司 |
主分类号: | H04S1/00 | 分类号: | H04S1/00;H04S3/00 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 陆建萍;杨明钊 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 确定 头部 相关 传递函数 方法 存储 介质 | ||
1.一种用于确定头部相关传递函数的方法,所述方法包括:
接收用户的头部的图像;
通过使用机器学习算法处理接收到的所述用户的头部的图像来生成所述用户的头部的几何结构,所述几何结构使用主成分分析(PCA)模型来表示,所述主成分分析(PCA)模型将所述用户的头部描述为测试对象的头部的代表性三维形状的组合;
基于所生成的几何结构,执行从音频源到所述用户的头部的声音传播的模拟;和
基于所述模拟来确定所述用户的所述头部相关传递函数(HRTF)。
2.根据权利要求1所述的方法,其中所述PCA模型通过以下方式生成:
接收测试对象的头部图像和所述测试对象的测量的HRTF;
基于初始PCA模型来确定所述测试对象的头部图像的基于PCA的几何结构;
对所述基于PCA的几何结构进行模拟,以确定所述测试对象的模拟的HRTF;
确定所述模拟的HRTF和所述测量的HRTF之间的差值;
基于所确定的差值,通过修改所述初始PCA模型或通过更新从所述初始PCA模型导出的一个或更多个中间PCA模型来生成更新的PCA模型;和
当所确定的差值低于阈值时,将所述更新的PCA模型确定为用于表示所述用户的头部的PCA模型。
3.根据权利要求1所述的方法,还包括根据所述PCA模型,使用所述测试对象的头部图像和所述测试对象的头部图像的基于PCA的几何结构来训练所述机器学习算法。
4.根据权利要求1所述的方法,其中所述用户的头部的图像包括所述用户的耳朵的形状。
5.根据权利要求1所述的方法,其中所述用户的头部的图像是深度图像。
6.根据权利要求5所述的方法,其中所述用户的头部的图像由头戴式显示器(HMD)的深度相机组件捕获。
7.根据权利要求6所述的方法,还包括:
基于所述用户的HRTF来确定所述用户的环绕声配置;和
将所述环绕声配置发送到所述HMD用于处理声音信号。
8.根据权利要求1所述的方法,其中所述几何结构被表示为三维网格。
9.根据权利要求1所述的方法,其中所述模拟基于有限元法(FEM)、边界元法(BEM)和时域有限差分(FDTD)法中的一种。
10.根据权利要求1所述的方法,其中所述用户的头部的图像是RGB图像。
11.一种非暂时性计算机可读存储介质,在所述非暂时性计算机可读存储介质上存储指令,所述指令在被处理器执行时使得所述处理器:
接收用户的头部的图像;
通过使用机器学习算法处理接收到的所述用户的头部的图像来生成所述用户的头部的几何结构,所述几何结构使用主成分分析(PCA)模型来表示,所述主成分分析(PCA)模型将所述用户的头部描述为测试对象的头部的代表性三维形状的组合;
基于所生成的几何结构,执行从音频源到所述用户的头部的声音传播的模拟;和
基于所述模拟来确定所述用户的头部相关传递函数(HRTF)。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于脸谱科技有限责任公司,未经脸谱科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201980031849.6/1.html,转载请声明来源钻瓜专利网。