[发明专利]用于虚拟现实的有效空间异质音频元素

权利要求书

1.一种用于为用户渲染空间异质音频元素的方法（1100），所述方法包括：

获取（s1102）表示所述空间异质音频元素的两个或更多音频信号，其中，所述音频信号的组合提供所述空间异质音频元素的空间图像；

获取（s1104）与所述空间异质音频元素相关联的元数据，所述元数据包括指示所述空间异质音频元素的空间范围的空间范围信息；以及

使用以下信息渲染（s1106）所述空间异质音频元素：i）所述空间范围信息和ii）指示所述用户相对于所述空间异质音频元素的位置和/或取向的定位信息。

2.如权利要求1所述的方法，其中，

所述空间异质音频元素的所述空间范围对应于在相对于所述空间异质音频元素的第一虚拟位置或第一虚拟取向处所感知的所述空间异质音频元素在一个或多个维度上的大小。

3.如权利要求1或2所述的方法，其中，所述空间范围信息指定所述空间异质音频元素的物理大小或感知大小。

4.如权利要求3所述的方法，其中，渲染所述空间异质音频元素包括：基于所述用户相对于所述空间异质音频元素的位置和/或所述用户相对于所述空间异质音频元素的取向向量的取向，修改所述两个或更多音频信号中的至少一个。

5.如权利要求1-4中任一项所述的方法，其中，所述元数据进一步包括：

i）麦克风设置信息，所述麦克风设置信息指示麦克风之间的间距、所述麦克风相对于默认轴的取向和/或所述麦克风的类型；

ii）第一关系信息，所述第一关系信息指示所述麦克风与所述空间异质音频元素之间的距离和/或虚拟麦克风相对于所述空间异质音频元素的轴的取向，和/或

iii）第二关系信息，所述第二关系信息指示相对于所述空间异质音频元素的默认位置和/或所述默认位置与所述空间异质音频元素之间的距离。

6.如权利要求1-5中任一项所述的方法，其中，

渲染所述空间异质音频元素包括产生修改的音频信号，

所述两个或更多音频信号表示在相对于所述空间异质音频元素的第一虚拟位置和/或第一虚拟取向处所感知的空间异质音频元素，

所述修改的音频信号用于表示在相对于所述空间异质音频元素的第二虚拟位置和/或第二虚拟取向处所感知的空间异质音频元素，并且

所述用户的所述位置对应于所述第二虚拟位置和/或所述用户的所述取向对应于所述第二虚拟取向。

7.如权利要求1-6中任一项所述的方法，其中，

所述两个或更多音频信号包括左音频信号（L）和右音频信号（R），

渲染所述空间异质音频元素包括产生修改的左信号（L’）和修改的右信号（R’），

[L' R']^T=H×[L R]^T，其中H为变换矩阵，并且

所述变换矩阵是基于获取的元数据和所述定位信息确定的。

8.如权利要求7所述的方法，其中，渲染所述空间异质音频元素包括：

生成第一输出信号（EL）和第二输出信号（ER），其中，

EL=L’*HRTFL，其中HRTFL是用于左耳的头部相关传递函数（或者对应的脉冲响应），并且

ER=R’*HRTFR，其中HRTFR是用于右耳的头部相关传递函数（或者对应的脉冲响应）。

9.如权利要求1-8中任一项所述的方法，其中，获取所述两个或更多音频信号进一步包括：

获取多个音频信号；

将所述多个音频信号转换为Ambisonics格式；以及

基于转换后的多个音频信号生成所述两个或更多音频信号。

10. 如权利要求1-9中任一项所述的方法，其中，与所述空间异质音频元素相关联的所述元数据指定：

所述空间异质音频元素的概念空间中心，和/或

所述空间异质音频元素的取向向量。