[发明专利]用于计算机介导现实系统的渲染

权利要求书

1.一种用于媒体数据处理的装置，其包括：

存储器，其经配置以存储表示声场的高阶立体混响音频数据；和

一或多个处理器，其耦合到所述存储器且经配置以：

接收原始参考距离；

在与装置介接的用户的平移运动之前，确定定位于相对于所述用户的头部的原始参考距离处的参考点，其中所述参考点是锚点；

获取表示与所述装置介接的用户的平移头部移动的平移距离；

在获得所述平移距离之后，确定定位于所述原始参考距离处的每个锚点与所述用户的头部之间的更新距离；

在应用渲染器之前，基于每个更新距离来确定效应矩阵；

基于所述效应矩阵生成高阶立体混响音频数据，以使所述声场适应所获取的平移距离；且

基于所生成的高阶立体混响音频数据生成扬声器馈送。

2.根据权利要求1所述的装置，其中表示所述平移头部移动的所述平移距离限定于二维空间坐标空间或三维空间坐标空间中。

3.根据权利要求1所述的装置，

其中所述一或多个处理器进一步经配置以将所述效应矩阵乘以渲染矩阵来获取更新的渲染矩阵，

其中所述一或多个处理器经配置以将所述更新的渲染矩阵应用于所述高阶立体混响音频数据，从而1)提供使所述声场适应所述平移距离的一或多个效应，且2)生成所述扬声器馈送。

4.根据权利要求1所述的装置，其中多个锚点均匀分布于具有等于所述原始参考距离的半径的球体的表面上。

5.根据权利要求1所述的装置，

其中包含深度映射的三维视频数据与所述高阶立体混响音频数据相关联，且

其中所述一或多个处理器经配置以在确定定位于所述原始参考距离处的每个锚点与所述用户的头部之间的所述更新距离中的每一个之前，基于所述深度映射来确定所述锚点中的每一个的所述原始参考距离。

6.根据权利要求1所述的装置，

其中包含深度映射的三维视频数据与所述高阶立体混响音频数据相关联，且

其中所述一或多个处理器经配置以基于所述深度映射来获取定位于所述原始参考距离处的每个锚点与所述用户的头部之间的更新距离。

7.根据权利要求1所述的装置，

其中所述一或多个处理器耦合到所述装置的扬声器，其中所述装置是可穿戴式装置，

其中所述一或多个处理器经配置以将渲染器应用于所述高阶立体混响音频数据以生成所述扬声器馈送，其中所述渲染器是双耳渲染器，且

其中所述一或多个处理器进一步经配置以将所述扬声器馈送输出到所述扬声器。

8.根据权利要求7所述的装置，其中所述可穿戴式装置为手表、眼镜、头戴式耳机、扩增现实AR耳机、虚拟现实VR耳机或扩展现实XR耳机。

9.根据权利要求1所述的装置，

其中所述一或多个处理器进一步经配置以获取指示与所述装置介接的所述用户的旋转头部移动的旋转指示，且

其中所述一或多个处理器经配置以基于所述平移距离和所述旋转指示来使所述声场适应所述平移距离和所述旋转指示。

10.根据权利要求1所述的装置，其中所述一或多个处理器经配置以使用感测所述平移头部移动的运动传感器来获取所述平移距离。

11.根据权利要求1所述的装置，其中所述一或多个处理器经配置以基于由耦合到所述一或多个处理器的摄影机捕获的图像来获取所述平移距离。

12.根据权利要求1所述的装置，其中所述高阶立体混响音频数据包括与具有一或小于一的阶数的球基函数相关联的高阶立体混响系数、与具有混合阶数和子阶数的球基函数相关联的高阶立体混响系数，或与具有大于一的阶数的球基函数相关联的高阶立体混响系数。