[发明专利]混合现实乐器

权利要求书

1.一种用于将音频信号呈现给混合现实环境的用户的方法，包括：

识别混合现实环境中的第一真实对象，所述混合现实环境具有用户；

识别所述混合现实环境中的第二真实对象；

在所述混合现实环境中生成对应于所述第二真实对象的第一虚拟对象使得所述第一虚拟对象具有所对应的第二真实对象的一个或多个参数；

在所述混合现实环境中识别所述第一真实对象与所述第一虚拟对象之间的碰撞；

确定与所述碰撞相关联的第一属性；

基于所述第一属性，确定对应于所述碰撞的第一音频信号；以及

经由第一扬声器，向所述用户呈现所述第一音频信号，

其中，所述第一真实对象包括传感器，并且识别所述碰撞包括基于所述传感器的输出来预测碰撞，并且其中，

确定与所述碰撞相关联的第一属性包括基于所述传感器的输出确定所述第一属性。

2.根据权利要求1所述的方法，其中，识别所述碰撞还包括基于所述第一真实对象的位置和所述第一真实对象的速度来预测碰撞。

3.根据权利要求1所述的方法，其中，所述第一属性是与所述虚拟对象相关联的音高，并且确定第一音频信号包括生成对应于所述音高的音频信号。

4.根据权利要求1所述的方法，其中，所述第一属性包括与所述虚拟对象相关联的材料，并且确定所述第一音频信号包括：

生成音频信号，以及

基于所述材料的声学特性来修改所述音频信号。

5.根据权利要求1所述的方法，还包括在显示器上同时呈现所述虚拟对象和所述第二真实对象的视图。

6.根据权利要求1所述的方法，其中，确定所述第一音频信号包括：

基于所述第一属性来生成MIDI参数；以及

使用声音引擎，基于所述MIDI参数来生成所述第一音频信号。

7.一种用于将音频信号呈现给混合现实环境的用户的方法，包括：

识别混合现实环境中的第一真实对象，所述混合现实环境具有用户；

识别所述混合现实环境中的第二真实对象；

在所述混合现实环境中生成对应于所述第一真实对象的第一虚拟对象；

在所述混合现实环境中生成对应于所述第二真实对象的第二虚拟对象使得所述第二虚拟对象具有所对应的第二真实对象的一个或多个参数；

在所述混合现实环境中识别所述第一虚拟对象与所述第二虚拟对象之间的碰撞；

确定与所述碰撞相关联的第一属性；

基于所述第一属性，确定对应于所述碰撞的第一音频信号；以及

经由第一扬声器，向所述用户呈现所述第一音频信号，

其中，所述第一真实对象包括传感器，并且识别所述碰撞包括基于所述传感器的输出来预测碰撞，并且其中，

确定与所述碰撞相关联的第一属性包括基于所述传感器的输出确定所述第一属性。

8.一种用于将音频信号呈现给混合现实环境的用户的系统，包括：

可穿戴头部设备，其包括：

用于显示虚拟环境的显示器，所述显示器包括透射目镜，通过所述透射目镜，真实环境是可见的；和

扬声器；以及

一个或多个处理器，其被配置为执行：

识别所述真实环境中的第一真实对象；

识别所述真实环境中的第二真实对象；

在所述虚拟环境中生成对应于所述第二真实对象的第一虚拟对象；

在所述虚拟环境中识别所述第一真实对象与所述第一虚拟对象之间的碰撞使得所述第一虚拟对象具有所对应的第二真实对象的一个或多个参数；

确定与所述碰撞相关联的第一属性；

基于所述第一属性，确定对应于所述碰撞的第一音频信号；以及

经由所述扬声器，向所述可穿戴头部设备的用户呈现所述第一音频信号，

其中，所述第一真实对象包括传感器，并且识别所述碰撞包括基于所述传感器的输出来预测碰撞，并且其中，

确定与所述碰撞相关联的第一属性包括基于所述传感器的输出确定所述第一属性。