[发明专利]一种辅助用户寻物的方法及装置

权利要求书

1.一种辅助用户寻物的方法，其特征在于，包括：

确定目标物体以及所述目标物体相对于所述用户的初始三维空间位置，所述目标物体为用户待寻找的物体；所述确定所述目标物体相对于所述用户的初始三维空间位置包括：通过深度传感器确定所述目标物体相对于所述用户的初始三维空间位置；

生成与所述初始三维空间位置对应的初始虚拟空间声，所述初始虚拟空间声通过根据人耳对声音信号的感知特点,使用信号处理方法对声源到两耳之间的传递函数模拟构建；

在用户寻物过程中，实时更新所述目标物体相对于所述用户的三维空间位置，并生成与更新后的三维空间位置对应的新的虚拟空间声；

所述确定目标物体，具体包括：接收用户输入的第一提示信息，所述第一提示信息用于指定所述目标物体；获取用户所在场景对应的全景图像，并在所述全景图像中进行目标检测以确定所述目标物体；所述第一提示信息包括所述目标物体的名称或用户对所述目标物体的特征描述；

所述在所述全景图像中进行目标检测以确定所述目标物体，具体包括：当进行目标检测后检测到至少一个候选目标物体时，向用户输出第二提示信息，所述第二提示信息用于提示用户从所述至少一个候选目标物体中选择最终的目标物体；接收用户对所述第二提示信息的响应，并根据用户的响应确定所述目标物体；

在生成与更新后的三维空间位置对应的新的虚拟空间声之后，所述方法还包括：当所述目标物体与所述用户的距离小于预设阈值时，语音提示用户以指导用户逐渐靠近所述目标物体。

2.根据权利要求1所述的方法，其特征在于，所述确定目标物体之后，所述方法还包括：

实时跟踪已确定的所述目标物体和所述用户；

所述实时更新所述目标物体相对于所述用户的三维空间位置，具体包括：

根据对所述目标物体和用户的跟踪结果，分别确定所述目标物体和所述用户的当前位置；

根据所述目标物体和所述用户的当前位置，确定所述目标物体相对于所述用户的更新后的三维空间位置。

3.根据权利要求1所述的方法，其特征在于，所述虚拟空间声的声音类别与所述目标物体的种类对应。

4.根据权利要求1所述的方法，其特征在于，所述生成与更新后的三维空间位置对应的新的虚拟空间声，包括：

检测所述更新后的三维空间位置与更新前的三维空间位置相比是否靠近所述用户；

如果是，则生成与所述更新后的三维空间位置对应的新的虚拟空间声，且所述新的虚拟空间声的频率大于所述更新前的三维空间位置对应的虚拟空间声。

5.一种辅助用户寻物的装置，其特征在于，包括：

检测单元，用于确定目标物体，所述目标物体为用户待寻找的物体；

位置确定单元，用于确定所述检测单元检测到的目标物体相对于所述用户的初始三维空间位置，包括通过深度传感器确定所述目标物体相对于所述用户的初始三维空间位置；

虚拟空间声生成单元，用于生成与所述位置确定单元确定的所述初始三维空间位置对应的初始虚拟空间声，所述初始虚拟空间声通过根据人耳对声音信号的感知特点,使用信号处理方法对声源到两耳之间的传递函数模拟构建；

所述位置确定单元，还用于在用户寻物过程中，实时更新所述目标物体相对于所述用户的三维空间位置；

所述虚拟空间声生成单元，还用于生成与所述位置确定单元确定的更新后的三维空间位置对应的新的虚拟空间声；

所述检测单元，还用于接收用户输入的第一提示信息，所述第一提示信息用于指定所述目标物体；获取用户所在场景对应的全景图像，并在所述全景图像中进行目标检测以确定所述目标物体；所述第一提示信息包括所述目标物体的名称或用户对所述目标物体的特征描述；所述检测单元，还用于当检测到至少一个候选目标物体时，向用户输出第二提示信息，所述第二提示信息用于提示用户从所述至少一个候选目标物体中选择最终的目标物体；以及接收用户对所述第二提示信息的响应，并根据用户的响应确定所述目标物体；

所述检测单元，还用于当所述目标物体与所述用户的距离小于预设阈值时，语音提示用户以使得用户逐渐靠近所述目标物体。