[发明专利]基于音频和身体移动的主动动作

权利要求书

1.一种方法，包括：

在具有处理器的电子设备处：

获得对应于物理环境的第一传感器数据和第二传感器数据，所述第一传感器数据对应于所述物理环境中的音频并且所述第二传感器数据对应于所述物理环境中的身体移动；

基于所述第一传感器数据和所述第二传感器数据来识别所述音频的一个或多个元素与所述身体移动的一个或多个方面之间的基于时间的关系；以及

基于识别所述基于时间的关系来识别对所述音频的内容感兴趣。

2.根据权利要求1所述的方法，还包括基于识别对所述内容感兴趣，在所述电子设备上呈现所述内容的标识。

3.根据权利要求1所述的方法，还包括基于识别对所述内容感兴趣，呈现对应于所述内容中的字词的文本。

4.根据权利要求1所述的方法，还包括基于识别对所述内容感兴趣，呈现用于以下操作的可选选项：

重新播放所述内容；

在离开所述物理环境后继续体验所述内容；

购买所述内容；

下载所述内容；或者

将所述内容添加到播放列表。

5.根据权利要求1所述的方法，还包括基于识别对所述内容感兴趣，识别所述内容的特性并且基于所识别的特性来识别附加内容。

6.根据权利要求1所述的方法，还包括基于确定用户状态来确定限制提供与所述内容相关联的特征。

7.根据权利要求1所述的方法，其中识别对所述内容感兴趣进一步基于确定所述物理环境中的声音正跟唱所述内容。

8.根据权利要求1所述的方法，其中识别对所述内容感兴趣进一步基于识别的注视方向。

9.根据权利要求1所述的方法，其中识别对所述内容感兴趣进一步基于识别的面部表情。

10.根据权利要求1所述的方法，还包括：

检测所述身体移动；以及

基于检测到所述身体移动，发起所述音频的分析。

11.根据权利要求10所述的方法，还包括：

基于所述音频的所述分析，确定音乐正在播放，其中所述音乐是所述内容；

基于确定所述音乐正在播放，执行比较以识别所述基于时间的关系；以及

基于确定所述基于时间的关系，识别所述音乐的名称、艺术家或来源。

12.根据权利要求1所述的方法，其中识别所述基于时间的关系包括确定所述身体移动的重复身体运动的定时与所述内容的节拍或节奏的定时匹配。

13.根据权利要求1所述的方法，其中识别所述基于时间的关系包括确定所述身体移动的唇部移动匹配所述内容的字词。

14.根据权利要求1所述的方法，其中识别所述基于时间的关系包括确定所述身体移动是对所述内容中识别的显著性的事件的反应。

15.根据权利要求1所述的方法，其中对应于身体移动的所述传感器数据包括：

图像数据，其中身体的一部分随时间移动；或者

来自附接到所述身体的一部分的运动传感器的运动传感器数据。

16.根据权利要求1所述的方法，还包括基于使用来自所述物理环境中的多个人员的音频和身体移动传感器数据识别基于时间的关系来识别所述多个人员对所述音频的所述内容感兴趣。