[发明专利]一种基于AR增强现实的乐器辅助学习系统及方法和装置

权利要求书

1.一种基于AR增强现实的乐器辅助学习系统，其特征在于，包括：

定位标识，所述定位标识设置在乐器上，用于存储所述乐器的类型和型号信息以及所述定位标识在所述乐器上的位置信息；

AR识别模块，用于识别乐器的定位标识并在所述乐器上生成多个对应所述乐器不同弹奏位置的轮廓；

所述AR识别模块包括：

摄像头，用于获取乐器图像信息、定位标识以及用户的姿态和手势；

显示屏，用于显示用户弹奏乐器的视频，并在所述乐器上显示轮廓；

识别软件单元，用于识别所述定位标识，并根据所述定位标识在乐器上生成多个对应所述乐器不同弹奏位置的轮廓；并且用于根据弹奏时姿态和手势是否正确来使轮廓呈现不同的颜色；

所述定位标识为二维码标签；

AR识别模块在获取到二维码标签内的乐器类别和型号信息后，以二维码标签内存储的位置信息为基点，计算出乐器的轮廓和操作区域，并根据常用的使用习惯划分不同的位置操作区域，并为每个位置的操作区域生成轮廓。

2.根据权利要求1所述的系统，其特征在于，还包括：预弹奏信息接收模块，用于接收用户的预弹奏信息。

3.根据权利要求1所述的系统，其特征在于，还包括：录制模块，用于录制弹奏视频供用户观看。

4.一种基于AR增强现实的乐器辅助学习方法，其特征在于，应用于权利要求1-3任一项所述的系统，所述方法包括以下步骤：

通过摄像头获取定位标识；

根据所述定位标识在显示屏上生成多个轮廓，每个所述轮廓与所述乐器上的一处弹奏位置对应；

获取用户的预弹奏信息以及用户弹奏乐器时的姿态和手势；

根据所述预弹奏信息判断所述姿态和手势是否正确；

根据判断结果显示不同颜色的轮廓。

5.根据权利要求4所述的方法，其特征在于：所述根据所述定位标识在显示屏上生成多个轮廓，每个所述轮廓与所述乐器上的一处弹奏位置对应包括：

根据所述定位标识确定所述乐器的类型和型号以及所述定位标识在所述乐器上的位置；

以所述定位标识在所述乐器上的位置为基点，根据所述乐器的类型和型号生成匹配所述乐器的轮廓并显示在显示屏上。

6.根据权利要求4所述的方法，其特征在于：所述根据所述预弹奏信息判断所述姿态和手势是否正确包括：

根据所述预弹奏信息获取正确的弹奏姿态和手势；

将所述正确的弹奏姿态和手势与所述姿态和手势进行对比获取判断结果。

7.根据权利要求4所述的方法，其特征在于：所述根据判断结果显示不同颜色的轮廓包括：

当弹奏姿态和手势正确时，轮廓显示绿色；

当弹奏姿态和手势不正确时，轮廓显示红色。

8.一种基于AR增强现实的乐器辅助学习装置，其特征在于，应用于权利要求1-3任一项所述的系统，所述装置包括：

定位标识获取模块，用于通过摄像头获取定位标识；

轮廓生成模块，用于根据所述定位标识在显示屏上生成多个轮廓，每个所述轮廓与所述乐器上的一处弹奏位置对应；

预弹奏信息及姿态和手势获取模块，用于获取用户的预弹奏信息以及用户弹奏乐器时的姿态和手势；

判断模块，用于根据所述预弹奏信息判断所述姿态和手势是否正确；

结果显示模块，用于根据判断结果显示不同颜色的轮廓。