[发明专利]用于乐谱捕捉和带同步呈现的合成音频演奏的系统与方法

说明书

背景

希望提高乐器演奏水平的人传统上依赖个人指导和单独练习环节。虽然个人指导会非常有帮助，但是通常相当昂贵并且依赖于私人指导者配合音乐学生的进度表的有空情况。单独练习环节非常方便，但是缺乏对学生演奏者的演奏有用的即时反馈。

有各种设备能够帮助演奏者提高其乐器重演表现。例如，电子节拍器帮助演奏者保持稳定的计数。已经开发了用于乐谱(活页乐谱)的计算机显示的系统，从而使得演奏者能方便地有各种音乐可用于练习。例如参见M.Errico的美国专利申请2004/0040433。其它系统辅助光学识别乐谱以便将其存储为数字数据以及后续以计算机显示。例如参见T.Kikuchi的美国专利第5,825,905。

如果演奏者能够利用乐谱的合成演奏(音频演绎)并能在任何时候听到以正确的音高(合调)和正确的旋律正确演奏的乐谱中较难的段落(或者实际上，听到整个乐谱)将是有帮助的。演奏者从而能够通过重复或再现该正确的演奏方式来练习。如果演奏者能够在与合成音频演绎同步的动态显示上查看乐谱、并根据显示的乐谱来练习演奏乐器或演唱也将是有帮助的。如果演奏者能够记录其演奏并随后在任何时间回放该演奏来评价该演奏并与正确的(合成的)演绎相比较也将是有帮助的。以这种方式，希望练习演奏乐器(或声乐)的任何人都可得到正确的音乐合成演绎的提示，并可在随后评价其自身对乐谱的演奏。另外，如果演奏者能够随正确的合成演绎一起演奏(或演唱)也将是有帮助的。

由此，需要更为方便的乐谱捕捉、演奏记录、以及合成演奏和分析技术。本发明满足了该需求。

概要

本发明用于独奏乐器、重奏乐器、独唱或重唱、或其任意组合的乐谱的段落(或整首音乐或歌曲)的捕捉和后续解释，处理数据以生成合成音频呈现以及对应于该音频呈现的乐谱的视觉呈现的同步伴随显示，并支持记录演奏者对该乐谱的音乐演奏以便稍后回放演奏者的该音乐演奏。用于提供这些特征的装置可包括主数字计算机上的应用软件。或者，这些特征可由自含的手持式设备来提供。主计算机和手持式设备这两个实施例均包括：用于接收乐谱的数字表示的装置；用于显示乐谱的视觉呈现的显示器；以及用于乐谱的同步合成音频演绎的装置。乐谱的数字表示可从数字图像捕捉设备或通过网络连接从数据源接收。这些实施例还可提供对用户演奏的记录以及用户演奏的回放。根据本发明，可从外部源接收乐谱数据从而使计算设备能够生成乐谱数据的音频呈现，并能生成对应于该音频呈现的音符的同步可视呈现。

其它实施例还能提供其它的灵活性和更为方便的操作。例如，可使手持式设备适用于接收可存储数字数据格式的整个音乐作品、作品卷、教本等的外部存储卡。因特网和/或电信接口能允许数字数据格式的下载。例如，该设备能下载数字数据格式的乐谱。这些下载可存储在外部存储卡或类似的介质中。输入乐谱数据的图像捕捉可通过对乐谱的数字摄影或光学扫描来支持。应用软件实现可包括演奏评价特征和回放辅助特征。

可提供“音乐减一”特征来使用户能够数字地捕捉用于一个以上乐器或一个以上声线(或其任意组合)的乐谱；选择使合成音频呈现省去乐谱中一指定的乐器或声线(“减一”)从而使用户可与合成音频呈现一起演奏和/或演唱。乐谱的同步视觉呈现可包括原始数据的任何或所有乐器和/或声乐声部。用户可选择省去合成音频呈现的一个以上的声部，诸如额外的乐器或声线，从而根据省去的要素个数得到“音乐减二”或“音乐减三”等。

根据以下对作为示例示出本发明的原理的优选实施例的说明，本发明的其它特征和优点应该是显而易见的。

附图简述

图1是根据本发明的一个实施例构造的手持式设备的示图。

图2是由根据本发明的“eMuse1”实施例构造的设备执行的处理的示图。

图3是由根据本发明的“eMuse2”实施例构造的设备执行的处理的示图。

图4是由根据本发明的“eMuseX”实施例构造的设备执行的处理的示图。

图5是根据本发明制造的用于回放根据本发明的合成音频演绎的显示屏幕的示图。

图6是由根据本发明构造的设备执行的用以提供“音乐听写”特征的处理的示图。

图7是根据本发明构造的具有音频-视觉呈现的乐谱捕捉和解释设备的一个实施例的框图。

具体说明