[发明专利]乐谱信息生成装置及其方法、乐音生成控制装置及其方法

说明书

关联申请的引用：本申请基于2011年3月7日提交的日本在先特许申请2011-48524和2011-48525、2011年4月5日提交的2011-83430、2011年7月8日提交的2011-151390并要求它们的优先权，其全部内容通过引用包括于此。

技术领域

本发明涉及乐谱信息生成装置、乐音生成控制装置、乐谱信息生成方法及乐音生成控制方法，使用将与显示的乐谱有关的乐谱数据和与基于该乐谱的乐曲的演奏有关的音乐数据建立了关联的乐谱信息，控制基于音乐数据的乐曲的再现。

背景技术

提出有如下的技术：在电子乐器和音乐再现装置中，通过在显示部的画面上显示乐谱的同时发出与在乐谱上显示的音符对应的乐音，来实现乐曲的演奏。

例如，在日本专利第3077269号公报中，提出有如下装置：比较对键盘进行按键而得到的演奏数据和乐谱数据，检索演奏者正在演奏的乐谱的位置，并显示乐谱中的被检索到的位置。

此外，在日本特开平10-240117号公报中，使用了MIDI数据文件、保存有表示分小节的乐谱的乐谱图像数据的乐谱图像数据文件、以及包含有有针对各小节的控制代码的练习支援数据。控制代码包括用于对乐谱上的所属页码、MIDI(乐器数字接口)数据的对应部分、对应的乐谱图像数据进行指定的代码。专利文献2所示的装置构成为，基于控制代码，识别成为练习对象的小节的所属页码，并显示与属于该页码的小节对应的乐谱。

实际的乐谱通常包含有有各种反复记号，同一小节被多次演奏。另一方面，用于演奏乐曲的音乐数据(例如保存有MIDI数据的SMF(Standard Midi File：标准MIDI文件))由与发音开始对应的音符开启事件(note-on events)、与发音结束(消音)对应的音符关闭事件(note-off events)、以及事件间的时间信息构成，所以未考虑反复。因此，乐谱上的音符和音乐数据上的事件未必唯一地对应，所以在指定了乐谱上的规定位置(例如小节)的情况下，有时无法进行合适的乐曲的演奏。

此外，该反复记号的形状与作为构成乐谱的其他要素的五线、小节线相比较为复杂，所以从图像数据识别该反复记号的精度是较低的。因此，作为乐谱的构成要素，在乐谱的图像数据上分别确定某多个反复记号及其位置多数比较困难。

发明内容

本发明的目的在于生成将乐谱数据和对基于乐谱的乐曲进行演奏的音乐数据适当地建立对应的乐谱信息。

本发明的目的通过以下乐谱信息生成装置来实现，该乐谱信息生成装置，具备：存储单元，保存有音乐数据和图像数据，该音乐数据包括表示构成乐曲的各乐音的音高的音高信息和表示发音定时的时间信息，该图像数据对所述乐曲的乐谱进行表示；小节确定单元，基于作为所述乐谱的构成要素的连谱线、五线及小节线的位置，确定各小节的区域及小节号码；单位音乐数据生成单元，基于所述音乐数据中的时间信息，将所述音乐数据分割，生成多个以每小节为单位的包含有音高信息及时间信息的单位音乐数据；反复记号位置确定单元，基于作为所述乐谱的构成要素的反复记号的种类及其位置、以及所述连谱线、五线及小节线的位置，确定反复记号所处的小节；单位音乐数据取得单元，从所述多个的单位音乐数据取得没有重复的最终的单位音乐数据，并且，将该最终的单位音乐数据和所述小节号码建立对应地保存于所述存储单元；以及乐谱要素数据生成单元，生成乐谱要素数据并保存于所述存储单元，该乐谱要素数据包含有所述乐谱中的连谱线、五线及小节线所存在的位置、该各小节的区域及小节号码、以及所述反复记号的种类及位置。

附图说明

图1是表示本发明的实施方式的乐音再现系统的结构的框图。

图2是表示本实施方式的终端装置的结构的框图。

图3是表示本实施方式的终端装置的外观的大致正视图。

图4是表示本实施方式的中心装置10的功能的框图。

图5是表示本实施方式的乐谱要素提取部所执行的处理(直线等检测处理)的例子的流程图。

图6是表示基于乐谱数据的乐谱的例子的图。

图7是详细表示步骤502(连谱线的检测处理)的处理例的流程图。

图8是详细表示步骤503(五线的检测处理)的处理例的流程图。

图9是表示在被二值化的乐谱中针对各个y坐标的像素数的图表。

图10是详细表示步骤504(小节线的检测处理)的处理例的流程图。

图11是表示本实施方式的反复记号的检测处理的例子的流程图。