智能钢琴,是互联网时期的一个全新观点,以智能设备连接App,勾引学习者进行自我学习,降落了学习入门难度,与传统钢琴比较使钢琴学习更有意见意义性。
除了学习,学生在课后要进行大量的练习,智能钢琴完美的办理了练习过程中须要专业辅导的刚性需求。

目前市情上与钢琴传授教化有关的智能化产品有两类,第一类软件类钢琴智能化产品,结合乐音识别技能实现智能化,代表软件是AI音乐学院;第二类硬件类钢琴智能化产品,通过硬件对用户的弹奏数据进行采集,然后由相匹配的软件对数据进行剖析和呈现,代表软件是The one智能钢琴、钢琴家和Find钢琴等。

由于乐音识别技能局限性,软件类智能化产品尚不能运用在专业传授教化中,在实际钢琴传授教化中,普遍利用硬件类智能化产品。

一、硬件类智能钢琴的分类及先容

硬件类智能钢琴分为两类,一类是与智能设备连接的钢琴,另一类是将智能设备与钢琴奥妙领悟在一起的智能钢琴。
本文旨在剖析第一类智能钢琴系统,只对第二类智能钢琴做大略地先容。

一文理解智能钢琴系统介绍与分析

1. 与智能设备连接的钢琴

这类智能钢琴将数码钢琴与手机、平板电脑等设备进行连接,之后通过设备中的App进行练琴,形成人机互动,如下图。

目前在市场上可以见到的有The one智能钢琴App、海伦钢琴的钢琴家App以及罗兰钢琴的彩虹钢琴App等等。
用户可通过操作智能设备进行学习练琴、欣赏音乐、查找乐谱以及得到智能陪练等用户体验。

图 与智能设备连接的钢琴(来源:The one官网)

该类智能钢琴通过不雅观看App中的传授教化视频学习乐理知识和钢琴技能,传授教化视频由各大音乐院校的钢琴教授或钢琴讲师参与录制,例如The one的传授教化视频是由著名钢琴家郎朗和中心音乐学院的钢琴老师录制的,学生在家里就可以上大师课。

在陪练功能中,最常用的是跟灯模式,音符弹对时指示灯变为蓝色或绿色并提高至下一音符,弹错指示灯变为赤色并且还勾留在目前弹奏的音符上。
跟灯模式能够帮助学习者在练习过程中熟习键位,能够在无人陪同的情形下精确的练习。

图 跟灯系统(来源:The one官网)

游戏功能能够提高学习者对钢琴的学习兴趣,例如The one智能钢琴App中内置的类似节奏大师的音乐游戏,海伦钢琴的App中内置推塔、找茬儿等游戏,游戏模式以瀑布流的办法叫用户弹琴,利用户在娱乐的同时可以规范练琴的指法和熟习键位。

2. 与智能设备相结合的钢琴

第二类智能钢琴是将数码钢琴与传统钢琴合为一体的新型钢琴,如Find聪慧钢琴和京东方智能钢琴,在传统钢琴的根本上进行改造,取消了琴键上方的琴盖与谱架,变为高清大屏幕,可同时显示4页曲谱,如下图。

此类钢琴操作大略易上手,用户可通过敲击功能图标所对应的琴键来完成查找曲谱、不雅观看演奏或传授教化视频等操作。

图 与智能设备相结合的钢琴(来源:find钢琴官网)

功能上,通过App远程掌握节制学习进度、自动示范演奏功能、大数据剖析弹奏情形为学习者供应准确的辅导建议、云平台供应名师传授教化课程和欣赏视频等海量资源。

此类钢琴在传授教化上具有更大的特点:

自动演奏,曲谱库海量的传授教化资源和名曲资源由专业的钢琴教授录制,打破了西席自身弹奏水平的局限性,学生可以欣赏到大师级的演奏水平,提高音乐欣赏水平。
录制备课,该钢琴具备录制还原弹奏功能,上课前老师可以提前录制好须要演示的曲目,上课时根据传授教化过程逐一调取。
播放课件,可播放西席低廉甜头的课件,并由钢琴输出到电视屏幕,供应了音乐课信息化传授教化。
评价体系,通过云平台和大数据,对每个学生在音乐课上的行为予以记录,例如弹奏情形、课时统计、测验结果等,通过量化指标,为音乐传授教化供应全方位的评价标准。

二、软件设计办法

本节先容与第一类智能钢琴的软件设计办法。

1. 乐谱显示办法

智能钢琴的软件系统中首先要办理的便是乐谱的显示以及同步的播放。
要知足智能钢琴的这类需求,须要打算机音乐制版技能制作的数字乐谱,然后开拓对应的解析和重现技能。
数字乐谱的制作平台很多,例如Sibelius、Finale、Vexflow、Guido Engine等,他们都具有自己独特的功能。

在上述制作数字乐谱的工具中,最常用和适宜的乐谱通用交流格式便是Music XML,Music XML是一个开放的基于XML的音乐文件格式,用于进行音乐交流和音乐分发,Music XML旨在创建一个通用的普通西方音乐记谱格式。

Music XML有两类元素:一类用来标识音乐该当若何播放,这些元素常日可以被用来导出MIDI文件。
另一类用来标识音符在五线谱等上的位置,即谱面,这些元素可以导出XML格式的文件,Finale软件可以渲染为可读的谱面。

在数字乐谱的显示方面,可分为单层模式和双层模式。

1)单层模式

单层模式也便是通过专门的五线谱字体库或乐谱符号图片,将乐谱和播放标记等等安排在同一个层面显示出来,乐谱信息可从Music XML解析得到。

优点:可以在程序上对乐谱的显示做二次修正,例如音符改变颜色提高意见意义性或者乐谱重新排版等等。
缺陷:由于须要将乐谱上所有的信息全部解析并重新显示,程序设计难度较大,对付繁芜乐谱的显示效果很难达到预期。

2)双层模式

双层模式包括背景层和前置层两层来显示全体乐谱,背景层为原始的整张五线谱文件,图片或PDF;其他标记等都置于前置层。

优点:能够完备还原乐谱的所有标记和符号,能有效的减少对打算机性能的花费。
缺陷:无法对乐谱进行二次修正。

2. 乐谱播放

数字乐谱的一大优点便是可以被播放,播放同时还可以同步乐曲的伴奏或其他声部的音响,也可以调节播放的速率。
乐谱和伴奏的播放有两种办法,分别为MIDI的办法和音频播放的办法。

1)MIDI播放办法

MIDI文件体积小,可节省大量存储空间和数据流量,而且MIDI文件方便编辑,以是可在不降落音质的同时改变它的播放速率。

但由于MIDI文件本身是不发声的,须要准备软件音源合营,但是平台、操作系统、程序设计措辞不同,实现音源播放的方法和碰到的问题也都不同,以是导致开拓难度比较大。

2)音频播放办法

音频播放不须要供应音源,而且还可以采取真实乐器录音的办法,还原感和音质会比MIDI播放的办法好。
音频一样平常为wav,mp3等格式,以是占用的存储空间和数据流量会大大提高。
音频进行变速处理后音质会明显低落,有可能会有延时,不利于显示和播放的同步。

3. 纠错和评分机制

智能钢琴最智能的地方便是在弹奏过程中能够实现自动纠错和自动评分的功能。
智能钢琴在评判体系中,紧张的批驳点包括准确度,力度,节奏和市价。

1)准确度

准确度批驳可分为漏弹音、多弹音、错弹音。
流程为:

关于权值的确定目前并没有干系的论文或理论来支持,以是这也是音乐评判标准量化过程中的一个难点。

2)节奏

在节奏评判时,还存在两个问题。
第一,演奏的韶光点不可能完备准确,以是须要结合音符市价和当前速率打算出一定的韶光冗余度。
第二,节奏并不可以完备用打算机措辞量化为数据。

3)市价

每个音符实际演奏市价 = 按钮抬起韶光点 – 按钮按下韶光点。

与节奏评判类似,市价也只能市价只能用一个刻板的量化标准来衡量。

4)力度

在力度的评判上,无法用一个详细的数值来衡量对错或者好坏,以是只能忽略力度的评判。

综上,在全体评判中,对付演奏者音高准确度的批驳是较为合理的,占了全体评判的最大比重,节奏和市价占很小的比重,而力度基本可以不予考虑。

4. 谱面排版办法

曲谱在软件的排版办法也有两种,包括折行模式和非折行模式。

1)折行模式

采取靠近传统纸质五线谱的标准排版办法,当本行乐谱超过页面宽度后,会另起一行连续排版,如下图。

图 The one智能钢琴App截图

这种模式最大的优点便是最大限度的靠近纸质谱排版办法,有利于学习者养成精确的读谱习气。
但如果利用与智能设备连接的钢琴,其智能设备终端一样平常为平板或手机,屏幕的大小会小于纸质乐谱的大小,为了方便预先看到下一行曲谱,一个版面至少要显示两行曲谱,这就导致乐谱的大小会相对较小,在弹奏时识谱会比较吃力。

为了方便弹奏者翻谱方便,与智能设备连接的钢琴一样平常会采取自动滚动的办法,而与智能设备相结合的钢琴一样平常会增加两个踏板用来翻页,可以解放双手,尽情演奏。

2)非折行模式

将一首乐谱排版在一行中,播放乐谱的过程中,通过程序自动将乐谱向左边移动,从而达到终极显示目的,如下图。

由于这种模式在屏幕中只须要安排一行乐谱,它最大的优点曲直谱可以以较大的尺寸排版。
而该模式有很多的缺陷,首先须要将谱号、拍号、调号一贯保持在乐谱左边开始处,毁坏了乐谱的整体性,当乐谱中涌现反复暗号以及其他跳转暗号等情形时,乐谱须要及时利用程序跳转,弹奏者很难跟上乐谱的显示,其次该模式这种显示办法也不利于学习者养成精确的看谱习气。

5. 智能钢琴表现模式

智能钢琴在目前软件中常用的办理方案有两种表现模式,分别为跟谱模式和演奏模式。

1)跟谱模式

以五线谱谱面为根本,加上标示方法,标识方法常日为一条播放线或其他标识标识须要弹奏的音符,如下图,当弹奏者在弹奏对合时光点的音符并弹对的情形下,“标识”就会移动到下一组须要弹奏的音符上,在该模式下不受拍器的限定,弹奏缺点则保持原位置不动。

图 钢琴家App跟谱模式截图

跟谱模式也叫弹对提高模式或者步进模式,在该模式下,基本不用考虑韶光和节奏的问题,弹奏者有充足的的韶光来识谱,跟谱模式能帮助学习者熟习谱子,循规蹈矩。

2)演奏模式

演奏模式也可称为纠错模式或者跟曲模式,纠错和评分机制紧张运用在此模式中,该模式也是基于五线谱的谱面,节拍器开始播放后,演奏者须要在对合时光只管即便演奏精确的音符,软件实时将演奏结果显示在曲谱上,达到纠错和评分的目的。
该模式可以帮助学习者遵照每首曲子的演奏标准,不断磨炼弹奏水平。

图 钢琴家App跟曲模式截图

上图为该模式的评判截图,图中符头为绿色代表演奏者弹奏该音符时准确度、节奏及时值掌控很好;符头为黄色代表节奏和市价轻微差一点;符头为赤色代表多音或错音;符头没有变革代表漏音。

6. 钢琴游戏——瀑布流

瀑布流的屏幕上方是像瀑布一样着落的方块或长条,下方是键盘,弹奏者通过触摸与长条相对应的琴键或者在与其相连的钢琴上弹奏来完成弹奏,如下图。

图 The one智能钢琴App游戏模式

瀑布流模式的游戏,在弹奏过程中可以起到熟习键位的浸染,学习者可通过对琴键位置的影象完成一首大略的钢琴作品纵然钢琴水平再低的人也可以根据提示弹奏完全的曲子,提高了弹琴的乐趣与造诣感。
下图为学生利用五线谱和瀑布流的成绩比拟折线图。

图 五线谱和瀑布流的成绩比拟折线图

可以看到利用瀑布流弹奏后的成绩比利用五线谱弹奏的成绩要高,瀑布流功能可以使钢琴初学者将一首曲子从15.7%的精确率短韶光提升到76.6%,表明智能钢琴的涌现能够让从来不会弹钢琴的人学会弹奏钢琴,实现了钢琴的遍及教诲。

三、总结与思考在软件设计实现方法中,如何处理数字乐谱是最主要的一个组成部分,无论单层模式还是双层模式,都须要投入一定的研发精力和测试事情。
基于目前已有的技能,智能钢琴能办理的问题具有一定局限性,我们须要精确认识智能钢琴带来的影响,既不能忽略其浸染,也不能浮夸其浸染。
目前阶段,我们须要尊重钢琴传授教化的规律,让这种办法合营西席共同为提高传授教化效率做事。
技能与艺术的碰撞会出身新的模式和领域,这些新的模式作为传统钢琴传授教化的补充,从业者该当保持对这个领域的重视并投入精力去做创新的研究和实践,相信随着科技的发展,或许有一天能够完备替代钢琴西席来对学习者进行辅导。

本文由 @蒲智辉 原创发布于大家都是产品经理,未经作者容许,禁止转载。

题图来自Unsplash,基于CC0协议。