利用Arduino Uno Q,自制一个手风琴
背景
不久前,我开始用3D打印的管子制作一台布斯克风琴。为了配合它,我需要一个手风琴的簧片,于是从一件被丢弃的手风琴中拆下了一块,当时我以为它已经无法修复。这台布斯克风琴的进展还算顺利,但剩下的就是那台被丢弃的手风琴中真正能发声的部分。我决定用这些部件重新制作另一台布斯克风琴。完成后,我将拥有两种风格迥异的布斯克风琴:一种使用真正的烟道管发声,类似教堂管风琴;另一种则模仿手风琴的音色。后者就展示在本页面上。
说实话,我把另一个布斯克风琴项目暂时搁置了,因为我在制作簧片时遇到了一些问题,于是我决定为这个新项目专门制作传统的布斯克风琴簧片,以测试它们是否比之前那个项目的更好。
被丢弃的手风琴
我使用的那台手风琴是1950年代的霍纳(Hohner)品牌,它的框架有偏斜,导致钢琴键盘卡住得很严重。我想它可能根本无法修复,所以我欣然拆下了簧片,用于我的其他项目。现在,我只剩下手风琴的低音部分和高音部分,以及几乎完美发声的簧片。
低音部分仅由12个阀(或称托盘)组成,用于控制西方调式系统中12个音符的气流(可将其想象为钢琴键盘上的7个白键和5个黑键)。然而,低音部分却有成千上万的按键需要操作,通过这些按键可以组合出各种和弦。此外,这12个音符分布在不同的八度中,并可通过停止按钮来选择相应的八度。
高音部分则包含41个托盘,对应钢琴键盘上的每一个键。同时设有停止按钮系统,可在两个不同八度中选择音符,还额外增加了一排略微错调的簧片,以呈现出类似手风琴特有的法国颤音效果。
在这个项目中,我选择了高音部分。我只需在每个托盘上安装一个伺服电机,并构建一个风箱,以保持恒定的气压,从而让簧片发出声音。
手风琴的双簧片位于相反方向,搭配阀门,当风箱朝任意方向工作时,无论是吹气还是吸气,都能产生相同的音色。就像口琴一样。在我的项目中,只有一对簧片中的其中一个会发声。
1. 托盘打开了气流。
2. 钥匙直接固定在托盘上。
3. 这根红色的条子被弯折了,导致一些键卡住了。我狠狠地锯掉了它。
4. 九个按钮控制着哪些簧片会发声。我只为了外观而重复使用这些按钮,有些按钮的功能与手风琴上的相同,有些则控制其他部件。
来自跳蚤市场的柜子
我找到了这个抽屉:
没有测量,我就估算它能适合我的项目(结果并不合适)。我会把抽屉盒全部丢弃,只保留带有旋钮的深色面板。
在本地的一个回收物品Facebook群组里,我找到一个婴儿推车的底盘,后来用作了街头管风琴的轮子。一些弯折的平铁被改造成了简易的悬挂系统。
鼓膜
我制作了一个双作用的膜片风箱,由三个膜片组成:其中两个负责空气泵送,第三个则作为加压空气储罐。这种结构在演奏者用的管风琴中非常常见。
底部的膜片A和B负责泵送空气。由于扁平铁条F(红色轮廓)的存在,B的顶部和A的底部保持固定距离。通过拨动机构带动轴E上下移动,使A和B将空气推入顶部的膜片C,而C则起到储气的作用。A将空气经B后方的柔性管道推入C,而B则有更直的通道通往C。所有膜片都需要皮革瓣阀来防止空气倒流。C顶部的弹簧或重物可产生所需的压力,使手风琴簧片发声。
我原本以为装有重物的弹匣能提供更稳定的气压,但事实并非如此!由于拨动动作,整个膜片系统会剧烈晃动,重物也会随之摇晃。当达到最高点时,重物的惯性导致气压下降(视频中的铅块和圆形铁块就是例子)。因此后来我将重物更换为弹簧。
电子部分
我构建了一个电子系统,将控制所有功能。该系统包括以下部分:
- 一个Arduino Uno Q
- 一个6V铅酸电池
- 四个舵机电机
- 一个用于为Arduino提供5V电源的降压转换器
- 三个PCA9685舵机控制器板
- 一个按键面板,其中我重新使用了手风琴上的停止按钮
Arduino Uno Q
Q模块非常适合这个项目。其微控制器(MCU)负责仪器的物理操作,包括播放正确的音符以及通过控制按钮响应用户输入。Q的微处理器(MPU)则负责管理所有曲目,并作为接口与互联网连接,接收观众的输入。此外,MPU还能让乐器播放由AI生成的音乐。
6V电压不足以满足Arduino的 barrel 连接器需求,而且对5V来说也略显不足。通常情况下,稳压器需要超过1V的电压。但目前它仍能正常工作。在无负载时,可调节的转换器(LM2596)输出测量值为5.0V。最大的负载出现在舵机运行时,它们直接从电池电压供电(新充电时电压可达6.3V)。
用户界面,硬件部分
我有这9个来自手风琴的按钮,安装在柜子顶部。其中7个是普通按键,2个是双状态按钮开关。以下是电路说明:
引脚1到8是Arduino Uno Q上的GPIO引脚,它们通过内部上拉电阻初始化。因此,为了使GPIO能识别操作,线路必须连接到GND。按键1到7就是这些按钮。按下按钮时,线路会与SW1相连,而SW1的状态将决定GPIO是否能识别该操作。这样一来,我就可以用一个开关来控制全部7个按键的开启或关闭。另一个开关(SW2)拥有独立的GPIO(引脚8),并绕过SW1。
我设计这个结构并没有特别明确的理由,只是觉得按键被误触的可能性太大。不过,开关按钮的动作持续时间更长,不容易被意外触发。
目前,我对这些按键的具体功能以及SW2的作用还不是很清楚。很可能,SW2会决定音乐是从内部存储器播放还是从网络站点播放。
用户界面,软件部分
很快我就发现,在网页上创建界面变得更加方便了。这使得选择曲目变得容易,同时也提供了调节伺服角度的选项。因此,目前我暂时将硬件按钮设为关闭状态。
Arduino App Lab
四种语言
要充分发挥Uno Q的功能,必须掌握四种编程语言:HTML用于在网页上构建用户界面,JavaScript用于使页面与MPU实现交互和协作,Python用于编写MPU脚本,最后是C/C++用于MCU。
仅MCU的简单代码示例(Arduino IDE)
我曾用旧版Arduino IDE编写了一个简单的C/C++程序来测试Busker风琴,该程序适用于Uno Q。但Uno Q的MCU部分无法处理过大的代码。此外,若要在程序中硬编码音乐数据,内存空间仅能容纳5到6首曲目。
main.ino
tunes.h
这里我声明了结构体和曲目数据,如果只使用MCU时使用。(在最终版本中包含网页、MPU和MCU的情况下,曲目存储在MPU端,播放时逐个从MPU上传至MCU。)
音乐数据包含带有时间戳的音符事件以及音符数据。时间戳以录音时机器时间(以毫秒为单位)开始。音符数据是待播放音符的MIDI编号。对于音符关闭事件,第8位被设置为1。
我可能会在未来更改数据结构。目前,时间戳需要使用uint32_t类型。我可能将其改为表示上一个事件之后的毫秒数,这样在演奏过程中调整速度会更方便。此时仅需uint16_t即可。无论是发声的音符、和弦还是休止符,持续时间都不超过65秒。
人类创作音乐的首次录制
《欢乐转盘·皮克福德》
某些地方漏气导致声音不稳定;某些调色板泄漏则造成持续不断的读取声。下一次尝试:
《僵硬的手腕》
我调整了部分舵机的角度,所有声音都变得更好了。但旋律被非常响亮的节奏和和弦伴奏所掩盖。这需要我在乐谱本身进行修改,缩短伴奏部分的音符长度,本质上就是添加断奏点或调整音符时值。
Arduino Uno Q的全部潜力
...目前还无法连接,但我已经走了很远的路。Uno Q 装载了大约 35 首曲目。这些曲目保存在 MPU 端(Linux)上,就像在电脑上保存小文本文件一样。
一个网页可以让我创建播放列表。另一个页面则是我用来调整伺服角度的工具。
使用 Arduino App Lab
我注意到的第一个问题是,每次想要编写代码时,必须将 Uno Q 连接到我的电脑。这是因为尽管 App Lab 安装在我的电脑上,但整个项目实际上保存在 Uno Q 上,而不是我的电脑里。然而,Hackordion 是一台复杂的设备,我更希望一直把 Uno Q 安装在 Hackordion 上。Hackordion 位于离我家 2 公里的工坊里,但我希望在家编写代码。为此,我需要拆下 Uno Q 带回家。虽然不连接电路板的情况下,仍然可以使用旧版 Arduino IDE 编写代码,但很多时候,只要灵感一来,我就直接用笔记本电脑编写代码,而不必连接任何硬件。
我在手机上设置了热点,让 Uno Q 可以连接到它。这样,我就可以在 MPU 端(Linux)下载和安装相关程序。我将我的电脑设置为通过手机热点作为互联网网关。
在我的工作应用程序中,MPU会创建一个网页(index.html),即主控制页面。我可以通过手机(使用IP地址加上端口号7000作为URL)或笔记本电脑(使用相同的IP地址或127.0.0.1,后者在从App Lab启动应用时会自动打开)来查看该页面。
应用程序工作流程说明
当我打开开关后,Uno Q会执行初始化程序。MCU会初始化所有必要的引脚、PCA9685板以及连接到MPU的桥接器。它会等待桥接器响应,以确认MPU已准备就绪。
MPU 会代表桥接器初始化系统。它设置一个网络服务器,用于存放播放列表的控制页面以及调整舵机角度的控制页面。
当 MPU 和 MCU 都准备就绪后,MCU 会请求各个舵机的角度。
然后 MCU 会请求下一段曲目。如果播放列表为空,MPU 将发送一个约 500 毫秒长的占位曲目。MCU 播放该曲目后,再请求下一段曲目。
区分真实曲目和占位曲目的唯一方式是上一段曲目加载的时间间隔。我需要这种区别来控制程序的执行流程。现在,当播放占位曲目时(等待真实曲目),Uno Q 会显示黄色指示灯;而当播放真实曲目时,则显示绿色指示灯。
在控制页面选择曲目后,该曲目将被设为下一段要播放的曲目。当 MCU 请求下一段曲目时,整个播放列表会发生移动:下一段中的第一首曲目将成为当前播放曲目,其数据从文本文件中读取并发送给 MCU,由 MCU 开始播放。
第一首和第二首曲目可以从队列中删除。此操作会更新剩余曲目列表,使隐藏的曲目重新可见。当前无法直接从页面中断正在播放的音调。但目前可以通过进入控制角度的页面,然后从那里播放单个音符来中断播放。稍后我将实现硬件按钮,用于中断某个音调、跳转到音调开头或简单地暂停音调。
电子系统对风箱和声音一无所知。
当音调在播放时,伺服电机会进行动作。如果我不转动手柄,除了伺服电机和托盘的声音外,就听不到任何声响。一旦开始转动,音乐就会响起。由于电子系统没有监测气压或转动速度,音乐便直接开始播放。我需要添加一个传感器,当风箱显示正确动作时,让音乐开始。
进一步开发
手风琴的簧片部分有三层簧片:一个8英寸高音区和一个4英寸低音区,目前这两个区域正在发声。第三个8英寸高音区略微调偏,使声音带有法式韵味。我计划加入伺服电机,用于拉起和推动这些簧片开关。这些簧片变化可以编程进音乐中,也可以通过按下硬件按钮触发。这将使音乐听起来更加丰富多变,同时扩展其音域范围。可以想想巴赫的D小调托卡塔与赋格或斯科特·乔普林的《娱乐家》开头部分,它们都以三个不同八度重复同一旋律作为开端。目前我的哈克里顿(Hackordion)演奏起来还难以胜任,但如果在曲子中间从4'换到8',就有可能实现。
AI部分
我从一开始就打算将人工智能融入这个项目,这也是比赛主题的一部分。我构建了一个神经网络,用于分析我用一种风格创作的乐曲。目的是让网络为哈克里顿创作出旋律。目前它生成的音乐非常有趣,但我必须设定大量限制,才能让它接近我期望的音效。因此,现在听起来不错,不是因为我的神经网络特别出色,而是因为我对它的最疯狂想法进行了严格控制。我为弹奏者管风琴创作的曲子,很大程度上借鉴了20世纪20至30年代的美国爵士乐和拉格泰姆风格,遵循着较为严格的结构和和声发展规律。我可能会强行将相同的结构套入曲调中——重复16小节的段落,添加第二部分,重复第一部分,转到上方四个音阶的新调式等等。这些内容对神经网络来说已经太过复杂,难以学习。到目前为止,它所学到的仅仅是主旋律部分的旋律形态,以及低音部分的一些节奏模式。等我真正拥有能生成的内容时,我会进一步说明这一点,而这些内容已不仅仅是受我人为限制的结果。
AI如何帮助了我
我懂HTML,也懂C/C++,但既不懂JavaScript,也不懂Python。Copilot帮我解决了Python和JavaScript的问题。当你掌握一种编程语言后,借助AI就能轻松写出其他任何语言的代码。当我向Copilot请求协助时,它能完全理解JavaScript和Python的每一行代码,让我可以轻松地确认或否定每一个内容。
此外,我对构建神经网络一无所知,尽管我理解神经网络的基本原理。Copilot帮助我在Python中搭建了神经网络,我使用的是Visual Studio Code进行开发。我和Copilot就音乐本身的结构进行了长时间的讨论:音乐是用什么调式编写的?应该采用哪种模型来建模?目前的想法是,神经网络会学习在钢琴谱中识别“右手”和“左手”的音符事件——比如右手应以哪个音开始、音值是多少;当右手出现某个音符时,左手最可能从哪个音开始;以及生成的音符是否同时伴随着其他和弦音。在给定时间点,当右手和左手的上一个事件(音符、和弦、时值、持续时间)已知时,下一个事件在右手侧是什么?它有多大可能是这首曲子的最后一个事件?请注意下一个事件在单小节中的位置,以及在四小节序列中的位置。
我还使用AI为我创作的一些乐谱制作了封面图片。整个项目期间,我一直都在创作音乐,这一直保持了我的动力。由于第一个风琴演奏者项目使用的是3D打印的管体,因此我将乐谱设置为用录音机声音演奏,这种声音非常接近我的3D打印管体的声音。
11月3日更新
我的音乐数据以以下格式保存:
每首曲子保存在单独的文本文件中,每一行代表一个音符事件。第一个值是毫秒级的时间戳,第二个值是根据MIDI标准的音符编号。所有小于128的数值表示音符开启事件;对于音符关闭事件,第8位被设置为1。因此,在列表开头,第53号音符开始播放。在166毫秒处,该音符结束(181 = 53 + 128)。
我所有的音乐都使用Musescore进行编写。我曾想过将音乐导出为MIDI文件,让Hackordion播放这些MIDI文件,但出于几个原因放弃了这个想法。取而代之的是,我让Arduino Leonardo在播放时读取来自Musescore的MIDI数据,然后记录下时间戳和音符事件。这种方法运行正常,但耗时较长,每次想要将音乐导出为我的数据格式时都需要重新播放整首曲子。于是,我向AI寻求帮助。
AI告诉我了Mido,这是一个用于处理MIDI文件的Python库。它给了我一个脚本,可以列出MIDI文件中所有的音符事件,并显示每个事件从文件开始起的毫秒时间。
通常情况下,MIDI文件包含多个通道:一个用于左手,另一个用于右手,或者每个乐器对应一个通道。一首曲子的所有音符事件会按顺序依次出现在不同通道中。我喜欢根据编曲情况用两到三谱表来写曲子,这就意味着需要有两到三个通道。因此,在对MIDI文件中的所有事件进行排序并开始在演奏者管风琴上播放之前,我必须先读取全部事件。当初我设计数据格式时(那已经是多年前,当时我制作了第一个自动化仪器),Arduino的内存不够存储这些信息。因此,我最终采用了这种非常紧凑的数据格式。我也重用了之前为创作音乐所使用的部分逻辑和数据文件,所以至今仍沿用相同的格式。
Mido 库能很好地读取 MIDI 文件,会识别开头标注的节拍以及乐曲中间的节奏变化。以下是 Python 脚本,我在 Visual Studio Code 中运行它。我尽量用英语与 AI 对话,但它坚持用瑞典语回答,因此对其中的瑞典语评论表示歉意。
你需要先安装 Mido 库。在 Visual Studio Code 中运行该 Python 脚本后,会弹出一个文件选择窗口,你可以从中选择一个 MIDI 文件。随后会弹出保存结果的窗口,输出的是一份以我格式编码的音乐文本文件。最后一行包含时间戳 9999999,标志着乐曲的结束。
本文编译自hackster.io





