音乐创作平台SMS将手机变为新型乐器


音乐创作平台SMS将手机变为新型乐器

文章插图
文 | 卢旸
日新月异的交互式技术不断融入,影响着音乐创作的发展 。“如今的智能手机拥有强大的运算能力,就像一台微型计算机,能够完成复杂的音乐制作,成为移动的音乐工作室 。”音乐科技工程师翁若伦致力于开发基于手机等智能移动终端的音频处理类应用 。
2017年,他着手研发音乐创作平台Smart Motion System(简称SMS),将手机变身为新型乐器,并在作曲家、表演者的反馈中不断维护更新,改进设计 。近日,舞蹈艺术家秦然运用SMS平台在上海长江剧场演出舞蹈《底色——为舞者和Smart Motion System新乐器而作》,给观众带来不一样的观感 。
舞蹈中演奏音乐
音乐创作平台SMS将手机变为新型乐器

文章插图
舞台上,随着一声空灵的敲击音,秦然手持智能手机在充满未来感的电子音乐中起舞,演出舞蹈《底色》 。秦然曾任美国芝加哥EF舞团特聘导师,获美国最强8位街舞舞者荣誉,以其独特自由的舞蹈风格,从容驾驭实验性音乐、电子音乐等多种类型音乐 。但是舞蹈《底色》与往常的舞蹈表演都不相同 。“演出《底色》时,我不仅是舞者也是音乐的主导者,通过手势控制音乐 。音乐反过来也带领舞蹈走势,能量增减 。舞蹈与音乐的相互交融是前所未有的体验,让演出更加丰富 。”秦然在多年舞蹈文化研究与教学中一直探索舞蹈与任何艺术形式的碰撞,演出《底色》时,他以手中搭载SMS平台的智能手机为乐器,在舞蹈中演奏音乐 。
SMS平台通过处理手机的加速度传感器、陀螺仪、旋转矩阵等传感器数据,形成近30项可调用参数列表,用于映射声音效果 。演出前,表演者需要经过适应与摸索,熟悉SMS平台的不同音色,掌握演奏技法,从而构思音乐,编排舞蹈,形成相对固定的框架 。“我不仅控制身体还要控制乐器,熟练掌握全新乐器的演奏,对我来说是不小的挑战 。演出的最佳状态是舞者与手中的乐器融为一体 。作为乐器,手机的便捷性、移动性是传统乐器无法比拟的 。”秦然的每个动作都与声音紧密联系 。翁若伦表示,应用SMS平台演出,要求表演者全神贯注地聆听与思考,舞者不仅是作品的演绎者,更是作品的创作者 。
用SMS平台创作音乐作品虽有固定框架,但是每次表演都不尽相同,很难重复与模仿 。“表演者仿佛置身迷宫,在音乐中游走,最后找到自己的出口 。”翁若伦将SMS平台的操作界面设计得非常简洁,只提供一个触摸键,避免表演者在操作界面上花费过多精力 。此外,他特别设计了3D打印外壳嵌套在手机上,组成一个较为完整的乐器主体 。3D打印外壳兼顾外观设计感和扩音、保护等实用功能,目前拥有普通版与专业版两个版本 。普通版利用手机外置扬声器,现场演奏直接扩声;专业版利用手机耳机端口,输出完整的立体声,突破手机扬声器局限 。
新乐器不是复刻传统
音乐创作平台SMS将手机变为新型乐器

文章插图
翁若伦
“随着功能增强,手机已经逐渐侵入到日常生活的各个角落 。我们对手机的依赖也越来越大 。这引起我对手机应用开发的关注 。”近年来,翁若伦联合国内外研究机构及工程师,研发一系列平台框架,如基于智能手机应用程序演绎的音乐会项目SmartFaust,基于灯光的动作捕捉交互式声音创作平台Light Wall System 。SMS平台延续他一贯的开发思路,采用Faust音频信号语言,进行声音设计部分的编写,特别设计faust2smarphone命令,适配基于手机编译环境下的音频语言支持 。自推出以来,SMS平台持续在实际作品应用中改进 。2018年3月,法国工程师Christophe LEBRETON、打击乐表演艺术家Jean GEOFFROY、作曲家Vincent CARINOLA基于SMS平台共同打造的作品《Virtual Rhizome——为独奏表演者和两部手机而作》完成首演,之后于世界各地音乐节巡演 。SMS平台不断累积作曲家、演奏者的反馈和实践经验,探索新的尝试 。
音乐创作平台SMS将手机变为新型乐器

文章插图
《Virtual Rhizome——为独奏表演者和两部手机而作》首演
SMS平台不局限于固定的音色,而是根据作曲家、表演者的具体创作需求进行语言编程 。“我们已经有钢琴、提琴了,不需要再去研发能够发出钢琴、提琴声音的新乐器 。”翁若伦认为,新乐器应有新的形态、新的声音、新的演奏技法,而不是模拟、复刻已有的传统乐器 。“以前,肢体动作只能用眼睛看到,现在,肢体动作还能够用耳朵听到,这是非常有趣的体验 。”翁若伦计划将SMS平台普通版上传到智能手机应用商店,提供下载服务,让更多人体验到将舞姿转化为音乐的奇妙感受 。