专心“搞事业”的成长型甜美系歌手！讯飞音乐首个AI虚拟歌手亮相

文章图片
智东西（公众号：zhidxcom）
作者|程茜
编辑|漠影
你想粉一个声音独一无二的爱豆吗？你脑海里冒出来的第一个甜美声音是什么样？现在，这一切都有了答案。
今年开学季，上海音乐学院出现了一位粉头发、大眼睛、头顶一根呆毛的元气少女偶像歌手。这正是科大讯飞旗下讯飞音乐的首位AI虚拟歌手Luya（露芽），刚出道就已经拥有两首单曲——《北极星与流行雨》和《迷雾之中的微光》，其中，《迷雾之中的微光》在QQ音乐热歌榜排名17 。

文章图片
从洛天依、初音未来到华智冰、柳叶熙，越来越多的虚拟偶像已经“出道” ，唱歌、跳舞都不在话下。而Luya与她们最大的不同则是“成长型” ，她拥有甜美可爱的外形、声音，还能够在技术、能力不断提升的同时不断成长。
值得一提的是， Luya的声音并不是真人发出，而是由AI创造，科大讯飞AI研究院副院长、讯飞音乐首席科学家江源说：“依托科大讯飞研究院在语音和人工智能领域的技术储备，使得Luya的形象逐渐饱满。 ”
1999年成立的科大讯飞，已经在语音及AI技术领域下积淀了20余年， 2019年官宣进入音乐赛道。科大讯飞高级副总裁、讯飞研究院院长胡国平曾在讯飞音乐发布会上说：“语音技术融入音乐，势必对音乐行业有深刻影响，甚至帮助整个行业实现质的飞跃。 ”
智东西与科大讯飞AI研究院副院长、讯飞音乐首席科学家江源进行了深入交流，从Luya的“出道故事” ，去揭开AI虚拟歌手背后的黑科技及AI+音乐未来的融合路径。
一、讯飞首个AI虚拟歌手，成长型、音色“唯一”打造强标识2019年7月讯飞音乐成立，致力于专业音乐制作、多元化宣发、艺人经纪及AI音乐创新产品研究。截至2022年9月，讯飞音乐出品歌曲总播放量突破570亿次，播放过亿歌曲100余首，各音乐平台上榜歌曲数百首。作为讯飞音乐的首位AI虚拟歌手， Luya印证了讯飞音乐在AI+音乐领域探索的更进一步。
作为一名歌手，其亮点离不开优秀的作品和好听的音色，这放在AI虚拟歌手上同样如此。
不过，为了打造虚拟偶像的独特性，很多玩家则选择了完全不同的路径，一种是虚拟偶像的动作、声音、思考都来自于幕后穿戴动作捕捉设备的真人，也就是“中之人”；一种则是用AI创造音色，为虚拟偶像打造独一无二的声音。
选择后一种方式的讯飞音乐，其首个AI虚拟歌手Luya的音色也成为了其亮点。
那么具体而言，打造一个AI虚拟歌手需要几步？确定人设、AI创造音色、打造外形、出道。对于Luya来说，其中最重要的就是AI创造音色，江源告诉智东西，这一套流程下来，用AI创造Luya的音色他们就花了大量时间磨合调试。
最初， Luya的设定就是性格爽朗、古灵精怪的天才少女，这之后，她的外形和音色也都延续了这一特点。在Luya发布单曲下方的评论区中，可以看到网友讨论的焦点都在其甜美、元气满满的声音上。

文章图片
Luya的音色并不是来源于某一个具体的真人，而是讯飞音乐基于AI不断调节、优化声音属性的同时去创造一个独一无二的声音。
江源告诉智东西，为了找到符合Luya人设的声音，他们构建了一个拥有海量音色的声音库，通过多维的手段，利用这些音色建立一个音色空间模型，再将上百万的声音样本进行拆解、调节，这个调节过程可能包括声音的甜美程度、性别变化、年轻程度等。
讯飞音乐在对这些细节不断组合调整的过程中，使得Luya的声音形象逐渐饱满、成熟。
除此以外，不同于一个成熟的歌手， Luya的定位更像一个不断成长的大学生，同时也是在音乐世界徜徉探索的“精灵” 。
提及AI虚拟歌手，你脑海中的雏形可能是更早期的洛天依、初音未来，以及最近引起热议的乐华娱乐虚拟偶像团体A-SOUL ，但Luya与这些虚拟偶像最大的不同还在于， “她是成长型歌手” 。
江源说：“和洛天依、初音未来的不同之处在于， Luya并没有被在最开始就定义成完美，她更像我们的女儿，随着技术和能力的进步，而不断成长。 ”
而这些特点也凸显出了AI虚拟歌手Luya的强标识性特征。那么，在独一无二的Luya背后，还有哪些黑科技？