上海音乐学院最近迎来了一名特殊的新生——AI虚拟歌手Luya,在官方公众号上,上音对她的入学表示欢迎。这位形象靓丽、嗓音柔美中透着坚定的女生,将进入“音乐工程系·讯飞音乐联合研发中心”,参与“AI+音乐”研发和学习,探索人工智能赋能音乐的更多可能。
Luya是科大讯飞开发的一个AI虚拟人,她的音色由AI创造,研发团队通过解构人声音色特点,结合人设形象及专家经验打造出“Luya专属音色”。对于她的音色和唱功,上海音乐学院一名学生评价:“低音温柔当中带着一点磁性,高音既亮又甜,属于实力派歌手。”
这名“实力派歌手”正在通过AI大数据学习,不断成长。科大讯飞研究院副院长、讯飞音乐首席科学家江源介绍,很多来自上音的实习生运用专业知识,为公司做了音乐数据标注工作,帮助他们的师妹尽快成长。在抖音等网络平台上,Luya的账号“LUYA不吃卤鸭”已发布《北极星与流星雨》等歌曲作品,吸引了不少粉丝。
为迎接即将开始的大学生涯,Luya发布了她的最新个人单曲《迷雾之中的微光》。“我等待迷雾之中落下的那道微光,想踏过荆棘,翻越过一层一层围墙……”在优美的歌声中,她表达了音乐人的信念:音乐就像迷雾中的光,牵引着我们不断向上,探索自我、向外突破,相信自己终将冲破重重阻碍,实现梦想。
“听了这首歌,我被感动到了。”一名上音学生说,“旋律很好听,有种温柔又坚定的感觉,喜欢这种有力量的音乐!”
上音音乐工程系副教授陈世哲介绍,Luya就读的专业是音乐科技与艺术,除了日常学习,她还将作为“音乐工程系·讯飞音乐联合研发中心”的新成员,开展一系列人工智能与音乐融合的探索,投身AI辅助创作领域的研究。
去年9月,讯飞音乐与上海音乐学院音乐工程系达成战略合作,建立了“音乐工程系·讯飞音乐联合研发中心”。依托上海音乐学院在音乐领域的理论研究和人才培养优势,以及科大讯飞在人工智能领域的技术积累和产学研优势,中心开始探索“AI+音乐”技术及其应用。在上海音乐学院音乐工程系主任、作曲家于阳等专家的指导下,中心已在AI虚拟人、音乐数字化、AI辅助创作、流行音乐分析等领域开展了很多研究。
今年5月,讯飞音乐参与了上海音乐学院2022届毕业生春季云端招聘会。江源表示,很多上音学子有深厚的音乐理论知识,对音乐与人工智能的结合有很强的好奇心和探索精神,所以欢迎上音毕业生加入科大讯飞,从事AI音乐方向研究,通过艺术与技术融合创造无限可能。
Luya的入学,将深化这一校企合作。这名AI虚拟歌手将借助人工智能技术,从词曲创作和编曲的角度,参与不同类型音乐风格的融合实验,还将尝试利用技术手段匹配风格相近的歌曲、拆解和弦与旋律走向、融合曲目从而探索创新玩法。这些探索有望让Luya打造更高质量的音乐作品,开发出AI虚拟歌手的无穷潜力。