研究人员开发实时歌词生成技术来激发歌曲创作灵感
音乐艺术家可以利用滑铁卢研究人员开发的技术为他们的歌曲创作找到灵感和新的创作方向。LyricJam 是一个实时系统,它使用人工智能 (AI) 为现场器乐生成歌词,由大学自然语言处理实验室的成员创建。
该实验室由滑铁卢工程计算机科学交叉任命的教授 Olga Vechtomova 领导,多年来一直在研究人工智能的创造性应用。
该实验室的初步工作导致创建了一个系统,该系统可以学习艺术家的音乐表达并生成他们风格的歌词。
最近,Vechtomova 与滑铁卢的研究生 Gaurav Sahu 和 Dhruv Kumar 一起开发了一种技术,该技术依赖于音乐的各个方面,如和弦进行、节奏和乐器,以合成反映现场音乐表达的情绪和情感的歌词。
当音乐家或乐队演奏器乐时,系统会不断接收原始音频片段,神经网络处理这些片段以生成新的歌词。然后艺术家们可以使用这些台词来创作他们自己的歌词。
“该系统的目的不是为艺术家写一首歌,”Vechtomova 解释说。“相反,我们希望帮助艺术家实现自己的创造力。该系统用新的隐喻和表达方式生成诗意的线条,有可能将艺术家引导到他们以前从未探索过的创作方向。”
研究人员设计的神经网络学习与每个音频剪辑中捕获的音乐的不同方面相关联的抒情主题、词和风格装置。
例如,研究人员观察到,为环境音乐生成的歌词与为欢快音乐生成的歌词大不相同。
研究团队进行了一项用户研究,邀请音乐家在使用该系统的同时演奏现场乐器。
“一个意想不到的发现是,参与者感到被生成的台词鼓励即兴创作,”Vechtomova 说。“例如,这些台词激发了艺术家们以稍微不同的方式构建和弦,并将他们的即兴创作朝着比原先预期的新方向发展。一些音乐家还使用这些台词来检查他们的即兴创作是否具有预期的情感效果。”
该研究的另一项发现强调了体验的共同创造方面。参与者评论说,他们认为该系统是一个不加批判的干扰合作伙伴,即使他们没有积极尝试写歌词,他们也感到鼓励演奏他们的乐器。
自 LyricJam 今年 6 月上线以来,全球已有超过 1,500 名用户试用过。
该团队的研究将于今年 9 月在国际计算创造力会议上发表,并已在 arXiv 上预先发布。