研究人员开发了类似于辅佐作曲家的人工智能技术,可以帮助创作音乐。
如果音乐创作者有一个人可以一起头脑风暴,在他们遇到瓶颈时提供帮助,并共同探索不同的音乐方向,那该多好啊?KAIST和卡内基梅隆大学(CMU)的研究人员开发了一种类似于辅佐作曲家的人工智能技术,可以帮助创作音乐。
KAIST(校长李光亨)通过电气工程学院李成柱教授领导的研究团队,与卡内基梅隆大学合作,开发了一种基于人工智能的音乐创作支持系统Amuse。该研究在ACM人机交互领域的顶级会议——计算机系统中的人因会议(CHI)上展示,该会议于4月26日至5月1日在日本横滨举行。该论文获得了最佳论文奖,仅授予所有提交论文的前1%。
李成柱教授的研究团队开发的系统Amuse,是一个基于人工智能的系统,能够将文本、图像和音频等各种形式的灵感转化为和声结构(和弦进行),以支持作曲。
例如,如果用户输入“温暖夏日海滩的回忆”这样的短语、图像或音频片段,Amuse会自动生成并建议与灵感相匹配的和弦进行。
与现有的生成性人工智能不同,Amuse的独特之处在于它尊重用户的创作流程,并通过一种互动方式自然引导创意探索,允许灵活集成和修改AI的建议。
Amuse系统的核心技术是一种将两种方法结合的生成方法:一个大型语言模型根据用户的提示和灵感创建音乐代码,而另一个基于真实音乐数据训练的人工智能模型则使用拒绝采样过滤掉尴尬或不自然的结果。
研究团队针对实际音乐家进行了一项用户研究,评估了Amuse作为创造性伴侣或协同创造性人工智能(Co-Creative AI)的高潜力,这一概念意味着人类和人工智能的合作,而不是生成性人工智能简单地拼凑一首歌曲。
李成柱教授表示:“近期的生成性人工智能技术引发了担忧,因为它直接模仿受版权保护的内容,从而侵犯创作者的版权,或不顾创作者意图生成单方面的结果。因此,研究团队意识到了这一趋势,关注创作者的实际需求,并专注于设计一个以创作者为中心的人工智能系统。”
他继续说道:“Amuse是一个探索与人工智能合作可能性的尝试,同时保持创作者的主动性,预计将成为未来音乐创作工具和生成性人工智能系统开发中提出更友好创作者方向的起点。”
该研究得到了韩国国家研究基金会的支持,资金来自政府(科学与信息通信部)。(RS-2024-00337007)