新应用使用人工智能让任何人都能制作音乐混搭

想象一下，如果警察的“她所做的每一件小事都是魔法”作为迈克尔杰克逊的“BeatIt”的开场曲，那么 Cardi B 的“Bodak Yellow”即兴重复段将与杰克逊融为一体。这种混音并非不可能实现的幻想，而是通过 Mixboard 实现的，这是一款平板电脑应用程序，可以让没有音乐或编辑经验的用户创作他们梦想中的歌曲。

该应用程序来自佐治亚理工学院的 音乐技术中心，该中心的主任Gil Weinberg教授 和他的学生多年来一直在开发一种混搭工具。现在，技术终于赶上了他们最初的设想。在人工智能 (AI) 的帮助下，该应用程序可以找到用户可能不会自然配对的艺术家，并为混搭找到歌曲中最好的部分。

“我认为每个人都可以通过音乐变得富有创造力，”温伯格说。“也许不是每个人都知道在音符水平上创作一首音乐所需的所有理论，但几乎所有人都喜欢音乐。如果我们给他们一个非常简单的方法来将歌曲放在不同的地方，他们就能创造出独特的东西。”

研究人员在 5 月举行的国际音乐表达新界面会议 (NIME 2023)上发表了论文“Mixboard — A Co-Creative Mashup Application for Novices”，介绍了他们的工作 。

制作混搭

要制作混搭，用户可以将最多四首歌曲从 Spotify 或 Mixboard 音乐库拖放到最多 32 小节的人声、贝司、和弦和鼓段中。这种体验本质上是视觉的，让用户跟随应用程序混合他们的歌曲选择，在几秒钟内呈现。完成后，用户可以下载并分享他们独特的曲目。

“我参与了该项目的几乎所有部分，从 Web 界面和后端到制作全新的 iOS 应用程序，”博士 Raghavasimhan Sankaranarayanan 说。音乐技术专业的学生。“我热衷于构建强大且可用于生产的东西。”

人工智能DJ

人工智能使用户能够专注于创作歌曲，而不是担心技术方面和音乐理论。该应用程序使用开源音乐信息检索库来确定歌曲节奏、调和音乐主干，这有助于将歌曲分解为单独的混音。该算法可以拉伸声音以匹配节奏或移调键以确保两首歌曲在同一键中。研究人员还提供了基本歌曲结构的模板，以帮助用户创建吸引人的曲目。

“我们越是专注于为创造性目的开发人工智能，它就越能激发灵感，并被视为人类无法提供的独特输入，”温伯格说。“结合您自己的创造力和 AI 创意输入，混搭可以成为您无法独自创造的独特而新颖的东西。”

混合用户反馈

为确保 Mixboard 正常运行，研究人员在人机交互 硕士生 Tommy Ottolin 的带领下进行了用户调查 。他们的研究评估了 45 名年龄在 18 至 27 岁之间的受试者的网络界面，不包括任何具有超过一年的音乐混音或作曲经验的人。参与者有 30 分钟的时间来测试 Mixboard。接下来，他们完成了对研究人员的半结构化访谈，然后使用五分李克特量表进行了 20 个问题的调查，询问用户认为他们拥有多少创造性控制权或应用程序的易用性等问题。

“观察人们与我们的 Mixboard 互动在我心中唤起了一系列情绪，包括自豪、紧张和兴奋，”音乐技术硕士毕业生 Qinying Lei 说。“我很高兴看到用户被 Mixboard 所吸引，并对他们制作的独特音乐感到惊讶。”

Mixboard 的未来

在研究人员继续改进应用程序的自动化并改进 iOS 功能的同时，他们还看到了比实验室实验更大的潜力。他们希望将该应用程序商业化，但受技术限制较少，而更多受许可限制。Weinberg 曾咨询过 Kobi Abayomi，他是华纳音乐集团数据科学前高级副总裁，现任 Gumbel Demand Acceleration 科学负责人和伊万艾伦文学院顾问委员会成员。

“音乐版权所有者应该将 Mixboard 等应用程序视为营销机会，而不是许可播放，”他说。“让人们更喜欢音乐，或者特别是你喜欢的音乐类型，这就是前瞻性音乐营销的意义所在。”

不过，归根结底，Mixboard 是关于音乐制作的民主化，并表明任何人都可以发挥创造力。

“听到生成的混搭随着我们算法的每次修改变得越来越好，真是太棒了，”音乐技术硕士毕业生 Nitin Hugar 说。“尝试将最不可能的歌曲混搭起来也很有趣：一首带有非洲节拍和一些爵士乐和弦的印度歌曲绝对不是我想象的那样听起来不错，但我多次被证明是错误的。这个项目让我体会到来自世界不同地区的音乐是如何相互关联的。”