Riffusion

我们看到了Pilot Plugins具有未来风格的人工智能头像，它可以帮助你生成新的MIDI和音频文件，人工智能翻唱多莉·帕顿（Dolly Parton）的《乔琳娜》（Jolene），等等。今年早些时候发布的一首人工智能演唱曲目，甚至获得了超过了1亿次播放。

除了人工智能，更多的虚拟和增强现实技术也已经进入了音乐行业。现在，在AI绘画高峰之后，Riffusion已经利用相同的技术，开发了制作音乐的新方法。

它的工作原理是建立一个有索引的频谱图集合，每一个都标有关键词，代表频谱图中捕捉到的音乐风格。一旦对这个集合进行训练，Riffusion就会使用与图像生成的人工智能Stable Diffusion相同的技术来制作歌曲。

该项目将生成一个与用户需求相匹配的频谱图。频谱会具有类似的特征。例如，如果你要求提供 “流行钢琴”，它将创建一个与关键词相匹配的频谱图，并将其转换为以流行钢琴为主导的曲目。

下面是一段Riffusion的效果演示：

bilibili原地址：https://www.bilibili.com/video/BV1TD4y177i3/

虽然Riffusion项目仍处于早期开发阶段，但随着时间的推移，其技术可能会继续发展。相信很快它就可以成为音乐作者的助手， 给创作者带来灵感。