开源免费、无次数限制，我终于实现AI音乐自由了

来源：市场资讯

（来源：阿枫科技）

如果你关注过AI音乐，那么一定听说过Suno。

不黑不吹，这应该是全球范围内，目前做得最好的AI音乐平台之一，只需输入一句话，它就能生成一首专业性极强的音乐。

但玩AI音乐的朋友应该知道，它的灵活度其实还不够高，生成音乐没法精确修改，也没法基于一首已有歌曲做自定义调整

这其实更像是在随机抽一首歌，和生图、生视频有着异曲同工之妙。

但最近我发现了一个开源项目，它不仅不要钱，而且还解决了Suno没法精确编辑音乐的问题。

项目地址：github.com/multimodal-art-projection/YuE

举个例子，你应该听过《学猫叫》吧？

这首魔性歌曲之前在抖音上挺火，下面这首，就是用这个开源项目生成的魔改版音乐↓

可以发现，整首歌除了音色和歌词变了，其他方面比如旋律、段落结构等，都和原曲几乎一致。

因为我在生成时，就严格要求只修改音色和歌词，其他部分尽量保留。

YuE2-AI音乐生成模型

这是港科大做的一个开源音乐生成模型，9月发布新版的时候，直接冲到了GitHub Trending第一名。

其实早在2025年1月，他们就发布了这个一代模型，但当时只能说是勉强能听，并不能打。

士别三日当刮目相待，二代模型在WildSongBench这个基准测试里，拿到了6.96分，直接超过了SunoV5、SunoV6、Mureka9等音乐模型

但最关键的是，它是一个开源项目，也就是说，只要你的电脑配置够用，就可以分币不花的在本地随意生成音乐。

要知道，绝大多数AI音乐平台，不花钱是没法爽用的

一开始看到网友反馈，在RTX4090上生成214秒的歌曲仅需71秒，也就是生成一首三分多钟的歌只需要一分多钟。

不过看到“4090”这个数字的时候，我还是慌了，但好在找到了解决办法，后面会给大家细说。

下面我先说说它是怎么做到精确修改的。

先写谱，再唱歌

其他模型大多是把歌词丢进去，然后根据歌词生成对应的音频。而YuE2有点儿不一样，它收到歌词之后，会先写出一份乐谱。

就是我们平常上音乐课时，课本里看到的那种乐谱，通过它就能知道一首歌的旋律大概怎么走。

YuE2会先把整首歌的旋律、和弦等规划成一份ABC格式的乐谱，然后再照着谱子合成人声和伴奏。

所以你生成的每一首歌，背后都有一份人能看懂的乐谱文件。

当你想精确修改音乐时，AI模型就有了具体参考，你在乐谱上改一个音，它就会照着修改后的乐谱生成旋律，这样就能做到精确控制。

其实可以发现，YuE2的这个工作模式，相当于给AI音乐模型多加了一层参考条件。

以前只参考歌词，生成出来的旋律基本很难把控。而现在歌词和旋律都能参考，人能控制的地方也就更多了

当然，也不是说非要你亲自去改乐谱上的每一个音符，你也能通过和AI对话来调整。

比如让它温柔一点、凌厉一点、把贝斯换成小号等等，AI会根据你的描述去修改乐谱。

安装和使用

YuE2本身是一个没有UI界面的AI模型，原版模型需要RTX4090显卡才能跑得动。

我也和你一样，看到“4090”这个数字的时候，差点直接被劝退。

好在YuE2还有量化版本，我的显卡是RTX4060(8GB)，实测使用量化版模型，同样可以在1到2分钟内生成一首歌。

你可以直接把下面这段提示词发给Agent，让它帮你安装：

https://github.com/multimodal-art-projection/YuE 帮我在电脑里部署这个项目的量化版本，先查询我的电脑配置如，然后根据我的电脑配置来部署可以运行的量化版本，部署在D盘的任意位置。

前面说过，YuE2本身没有UI界面，所以如果你只装了模型，却不懂编程，那就可以让Agent调用这个本地模型来帮你生成音乐。

另外，GitHub上也有不少YuE2的可视化项目，安装之后就能直接在可视化界面里操作YuE2。

但这两种方式我都没选，因为我又找到了一个自带可视化界面且打包成安装包的成品项目

项目地址：github.com/timoncool/YuE2-Studio

这个项目叫YuE2 Studio，安装完成后是下面这样：

整个界面和常见的AI音乐工具差不多，打开就能上手。

第一次启动时，需要先下载YuE2模型，可以选择原版，也可以选择适配不同配置的量化版。

比如我用的是Q6量化版，如果你的显卡比我差一点，也可以选更轻量的版本。软件启动时会检测配置，默认推荐适合你的版本。

如果没有特殊需求，直接选择它推荐的版本，点击下载模型就行。

模型下载完成之后，软件就会进入创作界面。它分为两个工作模式，一个是工作室模式，一个是翻唱模式。

工作室模式就是正常生成音乐，输入歌词、风格、你想要的乐器、BPM等等，它就会根据歌词和提示词生成音乐。

工作流程和我上面说的一样，会先生成乐谱，然后再根据乐谱生成音乐。

这里也有乐谱编辑界面，如果你懂乐谱，可以直接编辑乐谱，然后让AI根据乐谱生成旋律。

如果不懂，也可以在当前乐谱的基础上重新生成，用提示词微调乐谱就行。

翻唱模式就像我开头展示的那首歌一样，可以在保留旋律的情况下，修改音色、歌词等内容。

这个模式需要先上传一首歌，AI模型会自动提取里面的旋律并制作成乐谱，然后按你指定的音色或者歌词重新生成这首歌。

这里放几首用YuE2翻唱生成的歌，大家可以听听效果：

《大菠萝》:

《重金属尖叫版生日快乐》:

《春天在哪里小调版》:

有一说一啊，功能还是挺多的，对YuE2模型本身的控制也很细，还可以调和弦，如果你懂乐理，可以玩得非常精细。

另外，它还有不少附加功能，比如歌词AI润色、音轨分离等等，可以通过安装扩展来使用。

但这些就属于YuE2模型之外的内容了，我就不细说了，感兴趣的可以自己去折腾

其实AI音乐不是啥新鲜玩意，但这么久以来，除了模型越做越大、音质、旋律越来越好，在音频控制方面貌似没有太大进步。

而YuE2的出现，确实让我感受到了不一样的体验，它不只是让音乐效果更好，也给创作者留出了更多可以精确控制的空间。

如果一切靠随机，整个流程就很难稳定下来。

当然，最最最重要的是，它开源免费，不用花一分钱，你可以部署到自己的电脑上，随意研究和使用，没有任何限制