
给歌词就能出整首歌,还反超Suno?9月最火开源音乐模型YuE2,加上ACE-Step等6款同类一次看懂
YuE2 是 M·A·P 团队 9 月刚开源的全曲生成模型:给歌词和风格描述,直接出一首带人声、伴奏、完整段落结构的歌。最特别的是它会先写一份 ABC 记谱的乐谱,旋律和弦可以手动改完再渲染成音频——这是它和所有"盲盒出曲"工具最大的区别。WildSongBench 榜上 best-of-8 拿 6.96 分,反超 Suno v5 的 6.87,上线 9 天就冲上 HuggingFace 全站 Trending 第 4。
但开源音乐模型早不是一家独大,这篇把 2026 年能打的全部拉出来对比:
| 模型 | 背景 | 规模 | 招牌能力 | 协议 |
|---|---|---|---|---|
| YuE2 | M·A·P(HKUST/NYU/Stanford 等) | 3B | 乐谱可编辑+翻唱,6 语种 60+ 流派,48kHz | 代码 Apache 2.0,权重 CC BY-NC 4.0 禁商用 |
| ACE-Step 1.5 | ACE Studio + 阶跃星辰 | 3.5B | A100 约 2 秒一首,4GB 显存本地可跑,50+ 语言,最长 10 分钟 | MIT |
| HeartMuLa | HeartMuLa 团队 2026 新秀 | 3B | Suno 式歌词+标签创作,开源版效果在线 | Apache 2.0 |
| LeVo 2 (SongGeneration) | 腾讯 AI Lab | - | 多偏好对齐,中文歌质感强 | 自定义(偏严) |
| Muse | ACL 2026 论文 | - | 长曲生成+细粒度风格控制 | MIT |
| MusicGen | Meta | - | 纯器乐/BGM 成熟稳定 | CC-BY-NC 禁商用 |
| Stable Audio Open | Stability AI | - | 音效/采样/loop 专精 | 年收入<$1M 可商用 |
| Magenta RealTime | - | 实时交互式演奏 | Apache 2.0 |
怎么选一句话版:
- 显存小要快、本地跑 → ACE-Step 1.5(GTX 1060 都能带)
- 要人声天花板+乐谱控制 → YuE2
- 习惯 Suno 写歌流程 → HeartMuLa
- 要商用先看协议:YuE2 和 MusicGen 的权重都禁商用(YuE2 只有代码是 Apache 2.0),商用找作者授权或换 ACE-Step,别踩坑
商业对标还是 Suno v5/v6 和 MiniMax Music 3,但这一波开源模型是真的追上来了,自己部署没按首收费,玩起来更自由。
反方向:让 AI「听懂」音乐的理解模型
生成之外还有个配套方向——音乐理解(听歌→输出分析),挑两个能打的:
| 模型 | 背景 | 能做什么 |
|---|---|---|
| MOSS-Music-8B | OpenMOSS(复旦团队) | 歌词 ASR 带时间戳、和弦/调性/速度推理、结构分析、长曲问答,Qwen3-8B 底座,Instruct/Thinking 双版本 |
| Music Flamingo | NVIDIA | 和声、音色、歌词、文化背景深度推理,10+ 榜单 SOTA |
| ChatMusician | M·A·P + Skywork + HKUST | 理解 ABC 乐谱(和 YuE2 同社区,配套用) |
彩蛋:YuE2 的翻唱功能里用的 SheetSage2 本身就是个理解组件——先从原曲提取旋律才能换音色翻唱。想「生成+分析」一条龙的,YuE2 + MOSS-Music 这套组合正好互补。
暂无评论
