

这是什么
YuE(当前主推的 YuE2)是一款开源 AI 音乐生成模型,由香港科技大学、M-A-P、Tokenwave.AI,以及纽约大学、斯坦福、MBZUAI、NOIZ、ACE Studio 等多家机构联合推出,GitHub 约 1.4 万星,上线后曾冲到 GitHub Trending 第一、Hugging Face 文本生音频榜单第一。它的定位很直白:一句「歌词 + 风格描述」,就能生成一首带人声、带伴奏的完整歌曲。与众不同的是,YuE2 走「白盒」路线——先根据歌词写出可读可改的旋律与和弦谱,再把曲谱渲染成音频,而不是像黑盒一样直接吐出声音。官方 slogan 是「在符号里作曲,在声音里创造」,中文读者可以理解为:既能当免费的 Suno 替代,又能真正掌控和修改曲子的每一个细节。
核心能力
- 高质量整曲生成:歌词 + 风格提示 → 先出旋律和弦谱 → 渲染成带人声伴奏的完整歌曲,48kHz 立体声;WildSongBench 评测中 best-of-8 拿到 6.9632 的平均分,对标 Suno v5/v6
- 可编辑的曲谱规划:旋律与和弦是显式的 ABC 曲谱,人可以直接读、改,也可以交给智能体编辑,改完再重新渲染
- 零样本翻唱:用配套的 SheetSage2 把原曲转写成旋律谱,换上新歌词或新风格,就能生成一首全新演绎的翻唱
- 智能体改歌:通过对话让 AI 改和声、旋律、编曲或歌词,同一个模型反复生成新版本,官方 demo 就演示了把一首中文流行歌一步步改成英文爵士
- 纯音乐与伴奏:给一句描述或一段参考旋律,就能生成无歌词的钢琴、吉他等器乐作品
- Agent skill:官方提供 yue2-music 技能,教 Claude 系智能体生成、翻唱、编辑歌曲并检查音乐规则,推荐配合 GPT-6 Astra 使用
- 生态丰富:ComfyUI 有原生节点和官方文生音乐工作流,还有在线免费 demo 与 Maestro 本地生成工具
适合谁
- 想免费生成原创歌曲、配乐的音乐创作者和自媒体人
- 想翻唱、改编歌曲,或做二次创作的音乐爱好者
- 用 AI 助手做音乐、想把 yue2-music 技能接进工作流的开发者
- 需要纯音乐、背景音乐来配短视频或播客的内容制作者
获取方式
官网:https://map-yue2.github.io/
项目地址:https://github.com/multimodal-art-projection/YuE
授权上分两部分:代码、技能与文档是 Apache 2.0,模型权重是 CC BY-NC 4.0 加附加创作者许可——个人、创作者和音乐人可以免费使用并商用生成的音乐,无需向官方支付版税;企业商用模型权重则需联系团队谈授权。想快速体验的话,官网提供了免费在线 demo(yue.noizai.net),浏览器里就能生成歌曲,不用装任何东西。本地跑需要 Linux + Python 3.12 + 支持 BF16 的 NVIDIA 显卡(约 24GB 显存),模型会从 Hugging Face 自动下载(m-a-p/YuE2-3B),克隆仓库 pip 安装后一条命令即可生成。
相关阅读
© 版权声明
文章版权归作者所有,未经允许请勿转载。