YuE2
开源音乐模型，先规划乐谱再渲染音频
输入歌词和风格就能出歌，乐谱可手动改，支持翻唱和对话式编辑
核心功能
符号规划创作
输入歌词和风格提示，先生成可编辑的旋律加和弦ABC乐谱，再渲染成带人声伴奏的完整歌曲
零样本翻唱
用SheetSage2把原曲录音转成乐谱，再以新风格或新歌词重新演绎，不需要针对翻唱做额外微调
Agent对话式编辑
围绕乐谱跟Agent对话，改和声、旋律、速度或曲式后重新渲染出新版本
音频转谱
SheetSage2把任意录音转录成可检视、可修改的ABC乐谱，是翻唱和编辑功能的入口
音乐理解
MERT2提供全曲级音乐表征，支撑转谱等下游任务，在MARBLE基准15项里拿了14项SOTA
产品特色
- 01
把乐谱当作中间层，创作过程不再是个黑盒子
传统音乐生成工具改一个和弦只能重新抽卡，YuE2把旋律和弦显式写成ABC乐谱，能读能改，改完再渲染
- 02
创作、翻唱、编辑共用同一份模型权重
三个模式的区别只在于乐谱从哪来——模型自己生成的、转录原曲得到的、还是人工改过的
- 03
完全本地开源，数据不出电脑
代码Apache 2.0协议，权重开放下载，一张24G显存的NVIDIA显卡就能离线运行
- 04
分阶段API让每一步都能干预
推理拆成plan、generate_semantic、synthesize、decode四步，乐谱和中间产物全部落盘保留，可以中途换解码器或者复用已经生成好的计划
- 05
基准成绩确实能打，但得看清楚前提
WildSongBench上SongBench均分6.9632，best-of-8设定下超过Suno v5，不过标准单次生成分数是6.7316，低于Suno v5
应用场景
✅ 个人写歌玩
不会编曲也能输入歌词加风格出歌，想调整就改乐谱，把灵感变成完整作品
✅ 翻唱改编
用SheetSage2把原曲转成谱，一键改成爵士或摇滚风格，或者换歌词做多语言版本
✅ 配乐Demo制作
影视游戏广告前期快速生成候选配乐，低成本试错后再决定要不要找真人制作
✅ 音乐教学
老师生成指定和弦走向的示例曲，学生对着ABC乐谱学和声，听得见也看得见
常见问题
解答您关于"YuE2"的常见疑问，让您更好地使用这款AI工具
-
Suno直接出音频，YuE2先写乐谱再渲染，乐谱能读能改，创作过程可控得多
-
官方建议Linux系统加24G显存的NVIDIA显卡，RTX 4090实测一首三分半的歌大约71秒出
-
权重是非商用授权，商用需要联系HKGAI获取授权，代码本身是Apache 2.0
-
先用SheetSage2把原曲录音转成旋律乐谱，再用melody模式传入新歌词或目标风格重新生成
-
best-of-8是6.9632，标准单次生成是6.7316，差别主要在于有没有从多个候选里挑选
-
支持，WildSongBench基准里192条提示有94条是中文的
立即体验“YuE2”
YuE2是港科大与M-A-P团队开源的音乐生成模型，最大特点是先把旋律和弦写成可编辑的ABC乐谱，再渲染成完整歌曲。支持从零创作、零样本翻唱和Agent对话式编辑，单卡24G显存就能本地跑，代码和权重全部开放下载。
