YuE
由 multimodal-art-projection 研发
YuE2是一款前沿的音乐生成系统,融合了符号化乐谱与音频创作,能够以可编辑的作曲方式生成高质量歌曲。用户只需输入歌词和风格提示,YuE2便能智能生成可编辑的旋律和和弦计划,随后将其渲染为包含人声和伴奏的完整歌曲。它提供白盒式音乐生成体验,允许用户在音频合成前检查并修改符号化的音乐计划。YuE2还支持零样本翻唱,能以新风格重新演绎现有歌曲,并支持代理式编辑,用户可通过对话交互细化作品。其核心架构采用AR–NAR Mixture-of-Transformers预测乐谱和语义token,通过流匹配生成声学潜变量,并由VAE解码为立体声音频。在音乐品质上,YuE2与Suno v5/v6等顶尖模型不相上下。
- 前沿品质的符号与音频统一音乐生成
- 支持白盒式旋律和和弦计划编辑
- 实现零样本歌曲翻唱及代理式互动编辑
- 基于AR–NAR Mixture-of-Transformers架构
- 提供可集成至代理的音乐技能
desktop