---
title: "YuE – 港科大联合 M-A-P 推出的开源AI音乐生成模型"
url: "https://paooo.com/aigc-news/22535/"
author: "Prompt 语宙研究院"
published_at: "2026-06-09T00:19:14+08:00"
updated_at: "2026-06-09T00:19:14+08:00"
categories: "AIGC 资讯"
tags: "AI音频与语音, HuggingFace, Llama, TikTok, 开源大模型"
source: "Prompt 语宙 (https://paooo.com)"
ai_tools_directory: "语宙 AI 导航 (https://ai.paooo.com)"
---

# YuE – 港科大联合 M-A-P 推出的开源AI音乐生成模型

> 来源：[Prompt 语宙 (paooo.com)](https://paooo.com/aigc-news/22535/) · 作者：Prompt 语宙研究院 · 发布时间：2026-06-09

## AI 30 秒核心看点 (TL;DR)

- 歌词可直接生成完整歌曲，覆盖主唱、伴奏与多种风格，支持中英日韩多语言。
- 通过语义增强音频分词器、双分词和链式思维生成，提升长上下文与音轨同步能力。
- 模型与代码完全开源，支持命令行灵活调参，适合创作、影视、游戏和社媒配乐。

## YuE是什么

YuE 是香港科技大学和 Multimodal Art Projection 团队联合开发的开源 [AI 音乐生成](https://ai-bot.cn/best-ai-music-generators/)模型。能将歌词转化为完整的歌曲，支持多种音乐风格，包括流行、金属、爵士、嘻哈等，并且支持英语、中文、日语和韩语等多种语言。YuE 通过语义增强音频分词器、双分词技术、歌词链式思维生成和三阶段训练方案，解决了音乐生成中的长上下文、复杂音乐信号、语言内容失真等挑战，生成的歌曲具有连贯的音乐结构和吸引人的声乐旋律。模型完全开源，用户可以自由使用和修改代码。提供了灵活的生成选项，用户可以通过简单的命令行参数调整生成歌曲的风格、声乐类型等细节。

## YuE的主要功能

- **歌词转歌曲**：能将输入的歌词转化为完整的歌曲，包含主唱和伴奏。

- **多种音乐风格支持**：支持流行、金属、爵士、嘻哈等多种音乐风格。

- **高质量生成**：通过多种技术优化，确保生成的歌曲连贯且高质量。

- **多语言支持**：支持英语、中文、日语和韩语等多种语言。

- **长时间音乐创作**：可以生成长达 5 分钟的完整歌曲。

- **开源与可定制**：代码和模型完全开源，用户可以自由使用和修改。

- **情感和风格匹配**：能根据歌词的情感基调生成匹配的音乐风格。

- **跨模态应用**：可以与其他多模态模型结合，用于多媒体艺术创作。

## YuE的技术原理

- **语义增强音频分词器**：YuE 使用语义增强音频分词器来降低训练成本并加速收敛。能更好地理解歌词的语义信息，与音乐信号相结合，生成更符合歌词内容的音乐。

- **双分词技术**：YuE 提出了一种双分词技术，用于在不修改 LLaMa 解码器-only 架构的情况下实现音轨同步的声乐-乐器建模。模型可以在生成主唱部分的同时，同步生成合适的伴奏，确保两者在节奏和旋律上的协调性。

- **歌词链式思维生成**：YuE 引入了歌词链式思维生成技术，支持模型在遵循歌词条件的情况下逐步生成整首歌曲。使模型能更好地处理长上下文信息，确保生成的歌曲在整体结构上保持连贯性。

- **三阶段训练方案**：YuE 采用了三阶段训练方案，确保更好的可扩展性、音乐性和歌词可控性。具体来说：

**第一阶段**：基础模型训练，学习音乐生成的基本模式。

- **第二阶段**：风格和情感对齐，通过大量样本来调整模型，能生成特定风格和情感的音乐。

- **第三阶段**：偏好纠正，通过强化学习等技术进一步优化生成结果，确保生成的音乐更符合人类的审美标准。

## YuE的项目地址

- **项目官网**：[https://map-yue.github.io/](https://map-yue.github.io/?utm_source=ai-bot.cn)

- **GitHub仓库**：[https://github.com/multimodal-art-projection/YuE](https://github.com/multimodal-art-projection/YuE)

- **HuggingFace模型库**：[https://huggingface.co/m-a-p/YuE-s1-7B-anneal-en-cot](https://huggingface.co/m-a-p/YuE-s1-7B-anneal-en-cot)

## YuE的应用场景

- **音乐创作**：音乐创作者可以用 YuE 快速生成旋律和伴奏，激发创作灵感。根据用户提供的歌词，生成符合其情感和风格需求的个性化歌曲。

- **影视与视频制作**：为电影、电视剧和短视频生成背景音乐，匹配不同场景的情感和氛围。为广告制作朗朗上口的铃声，有效传达品牌信息。

- **游戏音乐**：为游戏生成匹配场景的背景音乐，增强游戏的沉浸感。

- **社交媒体内容**：为 TikTok 和 Instagram 等平台上的短视频生成独特的背景音乐。

## 常见问题解答 (FAQ)

### YuE 可以把歌词直接生成歌曲吗？
可以。YuE 的核心能力就是将输入歌词转化为完整歌曲，包含主唱和伴奏，并能根据歌词情感匹配相应风格，适合快速生成可听的音乐草稿或成品。

### YuE 支持哪些语言和音乐风格？
根据文中信息，YuE 支持英语、中文、日语和韩语等多种语言，风格覆盖流行、金属、爵士、嘻哈等类型，适合不同题材和场景的音乐生成需求。

### YuE 开源后适合哪些应用场景？
YuE 适合音乐创作、影视与视频配乐、游戏背景音乐以及社交媒体短视频音频制作。由于代码和模型开源，用户还可以按需修改和二次开发。

---
探索 2,800+ 全球实用 AI 工具与官方直达入口：[语宙 AI 导航 (https://ai.paooo.com/)](https://ai.paooo.com/)
