# ACE-Step – ACE Studio联合阶跃星辰开源的音乐生成基础模型

- Link: https://paooo.com/aigc-news/20011/
- Published: 2026-06-08T18:29:37+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * ACE-Step 通过扩散模型+DCAE+线性变换器组合，提升长音乐生成的连贯性与效率。
 * 支持 19 种语言、流行/摇滚/电子/爵士等风格，并提供变体、重绘、歌词编辑等可控能力。
 * A100 GPU 上生成 4 分钟音乐约需 20 秒，适合快速出 demo、循环和人声创作素材。

## ACE-Step是什么

ACE-Step 是 [ACE Studio](https://ai-bot.cn/sites/2642.html) 和 StepFun 联合推出的
开源[音乐生成](https://ai-bot.cn/best-ai-music-generators/)基础模型，基于创新的架构
设计实现高效、连贯且可控的音乐创作。ACE-Step结合扩散模型、深度压缩自编码器（DCAE）
和轻量级线性变换器，能在短时间内生成高质量的音乐作品，速度比传统 LLM 模型快 15 倍。
ACE-Step 支持多种音乐风格、语言和可控性功能，为音乐创作提供强大的工具。ACE-Step适用
于快速生成音乐，作为基础模型支持多种音乐创作子任务，助力音乐人、制作人和内容创作
者实现高效创作。

阅读目录

 * [ACE-Step是什么](https://paooo.com/aigc-news/20011/#acestep%e6%98%af%e4%bb%80%e4%b9%88)
 * [ACE-Step的主要功能](https://paooo.com/aigc-news/20011/#acestep%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [ACE-Step的技术原理](https://paooo.com/aigc-news/20011/#acestep%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [ACE-Step的项目地址](https://paooo.com/aigc-news/20011/#acestep%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [ACE-Step的应用场景](https://paooo.com/aigc-news/20011/#acestep%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![ACE-Step](https://paooo.com/wp-content/uploads/2026/06/ACE-Step-website-1.avif)

## ACE-Step的主要功能

 * **快速合成**：在短时间内生成高质量的音乐，例如在 A100 GPU 上生成 4 分钟的音乐
   仅需 20 秒。
 * **多样化风格**：支持多种主流音乐风格（如流行、摇滚、电子、爵士等）和多种语言的
   歌词生成。
 * **变体生成**：调整噪声比例生成不同变体，提供多样化的音乐选择。
 * **重绘功能**：对特定部分重新生成，修改风格、歌词或人声，保留其他元素。
 * **歌词编辑**：支持对生成的音乐进行局部歌词修改，同时保持旋律和伴奏不变。
 * **多语言支持**：：支持 19 种语言，其中英语、中文、俄语、西班牙语、日语等 10 种
   语言表现尤为出色。
 * **Lyric2Vocal**：基于 LoRA 微调直接从歌词生成人声音频。
 * **Text2Samples**：生成音乐样本和循环，帮助制作人快速创建乐器循环、音效等。

## ACE-Step的技术原理

 * **扩散模型（Diffusion Model）**：基于逐步去除噪声生成数据。模型能快速合成音乐，
   传统扩散模型在长结构连贯性上存在不足。ACE-Step 基于创新的架构设计解决这一问题。
 * **深度压缩自编码器**：DCAE 用在高效的数据压缩和解压缩，保留音乐的细粒度音频细节，
   减少计算资源的消耗。
 * **轻量级线性变换器**：用在处理音乐的序列信息，确保生成的音乐在旋律、和声和节奏
   上具有连贯性。
 * **语义对齐**：ACE-Step 用 MERT（Music Embedding Representation）和 m-hubert 技术，
   在训练过程中对齐语义表示（REPA），实现快速收敛和高质量的生成效果。
 * **训练优化**：基于训练时的语义对齐和优化技术，ACE-Step 能在短时间内生成高质量
   的音乐，保持生成速度和连贯性之间的平衡。

## ACE-Step的项目地址

 * **项目官网**：[https://ace-step.github.io/](https://ace-step.github.io/?utm_source=ai-bot.cn)
 * **GitHub仓库**：[https://github.com/ace-step/ACE-Step](https://github.com/ace-step/ACE-Step)
 * **HuggingFace模型库**：[https://huggingface.co/ACE-Step/ACE-Step-v1-3.5B](https://huggingface.co/ACE-Step/ACE-Step-v1-3.5B)
 * **在线体验Demo**：[https://huggingface.co/spaces/ACE-Step/ACE-Step](https://huggingface.co/spaces/ACE-Step/ACE-Step)

## ACE-Step的应用场景

 * **音乐创作**：快速生成旋律、歌词，提供创作灵感。
 * **人声生成**：从歌词直接生成人声音频，适合制作人声演示。
 * **音乐制作**：生成乐器循环和音效，提供创作素材。
 * **多语言支持**：适用于跨语言音乐创作。
 * **音乐教育**：作为教学工具，帮助学习音乐创作。

🧭 文中关联 [AI 工具](https://ai.paooo.com/)官网与参数卡（语宙 AI 导航）

**ACE Studio ↗**

AI歌声合成工具，输入歌词与旋律即可生成宛如真人的歌声。

**HuggingFace ↗**

HuggingFace：AI模型开发社区，面向大语言模型场景提供便捷实用的在线功能支持，涵盖大
模型等实用方向。

❓ 常见问题解答（FAQ）

ACE-Step适合做什么音乐创作？

ACE-Step 适合快速生成旋律、歌词、人声演示、乐器循环和音效素材，也可用于多语言音乐
创作与音乐教学。它更偏向“基础模型+创作工具”，适合做 demo、灵感草稿和可控编辑。

ACE-Step支持哪些可控生成能力？

它支持变体生成、重绘、局部歌词修改等能力，可在保留旋律和伴奏的前提下，调整风格、
歌词或人声。对需要反复打磨片段的音乐制作流程很实用。

ACE-Step的速度和效果怎么样？

文中给出的实测结论是：在 A100 GPU 上生成 4 分钟音乐约需 20 秒，速度比传统 LLM 模型
快 15 倍。它强调高效、连贯和可控，适合快速产出高质量音乐草案。

🔬 语宙深潜追问 · 进阶实操拆解

A100上20秒出4分钟音乐靠谱吗？

适合做快速草稿、配乐预演和批量灵感生成，但离最终商用成品仍有差距。真正落地要看长
程结构稳定性、音色一致性和可编辑性，建议把它放进“生成-筛选-精修”的工作流，而不是
一键交付。

扩散+DCAE+线性Transformer怎么选型？

这类组合通常是在质量、压缩率和推理效率之间折中：扩散负责生成质量，DCAE压缩音频表示，
线性Transformer降低长序列成本。实战中重点看训练稳定性、长音频连贯性和可控编辑接口
是否足够开放。

🗳️ 读者观点微投票 · 您的实战立场是？

音乐生成模型该优先拼速度还是可控性？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [ACE-Step 1.5：消费级硬件跑出商业级音乐生成！ACE Studio联合StepFun开源模型，4步推理2秒生成4分钟歌曲](https://paooo.com/aigc-news/11508/)
 * [FluxMusic – 开源的AI音乐生成模型，通过文本描述创造音乐](https://paooo.com/aigc-news/27015/)
 * [Seed-Music – 字节跳动推出的AI音乐生成大模型](https://paooo.com/aigc-news/26865/)
 * [abab-music-1 – MiniMax 推出端到端 AI 音乐生成大模型](https://paooo.com/aigc-news/26816/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/20011/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
