# LongWriter – 清华联合智谱AI推出的长文本生成模型

- Link: https://paooo.com/aigc-news/27341/
- Published: 2026-07-09T05:47:00+08:00
- Author: 站外新闻

## LongWriter是什么

LongWriter 是清华大学联合[智谱AI](https://ai-bot.cn/sites/2005.html)推出的长文本
生成模型，能生成超10,000字的连贯文本，项目已开源。通过分析现有大型语言模型的输出
限制，创建了”LongWriter-6k”数据集，成功扩展了AI模型的输出能力。LongWriter 还采用
了直接偏好优化（DPO）技术来提高模型的输出质量和遵循指令中长度限制的能力。

阅读目录

 * [LongWriter是什么](https://paooo.com/aigc-news/27341/#longwriter%e6%98%af%e4%bb%80%e4%b9%88)
 * [LongWriter的主要功能](https://paooo.com/aigc-news/27341/#longwriter%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [LongWriter的技术原理](https://paooo.com/aigc-news/27341/#longwriter%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [LongWriter的项目地址](https://paooo.com/aigc-news/27341/#longwriter%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [如何使用LongWriter](https://paooo.com/aigc-news/27341/#%e5%a6%82%e4%bd%95%e4%bd%bf%e7%94%a8longwriter)
 * [LongWriter的应用场景](https://paooo.com/aigc-news/27341/#longwriter%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![LongWriter – 清华联合智谱AI推出的长文本生成模型 - 配图](https://paooo.com/wp-content/
uploads/2026/07/LongWriter-website-1.avif)

## LongWriter的主要功能

 * **超长文本生成**：LongWriter能生成超过10,000字的连贯文本，突破了以往AI模型在文本
   长度上的限制。
 * **数据集构建**：通过创建”LongWriter-6k”数据集，包含从2,000到32,000字不等的写作
   样本，为模型训练提供了丰富的长文本数据。
 * **AgentWrite方法**：使用现有LLMs自动构建超长输出SFT数据的方法，采用分而治之的
   策略，有效提升了模型的长文本生成能力。
 * **直接偏好优化（DPO）**：通过DPO技术进一步优化模型，提高输出质量和遵循长度约束
   的能力。

## LongWriter的技术原理

 * **长上下文处理能力**：LongWriter基于具有显著增加的内存容量的长上下文大型语言模型（
   LLMs），模型能处理超过100,000个token的历史记录。
 * **输出长度限制分析**：通过分析现有模型在不同查询下的最大输出长度，LongWriter识别
   出模型输出长度的限制主要源自于监督式微调（SFT）数据集的特性。
 * **监督式微调（SFT）**：LongWriter在SFT阶段使用”LongWriter-6k”数据集，通过这种
   方式，模型学习到了如何生成更长的文本。

![LongWriter – 清华联合智谱AI推出的长文本生成模型 - 配图 2](https://paooo.com/wp-
content/uploads/2026/07/LongWriter-website1.avif)

## LongWriter的项目地址

 * **GitHub仓库**：[https://github.com/THUDM/LongWriter](https://github.com/THUDM/LongWriter)
 * **HuggingFace模型库**：[https://huggingface.co/THUDM/LongWriter-glm4-9b](https://huggingface.co/THUDM/LongWriter-glm4-9b)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2408.07055](https://arxiv.org/pdf/2408.07055)

## 如何使用LongWriter

 * **环境配置**：确保有足够的计算资源来运行LongWriter模型，包括高性能的GPU和足够
   的内存。
 * **获取模型**：访问Github获取LongWriter的开源代码和模型。
 * **安装依赖**：根据项目文档安装所需的依赖库和工具，包括深度学习框架、数据处理库
   等。
 * **数据准备**：准备适合LongWriter处理的长文本数据。对数据进行预处理，符合模型的
   输入要求。
 * **模型加载**：加载预训练的LongWriter模型，或者根据自己的数据进行进一步的微调。
 * **编写提示**：根据需要生成的文本内容，编写清晰的提示或指令，提示将指导模型生成
   特定的文本。
 * **生成文本**：使用模型提供的接口或API，输入提示并启动文本生成过程。

## LongWriter的应用场景

 * **学术研究**：LongWriter可以辅助学者和研究人员撰写长篇学术论文、研究报告或文献
   综述。
 * **内容创作**：作家和内容创作者可以用LongWriter来生成小说、剧本或其他创意写作的
   初稿。
 * **出版行业**：出版社可以用LongWriter来辅助编辑和校对工作，或自动生成书籍内容。
 * **教育领域**：教育工作者可以用LongWriter生成教学材料、课程内容或学习指南。
 * **新闻媒体**：新闻机构可以用LongWriter快速生成新闻报道、深度分析文章或专题报道。

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,000+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[⚡ AIGC 早报生成器](https://paooo.com/mtool/)