---
title: "Optima – 清华联合北邮推出优化通信效率和任务有效性的训练框架"
url: "https://paooo.com/aigc-news/25271/"
author: "Prompt 语宙研究院"
published_at: "2026-07-12T22:48:29+08:00"
updated_at: "2026-07-12T22:48:29+08:00"
categories: "AIGC 资讯"
tags: "AI智能体, 大模型微调, 开源大模型"
source: "Prompt 语宙 (https://paooo.com)"
ai_tools_directory: "语宙 AI 导航 (https://ai.paooo.com)"
---

# Optima – 清华联合北邮推出优化通信效率和任务有效性的训练框架

> 来源：[Prompt 语宙 (paooo.com)](https://paooo.com/aigc-news/25271/) · 作者：Prompt 语宙研究院 · 发布时间：2026-07-12

## AI 30 秒核心看点 (TL;DR)

- 以迭代生成、排名、选择、训练范式优化多智能体通信，兼顾性能与token效率。
- 引入奖励函数、SFT/DPO与MCTS，提升训练数据质量和对话可读性。
- 在多智能体任务中优于单智能体基线和传统MAS，最高实现2.8倍性能提升。

## Optima是什么

Optima是清华大学推出的优化基于大型语言模型（LLM）的多智能体系统（MAS）的框架。基于一个迭代的生成、排名、选择和训练范式，显著提高通信效率和任务效果。Optima平衡了任务性能、令牌效率和通信可读性，探索了多种强化学习算法，并集成蒙特卡洛树搜索技术生成高质量的训练数据。在多智能体任务中，Optima展示超越单智能体基线和传统MAS的性能，实现了高达2.8倍的性能提升，并减少令牌使用。Optima的效率提升为更有效的推理计算和改进的推理时间扩展法则提供新的可能性。

## Optima的主要功能

- **通信效率提升**：O优化多智能体系统（MAS）中的智能体间通信，减少完成任务所需的令牌（token）数量，提高通信效率。

- **任务性能增强**：基于迭代训练和奖励函数的平衡，提升智能体在复杂任务中的表现，包括信息不对称问答和复杂推理任务。

- **可扩展性**：支持MAS在处理更大规模和更复杂的任务时保持有效性，提高系统的可扩展性。

- **推理时间扩展法则改进**：减少令牌使用，为改进推理时间扩展法则提供可能性，有助于在更低的计算成本下实现更好的性能。

## Optima的技术原理

- **迭代训练范式**：基于迭代的生成（generate）、排名（rank）、选择（select）和训练（train）范式，逐步优化智能体的行为。

- **奖励函数**：设计奖励函数，平衡任务性能、令牌效率和通信可读性，引导智能体在保持通信效率的同时完成任务。

- **强化学习算法**：探索包括监督式微调（SFT）、直接偏好优化（DPO）及混合方法在内的多种强化学习算法，优化智能体的行为。

- **蒙特卡洛树搜索（MCTS）**：集成MCTS启发式技术，将对话轮次视为树节点，探索多样化的交互路径，生成高质量的DPO训练数据。

- **多目标优化**：基于奖励函数同时考虑多个目标，在提升任务性能的同时，注重通信效率和输出的可解释性。

## Optima的项目地址

- **项目官网**：[chenweize1998.github.io/optima-project-page](https://chenweize1998.github.io/optima-project-page/?utm_source=ai-bot.cn)

- **GitHub仓库**：[https://github.com/thunlp/Optima](https://github.com/thunlp/Optima)

- **arXiv技术论文**：[https://arxiv.org/pdf/2410.08115](https://arxiv.org/pdf/2410.08115)

## Optima的应用场景

- **信息不对称问答**：在问答系统中，当问题的答案需要整合多个来源的信息时，优化智能体间的沟通提高答案的准确性和响应速度。

- **复杂推理任务**：对于需要多步骤推理的问题，如法律案例分析、科学问题解答等，帮助智能体更有效地协作，得出正确的结论。

- **软件开发**：在软件开发中，协调不同功能模块的开发，基于智能体间的有效沟通优化开发流程和提高代码质量。

- **决策支持系统**：在商业决策或政策制定中，帮助多个决策者或智能体共享信息、讨论方案，达成共识。

- **多智能体游戏**：在需要多个玩家或智能体协作的游戏中，优化玩家间的沟通策略，提高团队合作效率。

## 常见问题解答 (FAQ)

### Optima框架主要解决什么问题？
Optima主要解决多智能体系统中通信冗余、token消耗高和任务效果不稳定的问题。它通过迭代训练与多目标奖励平衡任务性能、令牌效率和通信可读性，从而提升协作推理效果。

### Optima为什么能提升多智能体任务表现？
它采用生成、排名、选择、训练的迭代范式，并结合SFT、DPO等方法优化智能体行为；同时用MCTS生成高质量训练数据，使智能体在复杂任务中更高效协作。

### Optima适合哪些应用场景？
适合信息不对称问答、复杂推理、软件开发、决策支持和多智能体游戏等场景，尤其适合需要多个智能体共享信息、协同推理并控制通信成本的任务。

---
探索 2,800+ 全球实用 AI 工具与官方直达入口：[语宙 AI 导航 (https://ai.paooo.com/)](https://ai.paooo.com/)