# PlanningBench – 腾讯混元等开源的大模型规划能力评测框架

- Link: https://paooo.com/aigc-news/18536/
- Published: 2026-06-07T17:55:53+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 面向真实规划场景，PlanningBench用六大任务家族和三层约束体系评测[大模型](https://paooo.com/ai-study/)
   可执行性。
 * 通过Generator-Responder-Critic闭环合成与自动checklist，精准识别“局部正确但整体
   不可执行”。
 * 实测显示，少量可验证样本即可用于GRPO训练，并迁移提升外部规划基准表现。

## PlanningBench是什么

PlanningBench 是腾讯混元团队联合中国人民大学高瓴人工智能学院等机构推出的开源框架，
专注于大语言模型的规划能力评测与训练。框架从真实场景出发，构建一套覆盖六大类、30
余种规划任务的可验证数据生成体系，通过约束驱动的闭环合成流程，让模型规划结果从看起来
合理走向真的可执行。

阅读目录

 * [PlanningBench是什么](https://paooo.com/aigc-news/18536/#planningbench%e6%98%af%e4%bb%80%e4%b9%88)
 * [PlanningBench的主要功能](https://paooo.com/aigc-news/18536/#planningbench%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [PlanningBench的技术原理](https://paooo.com/aigc-news/18536/#planningbench%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [如何使用PlanningBench](https://paooo.com/aigc-news/18536/#%e5%a6%82%e4%bd%95%e4%bd%bf%e7%94%a8planningbench)
 * [PlanningBench的核心优势](https://paooo.com/aigc-news/18536/#planningbench%e7%9a%84%e6%a0%b8%e5%bf%83%e4%bc%98%e5%8a%bf)
 * [PlanningBench的项目地址](https://paooo.com/aigc-news/18536/#planningbench%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [PlanningBench的同类竞品对比](https://paooo.com/aigc-news/18536/#planningbench%e7%9a%84%e5%90%8c%e7%b1%bb%e7%ab%9e%e5%93%81%e5%af%b9%e6%af%94)
 * [PlanningBench的应用场景](https://paooo.com/aigc-news/18536/#planningbench%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![PlanningBench](https://paooo.com/wp-content/uploads/2026/06/PlanningBench-website-
1.avif)

## PlanningBench的主要功能

 * **真实场景覆盖**：涵盖日程排布、资源分配、人力排班、路径调度、生产运营、应急服务
   六大类共30余种具体规划任务。
 * **三层约束体系**：将规划难度拆解为基础约束、中等约束和困难约束，实现任务难度的
   精细化控制。
 * **自动验证机制**：每条实例配套可执行checklist，支持Avg-pass和All-pass双指标评
   测。
 * **闭环数据生成**：通过Generator生成问题、Responder尝试解答、Critic验证答案的闭
   环流程，自动增强数据难度。
 * **训练信号输出**：可验证样本可直接用于强化学习训练，为模型提供稳定的规划能力优
   化信号。

## PlanningBench的技术原理

 * **真实场景抽象与约束体系构建**：PlanningBench 将由具有规划经验的专业标注人员与
   算法研究人员协作，从个人通勤、企业排产、医疗应急等真实场景中抽象出可复用的问题
   结构，最终形成六大规划任务家族与 30 余种具体任务类型，将约束划分为基础约束（时间
   窗口、资源边界）、中等约束（多目标优化、依赖关系）和困难约束（异常恢复、目标冲突）
   三个层级，使数据生成在结构化设计空间中组合任务与约束。
 * **约束驱动的闭环合成流程**：框架的核心是一个 Generator-Responder-Critic 三角色
   协作的闭环系统：Generator 根据采样的任务与约束组合生成自包含的规划问题及对应验证
   清单；Responder 模型尝试生成方案；Critic 依据 checklist 逐项检查答案是否满足全部
   要求，若通过则提高难度，否则保留为挑战性样本，使 PlanningBench 成为一个能主动
   寻找模型能力边界的动态数据生成系统。
 * **三层难度约束体系**：PlanningBench 将规划难度拆解为任务结构、约束层级、资源紧张
   度、目标冲突、依赖关系和异常处理等因素，通过控制约束池的采样分布来调控生成数据
   的难度。基础约束确保方案完整性与可执行性，中等约束引入公平性与负载均衡要求，困难
   约束则测试模型在不可行识别、最小变更重规划和鲁棒性设计上的能力，使难度提升真正
   作用于规划推理深度。

## 如何使用PlanningBench

 * **获取资源**：访问 GitHub 仓库克隆代码，或从 HuggingFace 下载数据集。
 * **运行评测**：加载PlanningBench评测集，调用模型生成规划方案，使用内置checklist
   自动计算Avg-pass和All-pass指标。
 * **生成定制数据**：配置任务类型与约束层级，运行闭环生成流程，按需产出特定难度和
   领域的规划训练数据。
 * **训练模型**：用生成的可验证样本作为奖励信号，对目标模型进行强化学习训练，迁移
   到下游规划任务。

## PlanningBench的核心优势

 * **可验证性**：通过自动checklist精确判定方案是否全局可执行。
 * **难度可控**：基于约束层级而非简单增加提示词长度来调控任务难度，更贴近真实规划
   复杂度。
 * **诊断精准**：Avg-pass与All-pass双指标能识别”局部正确但整体不可执行”的模型输出。
 * **训练迁移**：仅300条样本即可通过GRPO训练提升模型在外部规划基准和通用指令遵循
   任务上的表现。
 * **场景真实**：任务来源于通勤、排产、医疗调度等实际场景，避免模型在固定题库上过
   拟合。

## PlanningBench的项目地址

 * **GitHub仓库**：https://github.com/Tencent-Hunyuan/PlanningBench
 * **HuggingFace模型库**：https://huggingface.co/datasets/tencent/PlanningBench
 * **arXiv技术论文**：https://arxiv.org/pdf/2605.20873

## PlanningBench的同类竞品对比

  |  维度 |  PlanningBench |  AgentBench |  
   |  **核心定位** |  专注于大模型**规划能力**的评测与训练框架，强调从”看起来合理”到”真的可执行”。 |  综合性大模型**[智能体](https://paooo.com/trends/)能力**评测框架，覆盖推理、决策、工具使用、环境交互等多维度。 |  
 |  **任务覆盖** |  覆盖6大类30余种真实规划任务，包括日程排布、资源分配、人力排班、路径调度、生产运营、应急服务。 |  覆盖8个交互环境，包括操作系统、数据库、知识图谱、数字卡牌、横向思维、家庭管理、网上购物、网页浏览。 |  
 |  **验证机制** |  每条实例配套结构化checklist，自动逐项验证约束满足情况，精确判定方案是否全局可执行。 |  基于环境执行反馈与结果匹配判定任务成功，不同环境有独立的验证逻辑。 |  
 |  **评测指标** |  采用Avg-pass（局部约束满足率）与All-pass（全局可执行率）双指标，识别”局部正确但整体不可执行”的输出。 |  主要采用Success Rate（成功率），按8个环境分别统计，衡量任务最终完成度。 |  
 |  **难度控制** |  通过三层约束体系（基础/中等/困难）与闭环难度增强机制，主动调控约束耦合度和资源冲突强度。 |  通过多轮交互（5-50轮）和环境复杂度递进提升难度，更侧重交互深度而非约束密度。 |  
 |  **环境交互** |  面向静态规划问题求解，模型在明确输入下生成完整方案，无需与外部环境实时交互。 |  要求模型与模拟环境（如bash终端、浏览器、数据库）进行实时多轮交互，动态获取反馈。 |  
 |  **训练支持** |  原生支持训练，可验证数据可直接作为GRPO等强化学习的奖励信号，且能迁移到外部基准。 |  主要用于评测，框架本身不直接提供可扩展的训练数据生成能力。 |

## PlanningBench的应用场景

 * **模型能力诊断**：精准识别大模型在约束推理、资源分配、状态跟踪等规划核心能力上
   的短板。
 * **智能体训练**：为AI Agent提供可验证的规划训练数据，提升其在日程安排、物流调度
   等任务中的可靠性。
 * **学术研究**：作为规划能力研究的基准工具，支持可复现、可扩展的模型对比实验。
 * **企业排程优化**：基于框架生成特定业务场景（如护士排班、生产排产）的评测数据，
   评估模型落地可行性。
 * **教育分组与资源分配**：用学生分组、物资分发等任务类型，验证模型在多约束条件下
   的公平性与最优性。

🧭 文中关联 [AI 工具](https://ai.paooo.com/)官网与参数卡（语宙 AI 导航）

**腾讯混元 ↗**

腾讯混元大模型是腾讯研发的具备跨领域知识和自然语言理解能力的大语言模型。

**HuggingFace ↗**

HuggingFace：AI模型开发社区，面向大语言模型场景提供便捷实用的在线功能支持，涵盖大
模型等实用方向。

❓ 常见问题解答（FAQ）

PlanningBench主要评测什么能力？

PlanningBench 主要评测大语言模型的规划能力，重点看方案是否不仅“合理”，而且能在真实
约束下“全局可执行”。它覆盖日程、排班、调度、排产、应急等六大类30余种任务。

PlanningBench的Avg-pass和All-pass有什么区别？

Avg-pass衡量局部约束满足率，适合看模型是否部分答对；All-pass衡量整套方案是否全部
满足约束，更能反映最终是否真的可执行。两者结合可诊断“局部正确但整体失败”的输出。

PlanningBench可以怎么用来训练模型？

它提供可验证样本和闭环生成流程，可直接作为强化学习训练信号。文中提到，约300条样本
即可通过GRPO训练提升模型在外部规划基准和通用指令遵循任务上的表现。

🔬 语宙深潜追问 · 进阶实操拆解

PlanningBench适合怎么接入训练？

先用它做基线评测，找出模型在任务分解、约束遵循和步骤顺序上的薄弱点，再用少量高质量
样本做GRPO或偏好优化。训练时要把checklist结果回流到数据构造里，形成闭环。

Avg-pass和All-pass该怎么解读？

Avg-pass看平均完成度，适合判断整体进步；All-pass更严格，能暴露长链路规划中的单点
失败。实际落地时两者要一起看，因为很多模型平均分不错，但在关键约束上仍会翻车。

🗳️ 读者观点微投票 · 您的实战立场是？

规划评测框架，先测能力还是先训模型？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [​腾讯与人大高瓴联合推出开源规划评测框架 PlanningBench](https://paooo.com/aigc-news/18474/)
 * [FullStack Bench – 字节豆包联合M-A-P社区开源的全新代码评估基准](https://paooo.com/aigc-news/25053/)
 * [PlanGEN – 谷歌研究团队推出的多智能体框架](https://paooo.com/aigc-news/21087/)
 * [美团发布VitaBench：首个生活场景大模型Agent评测基准，66个工具与跨场景任务重新定义AI评测](https://paooo.com/aigc-news/13271/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/18536/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
