Prompt 语宙Prompt 语宙
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
阅读: 腾讯CL-bench震撼发布:AI学习能力基准测试,GPT-5.1解决率仅23.7%暴露行业瓶颈
Share
通知 阅读更多
Font Resizer字体
Font Resizer字体
Prompt 语宙Prompt 语宙
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
已有帐户? 登陆
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
腾讯CL-bench震撼发布:AI学习能力基准测试,GPT-5.1解决率仅23.7%暴露行业瓶颈
Prompt 语宙 > AI 工具 > 腾讯CL-bench震撼发布:AI学习能力基准测试,GPT-5.1解决率仅23.7%暴露行业瓶颈
AI 工具AIGC 资讯最新趋势

腾讯CL-bench震撼发布:AI学习能力基准测试,GPT-5.1解决率仅23.7%暴露行业瓶颈

Prompt 语宙研究院
最近更新: 2026年6月7日 下午8:06
AI基准测试 上下文学习 大语言模型 模型能力评估 腾讯混元
SHARE
⚡ Prompt 语宙 AI 导读 · 30 秒核心看点
  • CL-bench把评测重点从“记住多少”转向“能否从新上下文中实时学习”。
  • 基准覆盖500个场景、1899个任务,采用无污染设计与多维验证标准。
  • GPT-5.1解决率仅23.7%,说明顶尖模型在动态学习能力上仍有明显短板。

💡 站外导读:当前大模型竞赛如火如荼,但一个关键瓶颈正浮出水面:它们真的会学习吗?多数模型依赖海量参数记忆,而非从动态信息中实时推理。腾讯与复旦大学联合发布的CL-bench基准测试,直击这一痛点。它构建了无污染的复杂场景,强制模型从全新上下文中学习,结果显示,即便是顶尖模型GPT-5.1,解决率也仅23.7%。这不仅是性能差距,更揭示了从‘记忆机器’向‘学习系统’演进的根本挑战。

CL-bench是什么

CL-bench是腾讯混元与复旦大学联合推出的Context学习能力评测基准,能衡量大语言模型从全新上下文信息中实时学习、应用知识的能力。CL-bench基准包含500个专家精心构建的复杂场景、1899个任务,涵盖领域知识推理、规则系统应用、程序性任务执行和经验发现与模拟四大类。测试显示,最强模型GPT-5.1解决率仅23.7%,揭示当前AI”不会现场学习”的核心瓶颈,为模型优化指明新方向。

阅读目录
  • CL-bench是什么
  • CL-bench的主要功能
  • CL-bench的技术原理
  • CL-bench的项目地址
  • CL-bench的应用场景
      • 📝 站长洞察 (Editor’s Insight)

CL-bench

CL-bench的主要功能

  • 实时学习能力评测:支持评测大语言模型从全新上下文信息中实时学习、应用知识的能力。
  • 大规模测试集构建:构建包含500个复杂场景、1899个任务和31607个验证标准的测试集,覆盖领域知识推理、规则系统应用、程序性任务执行和经验发现与模拟四类真实世界场景。
  • 无污染数据设计:采用无污染设计确保数据新颖性,通过虚构创作、现有内容修改和整合小众新兴内容,防止模型依靠记忆非学来解决问题。
  • 序列依赖验证:验证模型在序列依赖任务中的多轮次推理能力,51.1%的任务需要基于前期交互结果进行后续推理。
  • 多维度评估体系:提供多维度评估体系,平均每个任务包含16.6个评估标准,从多个角度全面检验模型对Context的理解和应用准确性。

CL-bench的技术原理

  • 自包含Context环境:CL-bench的核心技术原理为构建完全自包含的Context环境,确保解决任务所需的全部信息都显式地提供在Context本身之中,不需要外部检索,不支持隐藏假设。强制模型必须从当前输入的新信息中汲取营养,非调用预训练阶段封存的内部知识,真实反映模型的Context学习能力非记忆能力。
  • 三重无污染策略:为实现无污染评估,CL-bench采用三重技术策略:专家创作完全虚构的内容,如为虚构国家设计完整的法律体系或创建具有独特语法的新编程语言;对现实世界内容进行系统性修改以创建变体,包括更改历史事件、改变科学定义或修改技术文档;纳入在预训练数据集中代表性极低的小众或近期新兴内容,如前沿研究发现和新发布的产品手册。
  • 复杂性与可验证性设计:在任务设计上,CL-bench强调高复杂性和序列依赖性,51.1%的任务设计多轮次交互机制,后续任务的解决方案依赖于前期交互结果,显著增加任务难度、模拟真实工作场景。同时,每个任务都设置完全可验证的评估标准,平均每个Context关联63.2个验证标准,通过多角度评估确保对模型性能的全面检验,避免单一指标带来的评估偏差。

CL-bench的项目地址

  • 项目官网:https://www.clbench.com/
  • GitHub仓库:https://github.com/Tencent-Hunyuan/CL-bench
  • HuggingFace模型库:https://huggingface.co/datasets/tencent/CL-bench

CL-bench的应用场景

  • AI模型能力评估:为研究机构和企业提供标准化的Context学习能力评测工具,精准识别模型在真实场景应用中的能力短板,指导模型优化方向。
  • 新模型研发验证:在大语言模型研发过程中作为核心测试环节,验证新版本模型是否真正具备从动态信息中学习的突破,非仅仅提升参数记忆能力。
  • 行业解决方案选型:帮助企业用户评估不同商用模型在特定业务场景下的Context学习表现,为选择适合自身需求的AI解决方案提供客观依据。
  • 教育培训领域:作为教学案例和实验平台,帮助AI从业者理解Context学习与参数学习的本质区别,培养针对真实应用场景的模型设计和调优能力。
  • 学术研究基准:为学术界提供统一的Context学习研究基准,推动相关领域形成可对比、可复现的研究成果,加速Context学习理论和技术的整体进步。

📝 站长洞察 (Editor’s Insight)

CL-bench的发布,标志着AI评测进入2.0时代:从‘知道多少’转向‘能学多快’。这绝非一次简单的刷榜,而是对当前大模型架构范式的一次严肃拷问。当行业痴迷于参数规模与静态知识库时,腾讯此举将焦点拉回智能的本质——学习与适应。23.7%的解决率是一个警钟,它宣告了‘静态智能’的局限。未来真正的突破,必将属于那些能高效整合新信息、实现在线推理的架构。对于开发者和企业而言,这意味着在模型选型时,除了看跑分,更要看其在动态、真实任务流中的‘现场学习表现’。CL-bench为下一代AI——真正具备持续学习能力的智能体——铺就了第一块试金石。

🧭 文中关联 AI 工具官网与参数卡(语宙 AI 导航)
HuggingFace ↗
HuggingFace:AI模型开发社区,面向大语言模型场景提供便捷实用的在线功能支持,涵盖大模型等实用方向。
腾讯混元 ↗
腾讯混元大模型是腾讯研发的具备跨领域知识和自然语言理解能力的大语言模型。
❓ 常见问题解答(FAQ)
CL-bench主要评测什么能力?

CL-bench主要评测大语言模型的Context学习能力,也就是模型能否从全新上下文中实时学习、应用规则并完成任务,而不是依赖预训练记忆或外部检索来作答。

CL-bench为什么说是无污染基准?

因为它通过虚构内容、修改现实内容、引入小众新兴内容等方式,尽量避免模型直接靠训练记忆“撞答案”,从而更真实地检验现场学习与推理能力。

GPT-5.1在CL-bench上的结果说明什么?

文中给出的结果是GPT-5.1解决率仅23.7%。这说明即便顶尖模型,在复杂、动态、需要多轮上下文学习的任务中,能力仍明显不足,行业仍面临“会记忆但不会学习”的瓶颈。

🔬 语宙深潜追问 · 进阶实操拆解
CL-bench这类测试怎么避免污染?

核心是隐藏任务分布、使用可验证答案、引入序列依赖和动态场景,避免模型靠记忆刷分。最好再做时间切分和跨域复测,确认提升来自学习能力而非数据泄漏。

企业该怎么评估模型学习能力?

别只测一次问答,应该看模型能否在同一会话里吸收新规则、修正错误并稳定迁移到后续任务。最实用的是把真实业务流程拆成连续任务链,观察失败恢复率。

🗳️ 读者观点微投票 · 您的实战立场是?
AI会不会现场学习,才是最大瓶颈?
🕸️ 语宙向量知识图谱 · 语义强关联深度内链
⚡ 所属权威专题:OpenAI GPT 与 Sora 生态 →
  • ​腾讯与人大高瓴联合推出开源规划评测框架 PlanningBench
  • SimpleQA – OpenAI开源的新基准,用于评估前沿模型的事实准确性
  • 实时动态交互遭遇滑铁卢!英伟达携手UT-Austin发布Realtime-Bench:最强GPT-6 Astra成功率仅44%、盲目堆算力失效与时机博弈全景评测深度拆解
  • FullStack Bench – 字节豆包联合M-A-P社区开源的全新代码评估基准
🏛️ Prompt 语宙研究院 · Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
📄 Markdown 纯净版
💡 这篇内容对您有启发吗?
📡 RSS 订阅✨ 提交 AI 工具 / 合作
🚀 Prompt 语宙 AI 创作者生态:探索 2,800+ 全球实用 AI 工具与高精度生图提示词咒语库
🧭 语宙 AI 导航 (ai.paooo.com)🎨 AI 生图 Prompt 库📚 核心专题导航⚡ AIGC 早报生成器
Pageone
GLM-Zero – 智谱AI推出的深度推理模型
CombatVLA:淘天集团推出3D游戏专用VLA模型,推理速度提升50倍,超越人类玩家
70亿美元估值叫板英伟达!英国独角兽Fractile斩获7.2亿美元C轮:3D堆叠DRAM击穿大模型内存墙、自研ML编译器与Agentic推理降本全景深度拆解
告别字节两年半后重返一线!原今日头条CEO陈林携“小鹿爱学”杀入AI原生教育:从即时答案拐杖到苏格拉底式启发智能体全景深度拆解
TAGGED:AI基准测试上下文学习大语言模型模型能力评估腾讯混元
分享
Email 复制链接 打印
Share
Prompt 语宙研究院 头像
ByPrompt 语宙研究院
Follow:
Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
上一篇 MiniCPM-o 4.5开源发布:9B参数全模态模型,实时看听说,端侧运行超越GPT-4o MiniCPM-o 4.5开源发布:9B参数全模态模型,实时看听说,端侧运行超越GPT-4o
下一篇 ACE-Step 1.5:消费级硬件跑出商业级音乐生成!ACE Studio联合StepFun开源模型,4步推理2秒生成4分钟歌曲 ACE-Step 1.5:消费级硬件跑出商业级音乐生成!ACE Studio联合StepFun开源模型,4步推理2秒生成4分钟歌曲
Ad image
Ad image

最近更新

WordPress 7.2版本更新与默认随机重定向、Secrets API撤回及MCP核心能力拆解封面图
官方博客竟把关闭过滤器写错了!WordPress 7.2前瞻全拆解:默认/random/暗藏隐私与SEO风险、Secrets API紧急撤回与3项MCP只读能力落地
AI 工具
Anthropic上市募资与算力长约的隐喻:现金光环上升,数据中心暗链延伸,治理水晶承受张力与阻力冲击。
募资超1070亿美元却背负9000亿算力长约!Anthropic史上最大IPO背后的三大隐忧:1040亿年内亏损、地方抵制潮与PBC治理死结
AIGC 资讯
微软Copilot与Claude/ChatGPT价格战隐喻:发光玻璃表格堡垒守住Excel,数据流高效汇聚,企业AI竞争升级
3000万付费仅吃下4.5亿席位不到7%!微软Ignite正面叫板Claude与ChatGPT:月均30美元VS 205美元价格战与Excel保卫战全拆解
AIGC 资讯
联想AI推理时代的端边云全栈算力插画:玻璃拟态服务器核心发光,光流连接云端与边缘节点,呈现营收与订单增长动能。
AI营收暴涨80%且握5300亿服务器订单!联想Q2单季营收首破2000亿、净利狂飙166%:端边云全栈算力如何接住推理时代红利?
AIGC 资讯

相关推荐

Elevate.AI
AI 工具

Elevate.AI

remaker
AI办公效率 AI智能体 AI视频生成 AI音频与语音
OpenMath-Nemotron – 英伟达开源的数学推理系列模型
AIGC 资讯

OpenMath-Nemotron – 英伟达开源的数学推理系列模型

Prompt 语宙研究院
AI智能体 DeepSeek HuggingFace 大模型微调 开源大模型
MiroFish:开源AI预测引擎如何用多智能体技术构建平行数字世界,实现精准未来推演
AI 工具最新趋势

MiroFish:开源AI预测引擎如何用多智能体技术构建平行数字世界,实现精准未来推演

Prompt 语宙研究院
AI预测引擎 OASIS引擎 多智能体技术 平行数字世界 数字孪生
Science Skills – 谷歌 DeepMind 开源的科研技能工具包
AIGC 资讯

Science Skills – 谷歌 DeepMind 开源的科研技能工具包

Prompt 语宙研究院
AI智能体 RAG检索增强 开源大模型
/ Prompt 语宙 /

探索生成式 AI 的无限创作潜能,一站式获取前沿 AIGC 资讯、高阶 Prompt 咒语与全球实用 AI 工具。

核心专栏

  • 语宙 AI 工具导航
  • EVA 视觉抠图工坊Hot
  • 出海数字营销宝典
  • AI 生图咒语灵感库
  • 24H 硅谷 AI 情报流

生态与服务

  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作

标签

开源大模型 AI智能体 AI办公效率 AI绘画提示词 OpenAI 大模型微调 Midjourney AI编程 stable diffusion AI视频生成 ChatGPT 3D与空间智能 HuggingFace AI音频与语音 RAG检索增强 Claude Flux AIGC Gemini 通义千问 Anthropic Llama Cursor DeepSeek Prompt AI Agent Kimi 智谱AI 具身智能 YouTube
Prompt 语宙Prompt 语宙
Follow US
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.