💡 站外导读:在刚刚落幕的 AI Engineer Code Summit 2026 上,“系统一(System One)模型”成为全场开发者讨论的核心风向标。长期以来,企业在构建 AI 原生软件时普遍陷入了“LLM 绝对中心化”的认知误区,盲目使用沉重、昂贵且伴随高幻觉率的自回归生成大模型来处理日常路由、分类与状态转移,导致高并发系统响应迟缓且工程维护成本极度高昂。TypeSafe AI 创始人 Diogo Almeida 携手企业搜索独角兽 Glean、自动化巨头 UiPath 与 HR 软件龙头 Workday,现场全景展示了以 Jev 为代表的非生成式确定性决策模型如何在秒级内完成数千次并行运算与锦标赛淘汰排序。本文将深入拆解系统一模型在工业级软件架构中的底层机制、对比范式与工程实践落地全景。

一、 从“拼接字符串碰运气”到“可靠智能”:生成式大模型在生产级软件中的可靠性天花板
在过去的生成式 AI 落地浪潮中,绝大多数团队的工程架构可以被精辟地概括为“拼接字符串并祈祷好运”(Concat strings together and hope for the best)。开发者将自然语言提示词(Prompt)送入像 GPT 或 Claude 这样的自回归大模型中,寄希望于模型能够稳定吐出符合预期的结构化 JSON。然而,在严肃的生产环境中,这种依赖纯概率采样的模式正遭遇致命的可靠性撞墙:
- “95% 爱因斯坦与 5% 憨豆先生”的无法预测性:正如 Diogo Almeida 在峰会主旨演讲中所言:“自回归大模型在 95% 的时间里表现得像爱因斯坦,但在另外 5% 的时间里却像憨豆先生(Mr. Bean)。如果你无法在运行时确切甄别它什么时候是爱因斯坦、什么时候是憨豆先生,你怎么敢拿它来自动化任何企业核心业务?”
- 结构化输出(Structured Outputs)并未根治时延与算力浪费:各大模型厂商推出的严格 JSON 约束,本质上只是在自回归解码树上施加了 Logits Mask 过滤,模型依然需要像打字机一样逐个 Token 生成完整的字段名、括号与冒号。对于仅需从 5 个业务状态中做出单选判决的高频场景,这种自回归计算带来了数百毫秒乃至秒级的严重拖累;
- 代码才是自动化的原生语言:软件工程的核心诉求是确定性、可测试性与毫秒级执行。将一个不可控的黑盒长文本生成器硬塞在关键业务链路的中心,彻底破坏了现代微服务架构的高内聚与低耦合原则。我们需要的是能够像逻辑门一样嵌入代码底层的确定性决策算子。
二、 系统一(System One)vs 系统二(System Two):大模型架构的分水岭与范式跃迁
认知心理学中的“双系统理论”正在深刻重构现代人工智能的基础设施分工。以 Jev 为代表的“系统一(System One)模型”彻底摒弃了逐字自回归生成的文本生成通道,专注于单次前向传播(Single Forward Pass)下的结构化评分、分类与概率直出;而传统的“系统二(System Two)模型”则专职负责长程链式思考(Chain-of-Thought)与复杂代码合成。两者的工程架构差异如下全景表所示:
| 评估对比维度 | 系统一模型 (以 Jev 为代表) | 传统系统二自回归 LLM | 传统机器学习分类器 (如 XGBoost/BERT) |
|---|---|---|---|
| 计算与解码机制 | 单次前向 Prefill 直出 Logits / 概率 | 自回归循环解码 (Token-by-Token) | 静态前向传播,权重固定 |
| 端到端 P99 时延 | 10ms ~ 30ms (支持每秒数万并发) | 800ms ~ 4000ms+ (长程链式更慢) | < 5ms (极速) |
| 零样本泛化能力 (Zero-shot) | 极强(支持运行时动态注入分类空间) | 极强(依赖长上下文与提示词工程) | 极弱(标签体系变更必须全量重训) |
| 结构性幻觉率 | 0% (数学级封闭集合输出,杜绝畸形) | 偶发 JSON 语法破损或语义偏离 | 0% |
| 调用成本 (Cost per Decision) | 接近纯计算成本,单次调用不足 $0.00005 | 输出 Token 计费高昂,高频调用吞噬预算 | 自托管硬件基础电费 |
| 软件集成定位 | 应用程序内的微型控制流分支条件 | 上层独立业务智能体或离线分析任务 | 传统特征工程流水线终端 |
三、 工业级实战全景:Glean、UiPath 与 Workday 如何用 Jev 重构关键业务链路
在 AI Engineer Code Summit 现场,多家全球软件巨头展示了将 Jev 融入核心系统后的颠覆性技术收益:
- Glean 的零样本动态分类架构(Zero-Shot Flexibility):
作为服务数百家财富 500 强企业的企业级智能搜索独角兽,Glean 每天需要对接客户海量异构文档和动态组织权限。Glean 工程师 Chinmay Goyal 透露,客户的分类标签体系(Taxonomy)随时在动态变更,传统方案如果采用小模型需要无休止地微调与部署,而采用大模型又会导致查询延迟超标。Glean 将 Jev 嵌入后台后,实现了“分类标签动态注入即时生效”——系统在保持低于 50ms 响应的同时,无需微调即可精准将内部跨源权限和敏感级别进行分流,对终端用户而言彻底屏蔽了后台模型调度的复杂性。
- UiPath 的文档块锦标赛排序算法(Tournament Chunk Ranking):
全球自动化编排巨头 UiPath 的工程师 Chibi Vikram 与 Kevin Bernstein 演示了一项极具震撼力的 RAG 重排实验。在传统检索增强生成中,对成百上千个切片进行 Cross-Encoder 精确打分会耗费数秒。UiPath 团队利用 Jev 设计了“锦标赛配对淘汰机制”:将切片划分为若干微型组,通过 Jev 在组内进行两两强弱对决,优胜者晋级下一轮。哪怕在单个请求中瞬时触发了数千次 Jev 并发调用,整个重排流程依然在不到 1 秒钟之内全量收敛,不仅选出了绝对高相关的上下文,更避免了推理 LLM 的算力空转。
- Workday 的端侧实时意图预判(Action-Level Intent Prediction):
知名人力资源与财务云巨头 Workday 首席工程师 Scott Roberts 展示了令人惊叹的原型设计:在员工请假或报销界面中,用户刚刚开始在键盘上敲下第一个字符,后台的 Jev 模型就已经以每秒数十次的频率分析用户的输入行为、历史上下文与日历状态,实时自动填充整张休假申请单。Roberts 将这种体验总结为“软件工程从‘预测用户要说什么’(Predicting what to say)向‘预测用户要做什么’(Predicting what to do)的本质进化”。
四、 面向下一代企业架构的“智能撒盐”工程学:重构工业级高可用微服务
知名 AI 技术社区 Latent Space 创始人 swyx 指出,Almeida 与头部企业的实战正在开启一场名为“智能撒盐(Liberally Sprinkle System One Calls)”的新开发范式:
- 将智能视为第四种逻辑门(The Fourth Logic Gate):在经典的电子与计算机体系中,与门(AND)、或门(OR)、非门(NOT)构成了现代计算的基础。而在 AI 时代,Jev 所代表的单次确定性语义判断,正成为程序员在编写条件分支
if/else时可以随手调用的第四种基础门电路; - 分层解耦的混合编排流水线:工业级系统绝不应该是非此即彼的。最健壮的工程拓扑必然是“前端高频 System 1 做精准门控、过滤与意图路由,后端低频 System 2 做高难度长程推理与最终交付”。这种架构将系统的 P99 延迟压降了 80% 以上,同时将 Token 成本削减了两个数量级;
- 回归早期互联网的纯粹创造力:正如 Almeida 在演讲结语中所说,大模型领域的探索正在从“为大模型而大模型”的浮夸叙事,回归到类似 2000 年初互联网兴起时的工程探索。工程师不再被封闭在提示词调优的狭隘空间内,而是重新拿回用代码重塑一切自动化的绝对掌控权。
📝 站长洞察 (Editor’s Insight)
从 SRE 运维与大规模高可用系统架构的视角审视,Jev 和 System One 模型的爆发标志着生成式 AI 正在由“概念狂热期”正式步入“工程理性期”。过去两年中,大量技术团队盲目推崇“All in Prompt”,将本该由确定性有限状态机(FSM)或轻量打分器处理的高频业务路由,生搬硬套给动辄数百亿参数的自回归大模型。这种做法不仅导致系统 P99 延迟飙升至数秒、云端 API 账单雪崩,更让 SRE 团队深陷于排查“偶发性 JSON 字段缺失”或“模型幻觉导致死循环”的梦魇中。Jev 的精妙之处在于它精准剥离了文本自回归的冗余开销,保留了深度学习对自然语义的高维表征能力,以单次前向直出概率的形式将智能降维为一个确定性计算单元。在多智能体(Multi-Agent)协作越来越普遍的今天,唯有将底层的每一次路由与判定成本压缩到毫秒与微美分级别,整个复杂自动化大厦才拥有坚如磐石的物理底座。
Jev 系统一模型适合哪些企业场景?
适合高频、低时延、强确定性的企业流程,如分类、路由、权限分流、状态转移和锦标赛排序等。它更像应用内的决策算子,而不是负责长文本生成的通用大模型。
系统一模型和传统大模型有什么区别?
系统一模型通过单次前向传播直接输出评分或概率,避免逐 Token 解码,因此时延更低、成本更稳、结构性幻觉更少;传统自回归大模型更适合长文本生成和复杂推理。
Glean 为什么要把 Jev 接入后台?
因为 Glean 需要处理动态变化的分类标签和权限体系。接入 Jev 后,可在不微调模型的情况下动态注入分类空间,并保持低于 50ms 的响应,适合生产级实时分流。
Jev适合替代哪些企业任务?
最适合高频、低风险、强结构约束的任务,如分类、路由、权限判断、状态机转移和表单填充。若任务需要长链推理、开放式创作或复杂工具编排,仍应保留自回归模型做上层决策。
如何验证低时延是否真能落地?
先用线上真实流量做 A/B,重点看 P95/P99 延迟、误分流率、回退率和人工兜底成本。再把标签体系、特征输入和阈值策略固化,避免只在离线集上“看起来很快”,上线后却频繁抖动。
