💡 站外导读：在自主 AI 智能体（Autonomous Agents）由网页浏览加速渗透至交易履约的临界点上，全球航空巨头美联航（United Airlines）率先打响了企业级防御战。知名行业权威 Search Engine Journal 披露，美联航最新修订的网站使用条款与乘客承运协议明确建立了一条严苛的“二元边界”：公开页面对传统搜索引擎索引依然开放，但严禁任何未授权第三方 AI 智能体执行搜索、比价、选座与购票，更明文禁止抓取票价排班数据用于模型训练或 Grounding。这标志着依赖 robots.txt 的传统爬虫治理彻底失效，巨头正通过法律承运合同直接穿透追责终端用户与 Agent 开发者，为全网 SEO、电商渠道与合规架构树立了全新的风向标。
一、美联航的“二元准入”铁律：为什么放行 Google 搜索却对 AI 智能体下达封杀令？
在互联网诞生以来的三十年里，网站所有者与外部自动化程序的互动规则一直由相对简单的网络爬虫协议（Robots Exclusion Protocol）维系。然而，随着具备自主决策、表单填写与支付履约能力的个人 AI 智能体（如 Meta Muse、各种自动化浏览器插件）快速涌现，这套传统秩序被彻底颠覆。
美联航在最新更新的官方声明与服务条款中，展现出一种极其清晰且决绝的战略切分：
- 对搜索引擎索引保持开放：各大主流搜索引擎（如 Googlebot、Bingbot）依然被豁免，获准抓取并索引 united.com 的公开页面。美联航明确表示，只要搜索爬虫用于展示自然搜索结果，航司依然乐见其成；
- 对 AI 智能体实施绝对禁入：任何在 united.com 或美联航 App 上自主或半自主执行搜索、预订、购票、管理行程或提取数据的软件、服务或功能，无论由用户本人操作、第三方运营还是 AI 实验室研发，一律必须取得美联航的书面正式授权许可；
- CEO 的核心商业警惕：正如美联航首席执行官斯科特·柯比（Scott Kirby）在芝加哥公开活动中所言：“我绝不希望在航空公司与乘客之间人为制造出另一个中间商（Middleman）。”航司花费数十年摆脱 GDS 与 OTA 的佣金盘剥建立起直销阵地，绝不会坐视新兴大模型平台演变为新的流量抽税中介。
二、三大现实风险阻击：凭证泄露、恶意代订与 FAA 监管死锁
在美联航数字信任中心（Digital Trust Center）发布的权威答疑中，航司罕见地从信息安全、消费者权益与联邦航空法规三个层面，为全行业推演了允许未授权 AI 智能体代订机票的灾难性后果：
1. 账号敏感凭证泄露与非预期扣款
用户为了让第三方 AI 智能体代劳，往往需要向智能体平台交出美联航前台账户的用户名、登录密码甚至是双重认证验证码。这不仅直接暴露了用户的姓名、常旅客历史记录与信用卡信息，极易引发非预期购票（Unintended Purchases）、账号设置篡改以及 MileagePlus 常旅客里程遭恶意盗刷。
2. 触碰 FAA 与 DOT 强制性法定合规红线
航空运输不同于普通电商，它受到美国联邦航空管理局（FAA）与交通部（DOT）极度严苛的行政监管。例如在值机（Check-in）环节，法律明文要求必须由旅客本人物理确认其托运与随身行李中不含任何爆炸物、易燃液体等违禁危险品。若该步骤由 AI 智能体在后台自动勾选完成，一旦发生空难或安检事故，将直接引发极其严重的法律责任认定死锁。
三、大模型 Grounding 禁令：从“防爬虫”升级为“防大模型意图锚定”
在美联航修改的条款中，最令 AI 开发者与 SEO 团队震动的是一条极具前瞻性的技术禁令：明文禁止任何第三方将美联航的票价、航班排班、机位余量、定价策略等数据，用于“训练（Train）、微调（Fine-tune）、锚定（Ground）、评估（Evaluate）或开发”任何人工智能模型。
这一条款精准击中了当前 AI 搜索与 Agent 架构的核心——Grounding（意图锚定/检索增强）：
- 瓦解收益管理（Yield Management）壁垒：航空公司的核心生命线在于其高度动态的差价算法系统。若大模型通过 API 或爬虫实时 Grounding 航司底价，大模型厂商就能轻而易举建立跨航司全局最优比价漏斗，使航司的高溢价客票策略彻底失效；
- 防范虚假幻觉与商业纠纷：大模型在缺乏强一致性事务保证的情况下，直接引用过期的缓存票价向用户承诺报价，最终导致用户在结账时遭遇差价投诉，这一黑锅最终往往被转嫁给航司。
四、Robots.txt 彻底失效：承运协议与用户穿透追责实战矩阵
传统网站技术团队在应对爬虫时往往迷信 robots.txt，但美联航的技术与法务团队给全行业上了一堂生动的实战课：截至 11 月 14 日，美联航的 robots.txt 文件中没有列出任何 AI 爬虫的名字。因为个人 AI 智能体以普通消费者的浏览器会话发起请求，根本不发布固定的 User-Agent，robots.txt 对此形同虚设。
美联航选择直接在法律层面祭出“降维打击”——将技术防线转移至乘客承运协议（Contract of Carriage）：
| 治理维度 | 传统搜索引擎蜘蛛 (Googlebot等) | RAG 索引爬虫 (GPTBot/ClaudeBot等) | 自主代订智能体 (Meta Muse/插件等) |
|---|---|---|---|
| 美联航准入状态 | 完全豁免 / 准许索引 | 严禁用于训练与 Grounding | 严令禁止 / 需前置书面授权 |
| 技术拦截手段 | 公开 robots.txt 规范指令 | WAF 拦截特定 User-Agent / IP 段 | 生物行为特征风控、设备指纹与风控验证 |
| 法律追责机制 | 行业通用协议，无直接惩戒 | 网站服务条款（Terms of Service）侵权诉讼 | 承运协议（Rule 6.J.6）直接无预警取消客票 |
| 违规责任承担主体 | 搜索引擎运营方 | AI 模型开发公司 | 旅客本人（连带智能体运营方与开发者） |
| 同业对标参照 | 全球航空与旅游业标配 | 《纽约时报》等主流媒体反扒防线 | Amazon 封杀 Meta Muse、eBay 限制买手 Bot |
承运协议 Rule 6.J.6 与 Rule 5.H 确立了极其严厉的惩罚条款：利用 AI 智能体制作、修改或服务客票，与臭名昭著的“隐藏城市购票（Hidden-City Ticketing）”并列为重大欺诈违约行为。美联航保留不经通知直接作废或取消全部涉事机票的绝对法定权力。
五、对 SEO 与独立站电商团队的四大关键启示
美联航的这一系列组合拳，为全网电商、SaaS 与在线服务平台提供了教科书般的合规治理参考：
- 立即清查并更新网站服务条款：切勿仅依赖 robots.txt。必须在法律条款中明确将“自主智能体代订、代买与数据抓取”与“传统搜索引擎索引”拆分为独立条款；
- 确立 Grounding 禁令红线：在数据使用限制中，明确加入“禁止用于任何大语言模型的训练、微调、Grounding 与评测”的表述，为未来的版权与数据侵权诉讼保留法理依据；
- 将用户契约与 Agent 绑定：效仿亚马逊与美联航的做法，在用户注册与购买条款中明确规定：任何由用户授权的 Agent 行为均被视为用户本人的直接民事行为，用户需承担因违规调用 Agent 带来的一切损失；
- 拥抱官方受控 API 合作模式：美联航在声明最后保留了未来接入受控第三方智能体的可能性。这意味着未来真正能够存活的 Agentic Commerce 必须通过官方双向鉴权、签署合规安全备忘录（MOU）的方式合规落地，野蛮爬取代购的时代已宣告终结。
📝 站长洞察 (Editor’s Insight)
美联航此次大刀阔斧更新条款，为整个数字经济敲响了警钟：大模型厂商长期鼓吹的“AI Agent 帮人类一键买票购物”，正遭遇现实世界法律与商业壁垒的迎头痛击。航司在乎的从来不是那点带宽，而是定价话语权、直销会员渠道与法律合规免责。当 AI 智能体试图抹平信息差、剥离高价值附加费并替人类签署安检声明时，它就已经触动了航空业的核心利益蛋糕。美联航极其精明地将 robots.txt 这种“君子协议”弃之不用，转而祭出承运合同与无预警退票的“法律核武器”，直接把枪口对准了最终买单的旅客。这意味着未来的 Agentic Commerce 绝非靠几行浏览器自动化脚本就能成型，缺乏官方授权与双向协议互认的野蛮代购智能体，在生产环境中注定是一颗随时会引爆客户投诉的定时炸弹。
美联航为什么允许搜索引擎抓取却禁AI智能体？
因为搜索引擎只负责展示自然搜索结果，不直接代用户完成交易；而AI智能体会代搜、比价、选座、购票并可能接触账户与支付信息。美联航担心中间商化、数据滥用和合规风险，因此对Agent设定更严格的书面授权门槛。
美联航条款对Grounding有什么限制？
条款明确禁止第三方将美联航票价、航班排班、机位余量和定价策略用于训练、微调、Grounding、评估或开发任何AI模型。这意味着航司不仅反爬，还在法律上阻断大模型把其数据作为实时检索锚点。
robots.txt为什么挡不住AI智能体？
因为很多AI智能体以普通浏览器会话运行，不一定使用固定User-Agent，也可能直接模拟真人操作。此时robots.txt难以识别和约束，航司只能转向服务条款、承运协议和账号层面的法律追责。
如何判断Agent抓取是否越界？
先区分公开检索、实时比价、下单代操作三层权限：只读抓取通常风险较低，涉及登录态、支付、改签与自动确认就应视为高风险代理行为。企业可用API白名单、速率限制、行为审计和签名请求来界定边界。
电商站点该如何应对AI Grounding？
不要只依赖robots.txt，需叠加条款声明、反爬策略、结构化数据控制和接口分层。对可被引用的内容开放索引，对价格、库存、结算等敏感能力改走授权API，并保留日志与证据链以便追责。
