97%的网站对AI代理“隐形”:协议问题正在拖垮自主网络

Hacker News July 2026
来源:Hacker NewsAI agents归档:July 2026
一项惊人的分析显示,97%的网站没有为AI代理提供可编程接口,使得绝大多数网络对自主软件而言几乎完全不可见。这一发现暴露了现代AI的核心矛盾:模型能思考,却无法行动。

一项针对流量排名前10,000个网站的全面审计,为AI代理生态系统敲响了警钟:97%的网站没有提供专门的API、Webhook或工具接口供AI代理以编程方式调用。这意味着,即使是最先进的大型语言模型——具备复杂推理、多步骤规划和代码生成能力——实际上也无法执行预订航班、下单或更新CRM记录等现实世界操作。网络架构是为人类视觉消费而设计的,而非机器执行。剩下的3%可被代理访问的网站,几乎全是大型云平台(AWS、Google Cloud、Azure)和开发者工具(GitHub、Stripe、Twilio)。这造成了一种深刻的不对称:模型每个季度都在变得更聪明,但能与之交互的世界却几乎停滞不前。

技术深度解析

核心问题在于架构:现代网络栈是为“人在回路中”范式设计的。HTML、CSS和JavaScript渲染内容供眼睛和手指使用,而非解析器和函数调用。一个AI代理试图与典型的电商网站交互时,必须首先解析渲染后的DOM元素,推断按钮和表单的语义含义,生成合成点击事件,并处理不可预测的JavaScript状态变化。这个过程脆弱、缓慢且容易出错。

对比之下,一个真正的API优先设计则截然不同。像Stripe这样的网站会暴露一个RESTful端点`POST /v1/charges`,带有明确定义的参数。代理可以直接调用它,行为确定,错误代码清晰。那97%的差距,正是这种端点的缺失。

有几个开源项目正试图从代理端弥合这一差距。[BrowserGym](https://github.com/ServiceNow/BrowserGym)(5.2k星)提供了一个用于训练和评估代理在网页导航任务上的gym环境,但它仍然依赖脆弱的DOM解析。[Playwright](https://github.com/microsoft/playwright)(68k星)提供了强大的浏览器自动化功能,但它是一个通用工具,而非代理原生协议。[AgentQL](https://github.com/tinyfish-io/agentql)(1.8k星)是一个较新的入局者,试图为网页数据提取提供结构化查询语言,但它仍然是只读的。

一种更有前景的方法正从协议端浮现。Google的Agent-to-Agent Protocol(A2A)和Anthropic的Model Context Protocol(MCP)是标准化代理如何发现和调用能力的早期尝试。尤其是MCP,作为一种轻量级、基于JSON-RPC的协议,它允许服务器(即网站)暴露一个代理可以调用的“工具”列表,正在获得关注。一个实现了MCP的网站可以暴露诸如`search_products`、`add_to_cart`或`checkout`之类的工具。代理只需用所需参数调用这些工具即可。

当前代理-网页交互方法的性能对比:

| 方法 | 成功率(预订航班) | 平均延迟 | 错误率 | 可维护性 |
|---|---|---|---|---|
| DOM解析 + 点击模拟 | 42% | 8.2秒 | 23% | 极低(UI更新即失效) |
| 视觉(截图 + OCR) | 38% | 12.5秒 | 31% | 低(依赖渲染引擎) |
| 自定义API(例如Expedia API) | 97% | 1.1秒 | 2% | 高(稳定契约) |
| MCP协议(假设) | 95%(估计) | 0.8秒 | 3%(估计) | 高(标准化) |

数据要点: 基于DOM的方法与基于API/MCP的方法之间的差距巨大——延迟大约相差2倍,错误率相差10倍。这不是一个渐进式改进的问题;这是一个根本性的架构错配。实现可靠代理-网页交互的唯一途径,是通过标准化的服务器端协议。

关键参与者与案例研究

当前格局是一场双马竞赛:自下而上(代理端适配)与自上而下(协议标准化)。

自下而上:代理框架

Anthropic(Claude的计算机使用功能)、OpenAI(Operator)和Microsoft(Copilot的浏览器自动化)这样的公司,正在大力投资于让它们的代理能够“看见”和“点击”网页。Anthropic于2024年底发布的“计算机使用”功能,允许Claude截取屏幕截图并模拟鼠标点击。虽然在演示中令人印象深刻,但它存在上述性能问题。OpenAI的Operator采用了类似的方法,但使用了一个专门的“浏览器代理”模型。两者都是权宜之计。

自上而下:协议标准化

- Anthropic的Model Context Protocol(MCP): 于2024年底开源,MCP在开发者工具领域迅速获得采用。GitHub、Replit和Linear都已实现MCP服务器,允许Claude直接与代码仓库、代码执行环境和问题追踪器交互。例如,GitHub的MCP服务器暴露了诸如`create_repository`、`search_code`和`create_issue`之类的工具。这是代理访问的黄金标准。
- Google的Agent-to-Agent Protocol(A2A): 于2025年初宣布,A2A更为雄心勃勃,旨在允许来自不同生态系统的代理协商和委派任务。它不如MCP成熟,目前实际部署较少。
- Stripe的Agent Toolkit: Stripe一直是先驱,发布了专为AI代理设计的SDK,将其现有API封装成对代理友好的工具定义。这是一个务实的、公司特定的解决方案。

协议方法对比:

| 协议 | 创建者 | 焦点 | 采用情况(服务器数量) | 复杂度 | 关键限制 |
|---|---|---|---|---|---|
| MCP | Anthropic | 为LLM暴露工具 | ~500(估计) | 低 | 仅限客户端;无代理间通信 |
| A2A | Google | 代理间委派 | ~50(估计) | 高 | 对于简单工具调用而言过度设计 |
| 自定义SDK(Stripe) | Stripe | 单一公司API封装 | 1(Stripe) | 极低 | 不通用 |

数据要点: MCP

更多来自 Hacker News

GPT-5.6 Sol 破局:76% 胜率 + 61% 成本骤降,AI 编程成本壁垒被彻底击穿OpenAI 的 GPT-5.6 Sol 在 DeepSWE 基准测试中取得了 76% 的压倒性胜率,大幅超越前冠军 Fable。更关键的是,它在实现这一成绩的同时将任务成本降低了 61%——这一成就直接挑战了行业“更高性能必然需要更高算力OpenClaw基金会驯服病毒式AI代理:将治理代码嵌入奖励函数OpenClaw基金会代表了对一个像野火般在互联网上蔓延的病毒式AI代理失控成功的一次结构性修正。这个代理最初只是一个基于开源架构的技术玩具,但迅速演变成一个能够执行复杂数字任务的精密实体——从自动代码生成到跨API编排多步骤工作流。然而,本地大模型革命:你的下一台AI助手为何将住在PC里云端与本地AI之争并非靠争论,而是靠工程实践尘埃落定。过去十二个月,大量开发者和企业开始将大语言模型直接部署在个人电脑、工作站和边缘设备上。驱动力毋庸置疑:实时任务的零延迟交互、敏感信息的完全数据主权、以及不会随使用量暴涨的成本结构。我们的查看来源专题页Hacker News 已收录 5663 篇文章

相关专题

AI agents961 篇相关文章

时间归档

July 2026605 篇已发布文章

延伸阅读

WordPress 7.0's Silent Revolution: How Your Website Became an AI Agent's Autonomous TerritoryWordPress 7.0 has executed a silent coup. Beyond a routine update, its new API architecture fundamentally redefines the 提示工程化身血腥竞技:深入BattleLLMRobots的AI角斗场BattleLLMRobots将提示工程从枯燥的调试工作转变为一项观赏性运动。用户精心设计提示词,操控AI“机器人”在自动化竞技场中一决高下,极限测试大语言模型的推理能力、实时策略与社区驱动的创新力。AI智能体踢足球:Agentic FC开启自主模拟时代Agentic FC并非又一款足球经理游戏——它是一个活生生的实验室,让大语言模型从被动聊天机器人进化为自主决策者。借助模型上下文协议,多个AI智能体独立处理战术、转会与比赛策略,标志着我们在复杂闭环环境中测试与部署AI的方式迎来关键转折。Compendium Redefines Teamwork: AI Agents as Equal Collaborators in Shared WorkspacesCompendium launches the first shared workspace where AI agents operate as equal team members, not just tools. This marks

常见问题

这次模型发布“97% of Websites Are Invisible to AI Agents: The Protocol Problem Stalling Autonomous Web”的核心内容是什么?

A comprehensive audit of the top 10,000 websites by traffic has delivered a sobering verdict for the AI agent ecosystem: 97% of sites offer no dedicated API, webhook, or tool inter…

从“What is the Model Context Protocol (MCP) and how does it solve the agent-web gap?”看,这个模型发布为什么重要?

The core problem is architectural: the modern web stack was designed for a human-in-the-loop paradigm. HTML, CSS, and JavaScript render content for eyes and fingers, not for parsers and function calls. An AI agent attemp…

围绕“Why 97% of websites are invisible to AI agents and what it means for autonomous browsing”,这次模型更新对开发者和企业有什么影响?

开发者通常会重点关注能力提升、API 兼容性、成本变化和新场景机会,企业则会更关心可替代性、接入门槛和商业化落地空间。