网页抓取

Cloudflare 推出了 Kitesurf，这是一款专为 AI 智能体（AI Agents）设计的云托管浏览器。通过优化浏览器堆栈并显著降低相比 Chromium 的资源消耗，Kitesurf 为高效的网页自动化和自主智能体开发开启了新时代。

Cloudflare 为 AI 公司设定了 9 月 15 日的最后期限，要求其必须区分搜索爬虫与训练爬虫，否则将在数百万个出版商网站上被默认拦截。

深入了解 15 个专为 AI 智能体设计的 MCP 服务器，这些工具利用模型上下文协议（MCP）让 LLM 具备实时搜索、数据分析和竞争对手监控的能力。