Cloudflare 全新推出的“AI爬取控制”（AI Crawl Control）功能现已正式全面上线，所有付费用户均可启用。该功能允许用户向 AI 爬虫返回可自定义的 402 Payment Required 状态码，而非传统意义上的直接屏蔽。
以往，内容提供方仅能选择完全阻止或放任 AI 爬虫抓取内容。如今，AI Crawl Control 在控制面板中新增了“阻断并附带消息”选项，用户可设置个性化提示信息，例如：“如需使用内容，请邮件联系 partnerships@yoursite.com 或致电 1-800-LICENSE”，或“高级内容访问及授权请前往 api.yoursite.com/pricing”。这些自定义内容将随 402 响应一同返回，为内容授权合作提供一条清晰的沟通路径。
据 Cloudflare 透露，平台每日已为用户发出超过十亿次 402 状态码，反映出业界对“先协商后访问”机制的高度需求。展望未来，团队计划在 402 响应中加入更多结构化信息，如内容估值、更新频率和授权条款等，并持续推进 Pay Per Crawl 功能开发，致力于构建支持按次计费的自动化内容变现体系。
