据 The Verge 报道，网站正日益对 AI agent 关闭大门。这一转变将机器人拦截从常规爬虫扩展到代表用户执行任务的 agent，使同意问题从页面本身转移到网络边界。过去爬虫过滤依赖 robots 指令和速率限制，如今 agent 流量在请求到达应用逻辑之前就在边缘被评估。
这对 agent 工程很重要，因为边缘过滤改变了设计约束。无法出示可验证身份、或无法提供站点运营方认可的同意路径的任务型 agent，可能被归类为不受欢迎的流量，与爬虫一并被拦截。构建多 agent 系统的团队应把身份、来源和同意信号视为请求路径的一部分，而非事后补充，并应预期各站点之间存在差异，而非单一统一策略。
这一进展源于零售商与平台之间围绕 agent 流量的分歧，说明争议不仅是技术问题，也是商业和运营问题。从现有报道中仍不清楚的是：哪些站点在拦截、使用何种检测方法，以及是否正在形成 agent 身份的共享标准。工作室将持续跟踪边缘过滤与同意信号的演进，因为二者直接决定 agent 系统如何针对第三方站点部署。