随着对个人人工智能代理 (Personal AI Agents) 的依赖日益增加,它们被用于执行诸如产品比较、搜索支持信息,甚至代表用户完成购买等任务,这为网站所有者带来了新的技术挑战。这些代理充当了人类与互联网之间的中介,使得它们的流量在系统中显示为自动化流量 (Automated Traffic),这使得难以区分该活动是服务于商业目的还是构成安全风险。
为了应对这一挑战,Cloudflare 推出了一套新的分析工具和细粒度的访问策略,使企业能够按照自己的条件欢迎这些代理,而不是采取可能导致客户流失的全面封锁措施。
对代理流量的更深入洞察
这些新功能基于 Cloudflare 庞大的已验证机器人数据库,在安全分析 (Security Analytics) 部分增加了一个名为“个人助理” (Personal Assistants) 的新类别。这使得安全团队能够将此类流量与其它自动化机器人或人类流量分开进行监控。
- 精确统计: 新的“热门统计” (Top statistics) 工具提供了访问网站的代理列表以及每个代理发送的请求数量。
- 路径分析: 管理员可以过滤数据,以了解代理请求的路径、接收的状态码 (Status Codes) 以及它们发起的网络。
- 账户保护: 对于使用“账户滥用保护” (Account Abuse Protection) 功能的网站,反欺诈团队现在可以识别每个代理所代表的用户,这有助于区分客户的正常行为与使用人工智能代理的入侵尝试。
灵活且定制化的访问策略
Cloudflare 不仅提供了可见性,还通过将设置重命名为“人工智能爬虫和代理访问策略” (AI Crawler and Agent access policies) 提供了更大的控制权。这些策略允许网站所有者为每个受支持的代理选择不同级别的控制:
- 允许 (Allow): 确保代理无限制地访问。
- 在广告页面上屏蔽 (Block on pages with ads): 一种战略性选项,允许代理浏览内容,但禁止其访问依赖广告获利的页面。
- 完全屏蔽 (Block): 完全禁止代理访问。
为什么这一发展代表了网站管理的转变?
这一公告标志着从“打击机器人”阶段向“管理代理”阶段的转变。过去,处理自动化流量是通过封锁或允许来完成的,但随着代表真实客户的代理的出现,理解请求的上下文变得至关重要。
Cloudflare 试图解决的挑战是在代理充当中介时,保持网站与用户之间的关系。网站可能会识别出代理,但可能缺乏关键信息,例如:该用户是否为订阅者?他们授予了代理什么权限?Cloudflare 未来旨在寻找在保护用户隐私的同时通过代理传递用户上下文 (User Context) 的方法,以确保通过智能中介继续为真实客户提供正确的服务。