互联网正面临流量性质的根本性转变;过去,交互直接发生在用户与网站之间,而现在人工智能代理(AI Agents)开始作为数字中介出现,代表数百万人类执行任务。尽管这种转变提高了效率,但它造成了深层的技术和安全鸿沟,因为网站看到的是“代理”而非“真实用户”,这导致了身份识别、欺诈预防和问责机制的失效。
网站与用户关系的侵蚀
目前的网络商业和安全模型依赖于网站识别用户并追踪其行为的能力。随着代理(如 Meta 的 Muse 或 OpenAI 的 dots)的引入,代理成为了“中介”(Intermediary),掩盖了关键数据。这种模糊性带来了复杂的挑战,包括:
- 友好欺诈(Friendly Fraud):用户授权代理进行购买,随后却声称该交易未经授权而提出异议。网站很难证明事实,因为数据来自代理的云基础设施,而非用户设备。
- 流量混杂(Traffic Commingling):当单个用户滥用共享代理时,网站可能被迫封锁整个代理,导致数千名与之相关的合法用户被封锁。
- 资源耗尽:代理能够全天候以超越人类的速度运行,这给搜索引擎和聊天服务等昂贵的端点(Endpoints)带来了巨大压力。
- 身份验证崩溃:CAPTCHA 等工具不再有效,因为代理并非人类;此外,身份验证(KYC)流程假设屏幕后存在真实个人,而使用代理时这一前提不再成立。
为什么这一发展在技术上很重要?
问题不在于自动化的存在,而在于中介原则(The Intermediation Principle);即使存在中介,用户与网站之间的商业关系和安全责任也必须保持。如果没有新的协议,网站要么被迫完全封锁代理(从而减少用户对其服务的访问),要么接受无法估量的安全和经济风险。
迈向新的协作协议
Cloudflare 提出了一种技术愿景,旨在建立开放标准,使代理和网站能够“协作”而非冲突。该愿景包括多条技术路径:
- 代理身份(Web Bot Auth - WBA):一种允许代理对其请求进行数字签名的协议,为识别平台和代理运营商提供了安全手段。
- 声誉管理(MOLE):一种旨在根据用户声誉进行速率限制(Rate Limiting)的协议,无需泄露个人身份,从而保护隐私。
- TAD 联盟(Trusted Agent Delegation):Cloudflare 宣布成立该联盟,汇集来自各行业(运营商、支付提供商、发布商)的代表,在 IETF 组织内制定解决这些差距的全球标准。
这对 Cloudflare 用户有何实际改变?
Cloudflare 已经开始提供应对这一新现实的具体工具,包括在安全分析中对“个人助理”流量进行分类,并提供控制策略,允许网站根据特定页面允许或阻止某些代理。此外,通过账户滥用保护(Account Abuse Protection)功能,将代理与用户关联,确保在不封锁其他用户的情况下惩罚滥用者。