인터넷은 트래픽의 본질적인 변화에 직면해 있습니다. 과거에는 사용자와 웹사이트 간의 직접적인 상호작용이 이루어졌으나, 이제는 인공지능 에이전트(AI Agents)가 수백만 명의 인간을 대신하여 작업을 수행하는 디지털 중개자로 등장하기 시작했습니다. 이러한 변화는 효율적이지만, 웹사이트가 '실제 사용자' 대신 '에이전트'를 보게 됨으로써 신원 확인, 사기 방지, 책임 보장 능력이 상실되는 심각한 기술적 및 보안적 격차를 초래합니다.
웹사이트와 사용자 간 관계의 침식
현재 웹의 비즈니스 및 보안 모델은 웹사이트가 사용자를 식별하고 행동을 추적할 수 있다는 전제에 의존합니다. Meta의 Muse나 OpenAI의 dots와 같은 에이전트가 도입되면서, 에이전트는 핵심 데이터를 가리는 '중개자(Intermediary)' 역할을 하게 됩니다. 이러한 모호성은 다음과 같은 복잡한 기술적 과제를 야기합니다.
- 친절한 사기(Friendly Fraud): 사용자가 에이전트에게 구매를 위임한 후, 나중에 승인되지 않은 거래라고 주장하며 이의를 제기하는 경우입니다. 웹사이트는 데이터가 사용자의 기기가 아닌 에이전트의 클라우드 인프라에서 오기 때문에 이를 반증하기 어렵습니다.
- 트래픽 혼합(Traffic Commingling): 한 사용자가 공유 에이전트를 악용할 경우, 웹사이트는 해당 에이전트를 완전히 차단해야 할 수 있으며, 이로 인해 에이전트와 연결된 수천 명의 합법적인 사용자까지 차단되는 결과가 발생합니다.
- 자원 고갈: 에이전트가 인간보다 빠른 속도로 24시간 내내 작동할 수 있는 능력은 검색 엔진이나 채팅 서비스와 같은 비용이 많이 드는 엔드포인트(Endpoints)에 엄청난 압박을 가합니다.
- 신원 확인 붕괴: 에이전트는 인간이 아니기 때문에 CAPTCHA와 같은 도구는 더 이상 효과적이지 않습니다. 또한, 고객 알기 제도(KYC)는 화면 뒤에 실제 사람이 있다는 전제를 바탕으로 하지만, 에이전트를 사용할 때는 이 전제가 성립하지 않습니다.
이러한 발전이 기술적으로 중요한 이유
문제는 자동화의 존재 자체가 아니라 중개 원칙(The Intermediation Principle)에 있습니다. 중개자가 존재하더라도 비즈니스 관계와 보안 책임은 사용자와 웹사이트 사이에 유지되어야 합니다. 새로운 프로토콜이 없다면 웹사이트는 에이전트를 완전히 차단하거나(사용자의 서비스 접근성 감소), 계산되지 않은 보안 및 경제적 위험을 감수해야 합니다.
새로운 협력적 프로토콜을 향하여
Cloudflare는 에이전트와 웹사이트가 충돌하는 대신 '협력'할 수 있도록 하는 개방형 표준 구축에 기반한 기술적 비전을 제시합니다. 이 비전에는 다음과 같은 몇 가지 기술적 경로가 포함됩니다.
- 에이전트 신원(Web Bot Auth - WBA): 에이전트가 자신의 요청에 디지털 서명을 할 수 있도록 하여, 플랫폼과 에이전트 운영자를 안전하게 식별할 수 있는 프로토콜입니다.
- 평판 관리(MOLE): 개인정보를 노출하지 않으면서 사용자의 평판에 따라 요청 속도 제한(Rate Limiting)을 설정할 수 있도록 하는 프로토콜입니다.
- TAD(Trusted Agent Delegation) 연합: Cloudflare는 IETF 내에서 이러한 격차를 해결하기 위한 글로벌 표준을 수립하기 위해 다양한 부문(운영자, 결제 제공업체, 게시자)의 대표들을 모으는 이 연합의 출범을 발표했습니다.
Cloudflare 사용자에게 실질적으로 변화하는 것은 무엇인가?
Cloudflare는 이미 이러한 새로운 현실에 대응하기 위한 구체적인 도구를 제공하기 시작했습니다. 여기에는 보안 분석에서 '개인 비서' 트래픽을 분류하고, 웹사이트가 특정 페이지를 기반으로 일부 에이전트는 허용하고 다른 에이전트는 차단할 수 있는 제어 정책을 제공하는 것이 포함됩니다. 또한, 계정 남용 방지(Account Abuse Protection)를 통해 에이전트와 사용자를 연결하여, 에이전트 전체를 차단하지 않고도 악의적인 사용자만 제재할 수 있는 기능을 제공합니다.