Cloudflare hat Verbesserungen an der Nutzung von Cloudflare AI Search angekündigt, um die Erstellung einer eigenen Suchmaschine für Dateien und Websites der Nutzer zu erleichtern. Dadurch können KI-Agenten auf aktuelle Daten zugreifen und bessere Antworten liefern. Zuvor mussten mehrere Komponenten der Cloudflare-Plattform zusammengeführt werden, darunter Workers AI, AI Gateway, Vectorize, R2 und Browser Run. Nun übernimmt AI Search die automatische Verknüpfung dieser Komponenten.
Der Dienst ist ab heute verfügbar und richtet sich an Entwickler, die ihren Agenten strukturierte und unstrukturierte Daten zur Verfügung stellen möchten – von einzelnen Dateien bis hin zu Websites. Derzeit muss die Datenquelle eine Domain sein, die sich im Cloudflare-Konto befindet. Das Unternehmen weist darauf hin, dass später zusätzliche Methoden zur Eigentumsverifizierung angeboten werden sollen.
Website-Indexierung und öffentliche Zugriffspunkte
Zu den Neuerungen gehört die Möglichkeit, Websites ohne Sitemap hinzuzufügen. Die Analyseoption „Discover“ erkennt Seiten, indem sie Links verfolgt. Nutzer können außerdem mehrere Datenquellen innerhalb eines gemeinsamen Namespace indexieren und anschließend zwei öffentliche Zugriffspunkte, /search und /mcp, erhalten, um ohne Authentifizierung über mehrere Instanzen oder Websites hinweg zu suchen.
Cloudflare ermöglicht es außerdem, eine benutzerdefinierte Domain vor die öffentlichen Zugriffspunkte zu schalten, etwa search.example.com/mcp, um die Adresse und das Branding des Dienstes anzupassen. Wenn die Suche privat bleiben soll, kann Cloudflare Access vor der Domain eingerichtet werden. Dadurch ist eine Anmeldung erforderlich, und die Nutzung bleibt auf autorisierte Personen oder Agenten beschränkt.
Das Unternehmen bietet außerdem ein AI-Search-Add-on für EmDash an, ein Open-Source-Content-Management-System, um semantische Suche zu Website-Inhalten hinzuzufügen. AI Search verwendet eine hybride Suche, die semantische Suche mit der Stichwortsuche kombiniert. Dadurch eignet sie sich sowohl für offene Fragen als auch für das Auffinden bestimmter Namen oder Begriffe.
Nutzung im Cloudflare Dev Stack MCP
Cloudflare demonstrierte die Nutzung von AI Search im Cloudflare Dev Stack MCP-Server, der über AI Playground getestet werden kann. Der Server bündelt aktuelle, mit Quellen versehene Dokumentation aus dem Cloudflare-Ökosystem für Entwickler. Dadurch können Coding-Agenten auf neuere Informationen statt auf veraltete Trainingsdaten zurückgreifen.
Das Unternehmen erstellte für jede seiner Oberflächen eine separate Instanz, darunter die Dokumentation, den Blog, die API-Dokumentation, die Community sowie Astro, Vite, Vitest, Hono, Replicate und OpenNext. Anschließend wurden sie über einen gemeinsamen Namespace zu einer einzigen Suche zusammengeführt. Dies kann über einen Worker erfolgen, wenn die Suche in eine bestehende Anwendung oder einen bestehenden MCP-Server integriert wird, oder direkt über die öffentlichen Zugriffspunkte – ohne Code zu schreiben oder einen zusätzlichen Dienst bereitzustellen.
Der Server kann außerdem über seine MCP-Adresse mit Coding-Agenten verbunden werden, um aktuelle und quellenbasierte Antworten zum Erstellen von Anwendungen auf der Cloudflare-Plattform zu erhalten. Cloudflare verwendet AI Search bereits für die Suche in seinem Blog, seiner Entwicklerdokumentation und auf Cloudflare.com sowie in Verbindung mit der auf EmDash basierenden Blog-Website.
Experimentelle Preisgestaltung
AI Search bleibt während der Betaphase kostenlos; die Abrechnung wurde noch nicht aktiviert. Cloudflare erklärt, dass Kunden vor Beginn der Abrechnung benachrichtigt werden. Die derzeit angezeigten Preise können sich vor der allgemeinen Verfügbarkeit noch ändern.
- Grundverbrauch für die Indexierung: 0,75 US-Dollar pro einer Million Token, mit einem kostenlosen Kontingent von 5 Millionen Token pro Monat für alle Workers-Tarife.
- Bildverarbeitung: zusätzliche Kosten von 0,50 US-Dollar pro einer Million Token.
- Gespeicherte Daten: 2 US-Dollar pro Gigabyte und Monat, mit 10 Gigabyte kostenlos.
- Semantische Abfragen, einschließlich hybrider und vektorieller Suche: 0,75 US-Dollar pro 1.000 Abfragen, mit 2.000 kostenlosen Abfragen pro Monat.
- Volltextsuche: 0,10 US-Dollar pro 1.000 Abfragen.
Einbettungen und das Neuranking von Ergebnissen sind kostenlos, wenn die Standardmodelle oder ausgewählte Modelle aus dem Workers-AI-Katalog verwendet werden. Modelle von Drittanbietern werden separat abgerechnet. Cloudflare erklärt, dass die Antwortgenerierung und die Umformulierung von Abfragen optionale Schritte sind und gemäß dem vom Nutzer ausgewählten Workers-AI-Modell abgerechnet werden. Alternativ können AI-Gateway-Guthaben mit jedem Modell oder Anbieter verwendet werden.
AI Search hält sich an Roboter-Richtlinien. Für das Crawling wird Browser Run verwendet; der Dienst identifiziert sich mit einer eigenen Bot-Identität namens Cloudflare-AI-Search und befolgt robots.txt sowie die robotspezifischen Vorgaben der Websites.