Cloudflare объявила об улучшениях в использовании Cloudflare AI Search, упрощающих создание поисковой системы для файлов и сайтов, принадлежащих пользователям, благодаря чему ИИ-агенты смогут получать доступ к актуальным данным и предоставлять более точные ответы. Ранее этот процесс требовал объединения нескольких компонентов платформы Cloudflare, таких как Workers AI, AI Gateway, Vectorize, R2 и Browser Run, тогда как теперь AI Search автоматически связывает эти компоненты.
Сервис доступен для использования уже сегодня и предназначен для разработчиков, которые хотят предоставлять своим агентам структурированные и неструктурированные данные — от отдельных файлов до веб-сайтов. В настоящее время источником данных должен быть домен, уже добавленный в аккаунт Cloudflare; компания планирует позднее предоставить дополнительные способы подтверждения права собственности.
Индексация сайтов и общедоступные точки доступа
Обновления включают возможность добавлять сайты, у которых нет файла sitemap, с помощью режима анализа «Discover», который обнаруживает страницы, переходя по ссылкам. Пользователи также могут индексировать несколько источников данных в одном пространстве имён, а затем получать две общедоступные точки доступа — /search и /mcp — для поиска сразу по нескольким экземплярам или сайтам без аутентификации.
Cloudflare также позволяет разместить пользовательский домен перед общедоступными точками доступа, например search.example.com/mcp, чтобы настроить адрес и бренд сервиса. Если поиск должен быть закрытым, перед доменом можно добавить Cloudflare Access: тогда для доступа потребуется выполнить вход, а использовать сервис смогут только авторизованные люди или агенты.
Компания также предоставляет дополнение AI Search для сайтов на EmDash — системы управления контентом с открытым исходным кодом, — чтобы добавлять семантический поиск к содержимому сайта. AI Search использует гибридный поиск, объединяющий семантический поиск и поиск по ключевым словам, что делает его подходящим как для открытых вопросов, так и для поиска конкретных имён или терминов.
Использование сервиса в Cloudflare Dev Stack MCP
Cloudflare продемонстрировала способ использования AI Search в сервере Cloudflare Dev Stack MCP, который доступен для тестирования через AI Playground. Сервер объединяет актуальную документацию с указанием источников из экосистемы Cloudflare для разработчиков, помогая программным агентам опираться на более свежую информацию вместо устаревших данных обучения.
Компания создала отдельный экземпляр для каждой из своих областей, включая документацию, блог, документацию API, сообщество, Astro, Vite, Vitest, Hono, Replicate и OpenNext, а затем объединила их в один поиск через общее пространство имён. Это можно сделать с помощью Worker при интеграции поиска в существующее приложение или сервер MCP либо использовать общедоступные точки доступа напрямую — без написания кода и развертывания дополнительного сервиса.
Сервер также можно подключить к программным агентам через адрес MCP, чтобы получать актуальные ответы с указанием источников о создании приложений на платформе Cloudflare. Cloudflare уже использует AI Search для поиска по своему блогу, документации разработчика и сайту Cloudflare.com, а также интегрировала его с сайтом блога на базе EmDash.
Экспериментальная модель ценообразования
AI Search по-прежнему бесплатен на этапе бета-тестирования, и выставление счетов ещё не началось. Cloudflare заявляет, что уведомит клиентов до начала тарификации, а опубликованные сейчас цены могут измениться до момента общего доступа.
- Базовое потребление при индексации: 0,75 доллара за миллион токенов; бесплатная квота составляет 5 миллионов токенов в месяц для всех планов Workers.
- Обработка изображений: дополнительная плата в размере 0,50 доллара за миллион токенов.
- Хранимые данные: 2 доллара за гигабайт в месяц; бесплатно предоставляются 10 гигабайт.
- Семантические запросы, включая гибридный и векторный поиск: 0,75 доллара за тысячу запросов; бесплатно предоставляются 2000 запросов в месяц.
- Полнотекстовый поиск: 0,10 доллара за тысячу запросов.
Операции встраивания и повторного ранжирования результатов бесплатны при использовании моделей по умолчанию или выбранных моделей из каталога Workers AI, тогда как модели сторонних поставщиков оплачиваются отдельно. Cloudflare уточняет, что генерация ответов и переформулирование запросов являются необязательными этапами и оплачиваются по модели Workers AI, выбранной пользователем; также можно использовать кредиты AI Gateway с любой моделью или провайдером.
AI Search соблюдает политики для роботов: для сканирования используется Browser Run, сервис идентифицирует себя как отдельный робот с именем Cloudflare-AI-Search, а также соблюдает файл robots.txt и правила сайтов для роботов.