أعلنت Cloudflare عن نظام جديد لتقييم سلوك الروبوتات الموثقة باستمرار، في خطوة تهدف إلى ربط هوية الروبوت بسجل عملي يوضح مدى احترامه لتفضيلات المواقع. وترى الشركة أن معرفة الجهة التي تشغل الروبوت لا تكفي وحدها للحكم على موثوقيته، إذ قد يتجاهل روبوت معروف تعليمات المواقع أو يواصل إرسال الطلبات رغم تلقيه إشارات واضحة لتخفيف نشاطه.
تستخدم Cloudflare مصطلح Verified Bot للروبوتات التي تستوفي ثلاثة شروط أساسية: التعريف عن نفسها بدقة وأمان، تنفيذ ما تقول إنها ستفعله، وعدم الانخراط في سلوك مسيء. وتستند عملية التعريف إلى Web Bot Auth لتوقيع الطلبات، بينما يفهرس BotBase هذه الهويات في صيغة مفتوحة. أما النظام الجديد فيركز على الشرط الثاني والثالث، عبر مراقبة السلوك المتكرر بدلاً من إصدار حكم دائم استناداً إلى حادثة منفردة.
من الهوية إلى الثقة المتراكمة
تفرق Cloudflare بين المخاطر والثقة. فالمخاطر تصف احتمال أن يكون طلب معين ضاراً في لحظة محددة، بينما تُبنى الثقة عبر سلوك متكرر ومتسق. وستحوّل الشركة الملاحظات السلوكية إلى «نطاق ثقة» قابل للتفسير، يوضح مدى انتظام الروبوت في احترام تفضيلات المواقع والعوامل التي أدت إلى هذا التقييم.
ومن الأمثلة التي تستشهد بها الشركة إزالة روبوت Perplexity من قائمة الروبوتات الموثقة في عام 2025، بعد أن حاول الوصول إلى موارد في مواقع اختارت عدم السماح بالكشط، ثم حاول تجاوز الضوابط عندما مُنعت تلك الطلبات.
الإشارات التي يراقبها النظام
يركز التقييم الأولي على سؤالين: هل يحترم الروبوت التعليمات المنشورة؟ وهل يستجيب للملاحظات المباشرة من الموقع؟ وتعد Cloudflare ملف robots.txt الوسيلة الأساسية التي تنشر بها المواقع تفضيلاتها بشأن الزحف. لذلك يراقب النظام ما إذا كانت حركة الروبوت تتوافق مع هذه التفضيلات عبر الزمن، مع التركيز على الأنماط المتكررة لا المخالفات المعزولة.
وتوضح الشركة أن robots.txt يحدد الحد الأدنى من القواعد التي ينبغي للروبوت الالتزام بها، ولا يعني أن كل ما لم يُذكر فيه مسموح به تلقائياً. فقد يرسل الموقع إشارات أخرى تفيد بأن استمرار الوصول غير مرغوب فيه.
كما يراقب النظام استجابة الروبوت لرمز HTTP 429، الذي يعني «طلبات كثيرة جداً» ويطلب من الزائر خفض معدل الطلبات، وقد يتضمن مدة الانتظار قبل إعادة المحاولة. فالروبوت الذي يبطئ أو يتوقف بعد تلقي هذه الإشارة يعزز نطاق ثقته، بينما يؤدي تجاهلها مراراً إلى خفض التقييم.
ما الذي يتغير عملياً؟
تقول Cloudflare إن النظام يعمل داخلياً حالياً لتقييم مدى التزام الروبوتات الموثقة بتفضيلات المواقع. وتخطط الشركة لإتاحته لجميع عملائها، مع منحهم إمكانية تحديد مستوى الثقة المطلوب عند تقرير كيفية التعامل مع حركة Verified Bot.
ويأتي النظام ضمن حلقة مساءلة تجمعه مع Bot Preference Sync، الذي يساعد أصحاب المواقع على نشر تفضيلاتهم، وBot Management، الذي يتيح لهم تحديد طريقة التعامل مع الحركة الآلية. ومن الناحية العملية، يضيف ذلك طبقة سلوكية إلى قرار السماح: فالموقع لن يعتمد فقط على هوية الروبوت، بل يمكنه الاستناد إلى سجل احترامه للتعليمات والاستجابة لإشارات الضغط.
لكن Cloudflare لم تحدد بعد تفاصيل آلية احتساب نطاق الثقة أو موعد الإتاحة العامة، كما أن النظام لا يزال في مرحلة بناء سجل تاريخي وصقل الطريقة التي تتحول بها الملاحظات إلى إرشادات. وتعتزم الشركة نشر هذه الدرجات مستقبلاً على Radar وتوسيع الإشارات التي تدخل في التقييم.
كيف أعددنا هذا الخبر؟
اعتمد الخبر على المصدر الأصلي الموضح أعلاه. قد نستخدم أدوات آلية للمساعدة في الاستخراج والتصنيف والصياغة،
لكن النشر يخضع لقواعد تمنع المحتوى المكرر والقصير أو الروتيني منخفض القيمة.
اقرأ سياستنا التحريرية.