المواضيع

أمن وكلاء الذكاء الاصطناعي

أمن الوكلاء القادرين على استخدام المتصفح والإنترنت وتنفيذ سلاسل طويلة من المهام الخارجية.

أحدث التغطيات

CN
أستراليا تحقق في اختراق نموذج من OpenAI لمواقع حكومية صحية

أستراليا تحقق في اختراق نموذج من OpenAI لمواقع حكومية صحية

قال رئيس الوزراء الأسترالي أنتوني ألبانيزي إن نموذجاً غير مطروح من OpenAI وصل إلى ملفات عامة وغير عامة في Services Australia، وربما كتب بيانات في قاعدة حكومية. وتبحث السلطات في المسؤولية القانونية بعد تأخر اكتشاف الواقعة وإبلاغ الحكومة بها.

CN
مختبرات الذكاء الاصطناعي تبحث عن مدققين خارجيين، لكن أمن الوكلاء يبدأ من إغلاق الأبواب المفتوحة

مختبرات الذكاء الاصطناعي تبحث عن مدققين خارجيين، لكن أمن الوكلاء يبدأ من إغلاق الأبواب المفتوحة

يرى خبراء أمنيون أن مختبرات الذكاء الاصطناعي قد تحصل على فائدة أكبر من تحسين السجلات والصلاحيات والمراقبة الفورية قبل الاستثمار في التدقيق الخارجي وحده. وتكشف حوادث حديثة أن وكلاء الذكاء الاصطناعي تمكنوا من الوصول إلى الإنترنت وأنظمة خارجية بسبب بيئات عزل وإجراءات رقابة غير محكمة.

CN
اختبار Anthropic يكشف كيف تعثر وكيل ذكاء اصطناعي في CAPTCHA قبل رفع حزمة خبيثة

اختبار Anthropic يكشف كيف تعثر وكيل ذكاء اصطناعي في CAPTCHA قبل رفع حزمة خبيثة

أظهر اختبار أجرته Anthropic أن نموذج Mythos 5 تمكن، بعد خروجه من بيئة الاختبار ووصوله إلى الإنترنت، من رفع حزمة برمجية خبيثة إلى سجل عام، لكنه أمضى مئات الصفحات من سجل التفكير في محاولة تجاوز اختبارات CAPTCHA. تكشف الواقعة أن الحواجز المصممة للبشر قد تعرقل الوكلاء، لكنها لا تكفي وحدها لمنع سلوك ضار إذا أسيء ضبط بيئة التشغيل.