المصطلحات
التوليد المعزز بالاسترجاع (RAG)
التوليد المعزز بالاسترجاع (RAG) هو أسلوب يجلب معلومات ذات صلة من مصادر خارج بيانات تدريب النموذج لتوفير سياق داعم للتوليد. وتُظهر المواد المرتبطة به استخدامه في البحث الدلالي، وقواعد المعرفة، وتطبيقات الوكلاء، وقواعد البيانات المتجهية، والبحث في المستندات وقواعد الشيفرة.
التوليد المعزز بالاسترجاع (RAG) هو أسلوب يجلب معلومات ذات صلة من مصادر خارج بيانات تدريب النموذج، ثم يوفرها كسياق داعم لعملية التوليد.
كيف يُستخدم؟
- البحث الدلالي والاسترجاع المتجهي للوثائق والوسائط المتعددة.
- دعم قواعد المعرفة المعتمدة على الاسترجاع والتوليد.
- توفير سياق لوكلاء الذكاء الاصطناعي قبل التوليد أو الاستدلال، بما يشمل الأدوات مثل MCP وSkills.
- البحث في قواعد الشيفرة والملفات والرسومات الهندسية وتطبيقات الإنتاج والتصنيع.
أهمية جودة الاسترجاع والتصفية
لا تعتمد جودة تطبيق RAG على النص النهائي وحده. فقد ينتج الخطأ عن اختيار قاعدة بيانات غير صحيحة، أو استرجاع مستندات غير ملائمة، أو غياب فحص الصلاحيات وقت الاستعلام، أو تطبيق مرشح نطاق غير مناسب. وتدعم تقنيات مثل التصفية المسبقة للبيانات الوصفية في قواعد مثل Amazon S3 Vectors حصر النتائج ضمن مستأجر أو فئة أو حالة أو نطاق محدد، مما يرفع معدل الاستدعاء.
RAG ضمن سير عمل أوسع
قد يتكامل RAG مع أدوات أخرى في النظام نفسه، مثل استخدام MCP للوصول إلى الأدوات والبيانات، واتباع Skills لتطبيق تعليمات خاصة بالمشروع، والاستعانة بالاسترجاع لجلب السياق الداعم عبر منصات متعددة مثل Vercel أو مكتبات لغة Rust مثل Rig.
التقييم والتشغيل
- تقييم المسار الكامل: اختبار الاسترجاع والتوليد والتحقق من المخرجات وصلاحيات الوصول، لا استدعاء النموذج وحده.
- تتبع المكونات: ربط الإصدار بالفهرس، ونموذج التضمين، وإعدادات الاسترجاع، والمطالبات، وإعدادات التشغيل.
- تنويع الاختبارات: تضمين الأسئلة العادية، والإخفاقات السابقة، والحالات الغامضة، وحالات ندرة الأدلة أو اختلاف الصلاحيات.
- الجمع بين المقاييس: استخدام فحوصات حتمية وبنية برمجية عند وجود قواعد واضحة، مع مراجعة بشرية أو تقييم دلالي عندما يصعب اختزال الحكم إلى قاعدة.
حدود ما يمكن استنتاجه
لا تكفي نتائج محدودة أو أحكام نموذج لغوي وحدها لإثبات جودة تطبيق RAG في كل الحالات. كما أن ملاءمة أي نموذج استرجاع أو فهرس تعتمد على نوع البيانات، ودقة الاسترجاع المطلوبة، وقيود العتاد، ونتائج الاختبارات المستقلة. ولا تتضمن المواد المقدمة ترتيباً عاماً لحلول RAG أو مقارنة شاملة بينها.