الضبط التعليمي
الضبط التعليمي (Instruction Tuning) هو تقنية ضبط دقيق تُطبق على نماذج اللغة الكبيرة المُدربة مسبقًا (LLMs). فبدلاً من تدريب النموذج فقط على مجموعات نصوص ضخمة وغير منظمة، يقوم الضبط التعليمي بتدريب النموذج على مجموعة بيانات مُنسقة من أزواج "المطالبة-الاستجابة". تُظهر هذه الأزواج بوضوح السلوكيات المرغوبة، مثل الإجابة على الأسئلة، أو تلخيص النصوص، أو اتباع أوامر محددة.
الهدف الأساسي من الضبط التعليمي هو مواءمة المعرفة العامة للنموذج الأساسي (Base LLM) مع التعليمات المحددة والقابلة للتنفيذ من قبل المستخدم البشري. قد يكون النموذج الأساسي مطلعًا ولكنه غير مُوجَّه؛ ويقوم الضبط التعليمي بتحويله إلى مساعد قادر ينفذ المهام الموكلة إليه بشكل موثوق. يعد هذا التوافق أمرًا بالغ الأهمية لنقل نماذج اللغة الكبيرة من مجرد فضول بحثي إلى أدوات مؤسسية موثوقة.
تتضمن العملية جمع أو توليف أمثلة عالية الجودة حيث يتم إقران مُدخل (المطالبة/التعليمات) بمُخرج مثالي (الاستجابة المطلوبة). يتم بعد ذلك تدريب النموذج باستخدام الضبط الدقيق المُراقب (SFT) على مجموعة البيانات هذه. يتعلم النموذج التعيين بين تنسيق التعليمات وتنسيق المخرج الصحيح، ويتعلم فعليًا كيف يتبع التوجيهات، وليس فقط ما هي المعلومات الموجودة.
يمكّن الضبط التعليمي من النشر العملي عبر وظائف الأعمال المختلفة:
ترتبط هذه التقنية ارتباطًا وثيقًا بالتعلم المعزز من التغذية الراجعة البشرية (RLHF)، والذي غالبًا ما يتبع الضبط التعليمي لمزيد من صقل مواءمة تفضيلات النموذج بعد مرحلة الضبط المُراقب الأولية.