ذاكرة التخزين المؤقت للغة الطبيعية
ذاكرة التخزين المؤقت للغة الطبيعية (NLC) هي آلية تخزين مؤقت متخصصة مصممة لتخزين واسترداد الاستفسارات التي تمت معالجتها مسبقًا واستجاباتها المقابلة من أنظمة معالجة اللغة الطبيعية (NLP) أو نماذج اللغة الكبيرة (LLM). على عكس ذاكرات التخزين المؤقت التقليدية للمفتاح-القيمة التي تعتمد على المطابقة النصية الدقيقة، تستخدم NLC الفهم الدلالي لمطابقة مدخلات المستخدم الجديدة والمتنوعة مع الإدخالات المخزنة مؤقتًا الموجودة.
في تطبيقات الذكاء الاصطناعي ذات الإنتاجية العالية، يعد إعادة تشغيل نماذج اللغة المعقدة لأسئلة متطابقة أو متشابهة دلاليًا أمرًا مكلفًا من الناحية الحسابية وبطيئًا. تعالج NLC هذا الأمر عن طريق اعتراض الطلبات. إذا تم العثور على استعلام في ذاكرة التخزين المؤقت، يتجاوز النظام عملية الاستدلال الثقيلة، مما يؤدي إلى تقليل كبير في زمن الوصول وتكاليف تشغيل أقل.
تتضمن العملية عادةً عدة مراحل:
البحث الدلالي، قواعد بيانات المتجهات، هندسة الموجهات (Prompt Engineering)، تكميم النموذج (Model Quantization)