الاسترجاع المتناثر
يشير الاسترجاع المتناثر (Sparse Retrieval) إلى فئة من تقنيات استرجاع المعلومات التي تعتمد على تمثيلات نصية منفصلة وصريحة، باستخدام متجهات متناثرة (sparse vectors) عادةً. على عكس طرق الاسترجاع الكثيفة (dense retrieval) التي تُحوّل النص إلى فضاءات متجهة مستمرة وعالية الأبعاد، تمثل الطرق المتناثرة المستندات والاستعلامات باستخدام ميزات موجودة بشكل صريح، مثل عدد المصطلحات أو المؤشرات الثنائية.
في أنظمة استرجاع المعلومات واسعة النطاق، تُعد الكفاءة وقابلية التفسير أمرًا بالغ الأهمية. توفر الطرق المتناثرة مزايا حاسوبية، خاصة في سرعة الفهرسة والاسترجاع، لأنها تخزن وتعالج فقط قيم الميزات غير الصفرية. وهذا يجعلها قابلة للتوسع بدرجة عالية لمجموعات البيانات الضخمة حيث يكون تطابق الكلمات المفتاحية الدقيق أو تكرار المصطلح أمرًا بالغ الأهمية.
تتضمن الآلية الأساسية تحويل النص إلى فضاء المفردات. يتم تمثيل كل مستند أو استعلام كمتجه تتوافق أبعاده مع مصطلحات المفردات. عادةً ما تكون القيمة في بُعد ما هي التكرار (على سبيل المثال، درجة TF-IDF) أو مؤشر وجود ثنائي لذلك المصطلح في المستند. ثم يتم إجراء الاسترجاع عن طريق حساب التشابه، غالبًا باستخدام تقنيات مثل تشابه جيب التمام (cosine similarity) أو الضرب النقطي (dot product)، بين متجه الاستعلام المتناثر ومتجهات المستندات المتناثرة.
يُستخدم الاسترجاع المتناثر على نطاق واسع في محركات البحث التقليدية للمطابقة الدقيقة للكلمات المفتاحية. كما يُستخدم في معماريات البحث الهجين، حيث يكمل نماذج الاسترجاع الكثيفة لالتقاط كل من تطابقات المصطلحات الدقيقة والمعنى الدلالي. تشمل التطبيقات البحث عن المنتجات في التجارة الإلكترونية، وأنظمة إدارة المستندات، والاستعلام عن قواعد المعرفة.
تشمل المزايا الأساسية الكفاءة الحاسوبية العالية أثناء الفهرسة والاستعلام، وقابلية التفسير الممتازة (يمكنك تتبع النتائج المسترجعة إلى الكلمات المفتاحية المطابقة المحددة)، والمتانة عند التعامل مع الاستعلامات شديدة التخصص والمحملة بالمصطلحات التقنية.
أحد القيود الرئيسية للطرق المتناثرة هو عدم قدرتها على التقاط التشابه الدلالي بطبيعتها. إذا استخدم الاستعلام مرادفات أو مفاهيم ذات صلة غير موجودة صراحةً في مفردات المستند، فقد يفشل الاسترجاع المتناثر في العثور على النتائج ذات الصلة، مما يؤدي إلى انخفاض في الاستدعاء (recall) مقارنة بالنماذج الكثيفة.
غالبًا ما تتم مقارنة هذه التقنية بالاسترجاع الكثيف (Dense Retrieval)، الذي يستخدم الشبكات العصبية لتوليد تضمينات مستمرة. وهي مرتبطة أيضًا ارتباطًا وثيقًا بتقنيات مثل BM25، وهو خوارزمية استرجاع متناثر مُحسّنة للغاية.