معيار عربي لقياس صدق النماذج اللغوية
- السنة
- 2025
- نوع النشر
- مؤتمر
- المؤتمر أو المجلة
- المؤتمر العربي لمعالجة اللغة الطبيعية
المؤلفون: د. حمد بن حسن الجهني، باحث مشارك
الملخّص
نقدّم معيارًا عربيًا لتقييم صدق النماذج اللغوية مصمّمًا ليقاوم الحفظ وتسرّب بيانات الاختبار، مع مجموعة بيانات مفتوحة قابلة للتكرار.
المشكلة المعالَجة
تُقيَّم النماذج العربية غالبًا بمعايير مترجمة لا تراعي خصائص اللغة، وتتأثّر نتائجها بتسرّب بيانات الاختبار إلى التدريب.
المساهمة الرئيسية
منهجية بناء أسئلة مقاومة للحفظ، ومجموعة بيانات عربية مفتوحة، وبروتوكول قياس قابل لإعادة الإنتاج.
لماذا يهمّ
يتيح مقارنة عادلة بين النماذج العربية، ويكشف فجوة الصدق التي تخفيها الطلاقة الظاهرة.
الملخّص التقني
A reproducibility-first Arabic benchmark for measuring factual reliability in large language models, with leakage-resistant test construction and open data.
تقييمالنماذج اللغويةالعربيةالصدق
الاقتباس
الجهني، حمد بن حسن. «معيار عربي لقياس صدق النماذج اللغوية». المؤتمر العربي لمعالجة اللغة الطبيعية، 2025.
@inproceedings{aljohani2025معيار-,
title={معيار عربي لقياس صدق النماذج اللغوية},
author={Aljohani, Hamad},
booktitle={المؤتمر العربي لمعالجة اللغة الطبيعية},
year={2025}
}