هل تستطيع نماذج اللغات الكبيرة استحضار الكتاب المقدس بدقة؟
2024-12-29
تتناول هذه المقالة قدرة نماذج اللغات الكبيرة (LLMs) على استحضار نصوص الكتاب المقدس بدقة. قام الكاتب بتصميم ستة اختبارات لتقييم قدرة نماذج LLMs المختلفة الأحجام على إعادة إنتاج الآيات بدقة. أظهرت النماذج الأكبر (Llama 405B و GPT 4o و Claude Sonnet) أفضل أداء، حيث استحضرت الآيات وحتى الفصول بأكملها بدقة. أما النماذج الأصغر (في نطاق 7 مليار معلمة)، فغالباً ما كانت تمزج بين الترجمات أو تنتج نصوصًا وهمية. أما النماذج متوسطة الحجم (في نطاق 70 مليار معلمة)، فقد حافظت بشكل عام على المعنى، لكنها غالبًا ما كانت تمزج بين الترجمات أو تعيد صياغة الفقرات بشكل طفيف. يستنتج الكاتب أنه من أجل الحصول على اقتباسات دقيقة من الكتاب المقدس، فإن النماذج الأكبر حجماً هي الأنسب، مع ضرورة التحقق من صحتها باستخدام نسخة فعلية من الكتاب المقدس.
اقرأ المزيد