انهيار النماذج

تخيّل نسخة تصوير مأخوذة عن نسخة تصوير. كل مرة تخفت التفاصيل قليلًا، وبعد عشر مرات لا تقرأ شيئًا. هذا تقريبًا ما يصفه مفهوم انهيار النماذج.

النموذج اللغوي يتعلم من نصوص الإنترنت. وحين يمتلئ الإنترنت بنصوص أنتجتها نماذج سابقة، يصبح الجيل الجديد يتعلم من صدى نفسه. النتيجة، وفق ورقة قدّمها Shumailov وزملاؤه عام 2024، أن النموذج يفقد أولًا الحالات النادرة والأصوات القليلة في البيانات، ثم يتجه نحو متوسط باهت ومتشابه.

فريق من جامعة Rice وصف الظاهرة نفسها باسم آخر: اضطراب الالتهام الذاتي (MAD)، أي نظام يأكل مخرجاته.

لكن الصورة ليست حتمية. باحثون آخرون يرون أن الانهيار لا يحدث بالضرورة إذا بقي محتوى بشري حقيقي داخل خليط التدريب، وأن التوصيف المتشائم للظاهرة مبالغ فيه. الخلاف العلمي ما زال مفتوحًا.