أرني سيد الخواتم! كارباثي يروج لمعيار جديد لنماذج اللغات الكبيرة

أندريه كارباثي كشف أن شركة أنثروبيك تستخدم معيارًا جديدًا لتقييم نماذج اللغة الكبيرة: توليد عالم الأرض الوسطى من بداية رواية سيد الخواتم. تم تلقين النموذج، كلود أوبوس 5، النص مع مكتبة Three.js، وهي مكتبة جافاسكربت، لإنشاء مشهد ثلاثي الأبعاد تفاعلي في المتصفح. استغرق أوبوس 5 مليون توكن، وساعتين، و5500 سطر من الكود لإنتاج العرض التجريبي. النتيجة النهائية بدائية، تذكرنا بالرسوم المتحركة ثلاثية الأبعاد المبكرة، مع مشاكل مثل شخصيات طافية وأجزاء جسم منفصلة. أقر كارباثي أن أوبوس 5 لا يمكنه فعليًا "الدخول" إلى عالمه المُولَّد؛ بل يمكنه فقط التقاط لقطات شاشة في أوقات مختلفة للتحقق من الأخطاء، مما يسلط الضوء على ضعف في نماذج اللغة الكبيرة الحالية: يمكنها كتابة التعليمات البرمجية وبناء المشاهد ولكنها لا تستطيع مشاهدة مقاطع الفيديو أو لعب الألعاب التي تصنعها. اختبار "البجع يركب دراجة" بصيغة SVG، الذي روّج له المطور سايمون ويليسون، يتم التخلي عنه تدريجيًا لأن النماذج أصبحت بارعة فيه. يهدف المعيار الجديد إلى اختبار قدرة النموذج على تخطيط مشروع معقد، والعمل لساعات، والتكرار على آلاف الأسطر من التعليمات البرمجية. كانت ردود فعل المجتمع متباينة: البعض أشاد بالاتجاه الجديد، والبعض الآخر شكك في تكلفته وما إذا كان Three.js يقيس الذكاء العام حقًا. كما ابتكر مستخدمو الإنترنت مشاريعهم الخاصة، مثل حفل موسيقي مُولَّد بالذكاء الاصطناعي لكاني ويست، واقترح كارباثي دمج واجهات برمجة التطبيقات مثل Seedance لعرض الفيديو و ElevenLabs للصوت لتحسين الجودة.