در ادامه پست قبل...
🌟 مطالعهای جدید در MIT، هاروارد و کرنل نشان میدهد که LLMها فاقد درک منسجم از جهان هستند. این مدلها میتوانند درخواستهای پیچیده را با دقت بالا انجام دهند، اما نمایشی از ساختارها و قوانین دنیای واقعی درونی ندارند.
✨ یک مدل آزمایشی برای ناوبری در نیویورک، توانست مسیرهای دقیق ارائه دهد. اما با اعمال تغییرات جزئی مانند بستن خیابانها یا افزودن مسیرهای انحرافی، عملکرد آن بهطور قابلتوجهی کاهش یافت. تحلیلها نشان داد که مدل نقشهای نادرست با خیابانهای غیرواقعی و اتصالات غیرمنطقی ساخته بود.
✨ در این مطالعه، پژوهشگران با توسعه دو معیار "تمایز توالی" و "فشردهسازی توالی" بررسی کردند که آیا مدل میتواند بین وضعیتهای مختلف تمایز قائل شود و وضعیتهای مشابه را تشخیص دهد یا خیر. آزمایشها با بازیهایی مانند اتلو نشان دادند که اگرچه مدلها میتوانند حرکات معتبر را پیشبینی کنند، اغلب بدون درک واقعی از قوانین پایه این کار را انجام میدهند. این مطالعه بر نیاز به توسعه مدلهایی که واقعاً ساختارها و قوانین محیطهای عملیاتی خود را درک میکنند، تأکید دارد.
🔗 Source
📚 Paper
👨🏻🏫 Researcher
🔎 #LLM
2
1May 2, 2025 321
