محققان در مطالعه جدیدی به سراغ یکی از چالشهای بزرگ هوش مصنوعی، یعنی «فراموشی فاجعهبار» (Catastrophic Forgetting) در سیستمهای یادگیری تقویتی مدل-محور (مثل خانواده DreamerV3) رفتهاند.
این تحقیق نشان میدهد که برخلاف تصور قبلی، مشکل از «حافظه» نیست؛ در واقع «مدل جهان» (World Model) اطلاعات مربوط به وظایف قدیمی را به خوبی حفظ میکند، اما این «کنشگر» (Actor) است که رفتار قبلی خود را فراموش کرده و دچار فروپاشی میشود.
راهحل پیشنهادی؟ استفاده از «تمرین رویا» (Dream Rehearsal)؛ روشی که در آن هوش مصنوعی از رویاهای درجهبندی شده خود برای بازآموزی مهارتهای از دست رفته استفاده میکند، بدون اینکه حتی نیاز به تعامل مستقیم با محیط داشته باشد! این یعنی هوش مصنوعی حالا میتواند بدون تکرار فاجعهبار، مهارتهای زنجیرهای پیچیده را همزمان حفظ کند. 🚀
منبع: arXiv Machine Learning