در دنیای مدلهای زبانی بزرگ، روش «AlphaEdit» معرفی شد تا بدون آسیب زدن به دانش قبلی مدل، اطلاعات جدید را به آن تزریق کند. حالا یک مطالعه بازتولید (Reproducibility Study) تازه منتشر شده که نکات جالبی را روشن کرده است:
✅ تایید نتایج: محققان توانستند نتایج اصلی را برای مدلهای اولیه تکرار کنند.
⚠️ چالش معماری: این روش در مدلهای جدیدتر به خوبیِ مدلهای قدیمی عمل نمیکند، زیرا معماری آنها متفاوت است.
📉 محدودیت در ویرایشهای طولانی: برخلاف تصور قبلی، محافظت AlphaEdit در برابر «فراموشی فاجعهبار» (Catastrophic Forgetting) نامحدود نیست و با افزایش تعداد ویرایشها، عملکرد آن افت میکند.
این تحقیق به ما یادآوری میکند که دنیای هوش مصنوعی هنوز در مرحله آزمون و خطاست و هر روش نوآورانهای نیاز به بررسیهای دقیقتر در مقیاسهای بزرگتر دارد.
منبع: arXiv Machine Learning