آیا تا به حال حس کردید که پاسخهای یک مدل هوش مصنوعی با گذشت زمان تغییر میکند؟ محققان در پژوهشی تازه با بررسی ۱۰ مدل پیشرو، پدیدهای به نام «رانش پاسخ» (Response Drift) را تحلیل کردهاند.
نکات کلیدی این مطالعه:
🔹 تمام مدلهای بزرگ زبانی با گذشت زمان، خروجیهایی متفاوت از مرجعهای تخصصی تولید میکنند.
🔹 برخلاف تصور، معیارهای خودکار فعلی تنها کمتر از ۲٪ تغییرات را توضیح میدهند و برای درک این رفتار، همچنان به ارزیابیهای انسانی نیاز داریم.
🔹 این تغییرات وابسته به حوزه دانش و نوع سوالات است و نشان میدهد مدلها هنوز در مسیر پایداری با چالشهای جدی روبرو هستند.
این تحقیق نشان میدهد که دنیای LLMها بسیار پویاتر از آن است که فکرش را میکنیم!
منبع: arXiv AI