🚀 جهش بزرگ در معماری مدل‌های زبانی: معرفی Naju! 🧠

🧠 چرا هوش مصنوعی گاهی «خیالات» می‌بیند؟

محققان در مقاله‌ای تازه، مدل جدیدی به نام «Naju» را معرفی کرده‌اند که گره کور حافظه در مدل‌های هوش مصنوعی را باز می‌کند! 💡

تا امروز، مدل‌های SSM (مانند Mamba) برای به خاطر سپردن اطلاعات طولانی، با مشکل «تعادل بین حفظ داده‌های قدیمی و نوشتن داده‌های جدید» روبرو بودند. Naju با جدا کردن مکانیزم‌های «فراموشی» و «نوشتن» از یکدیگر، این محدودیت را حذف کرده و اجازه می‌دهد مدل بدون نیاز به فرمول‌های پیچیده، همزمان اطلاعات را به خوبی حفظ کند و داده‌های قدیمی را به‌روزرسانی کند.

این یعنی در آینده‌ای نزدیک، شاهد مدل‌هایی با حافظه بسیار دقیق‌تر و طولانی‌تر خواهیم بود که در پردازش متون طولانی یا داده‌های پیوسته، بسیار سریع‌تر و هوشمندتر عمل می‌کنند. ⚡️

منبع: arXiv AI