محققان در پژوهشی جدید، بهینهساز هوشمندی به نام «PsiLogic» را معرفی کردهاند که عملکردی فراتر از الگوریتمهای کلاسیک مثل Adam دارد. این ابزار با استفاده از یک مکانیزم هوشمند «تشخیص هرجومرج» (Chaos Detector)، نرخ یادگیری را بهصورت پویا در مراحل مختلف آموزش تنظیم میکند.
ویژگیهای کلیدی این دستاورد:
✅ حذف نیاز به تنظیم دستی گرمکردن (Warmup) مدل
✅ پایداری بیشتر در مراحل اولیه و پرنوسان آموزش
✅ ثبت نتایج درخشان در بنچمارکهای NLP و بینایی ماشین نسبت به AdamW
این نوآوری میتواند گام مهمی در کاهش زمان تنظیم هایپرپارامترها و افزایش دقت مدلهای یادگیری عمیق باشد. کد این پروژه بهصورت متنباز منتشر شده و آماده استفاده در پروژههای تحقیقاتی است.
سازی
منبع: arXiv Machine Learning