همیشه این سوال برای تیمهای توسعهدهنده پیش میآید که آیا استفاده از دادههای جدید و آموزش یک مدل «چالشگر» (Challenger) به جای مدل فعلی، ارزش هزینههای زمانی و محاسباتی را دارد یا خیر؟
محققان در یک مطالعه جدید، چارچوب اقتصادی و آماری دقیقی برای پاسخ به این پرسش طراحی کردهاند. این پژوهش به ما یاد میدهد که چگونه با تحلیل منحنیهای یادگیری، بهترین زمان برای توقفِ آزمایش و جایگزینی مدلهای مستقر در محیط عملیاتی را پیدا کنیم. این متدولوژی بهویژه در کاربردهای حساس مثل سیستمهای اعتبارسنجی بانکی میتواند بسیار راهگشا باشد. 💡
منبع: arXiv Machine Learning
