اگر در دنیای LLMها فعالیت میکنید، احتمالاً این سوال برایتان پیش آمده که برای شخصیسازی مدلها، «آموزش نظارتشده» (SFT) انتخاب بهتری است یا «یادگیری درونمتنی» (ICL)؟
یک پژوهش جدید و بسیار جذاب در arXiv به تحلیل اقتصادی و فنی این موضوع پرداخته است. یافتههای کلیدی این تحقیق نشان میدهد:
1️⃣ برخلاف تصور، شلوغی شبکه و میزان تقاضا (Congestion) میتواند برتری این روشها نسبت به هم را تغییر دهد.
2️⃣ ارائه همزمان هر دو روش، نهتنها ضرری ندارد، بلکه سودآوری پلتفرمهای هوش مصنوعی را به حداکثر میرساند.
3️⃣ دقت پیشآموزش مدلها مستقیماً بر کاهش بار محاسباتی تأثیرگذار است.
این مقاله دیدگاه تازهای برای توسعهدهندگان و شرکتهای ارائه دهنده خدمات هوش مصنوعی فراهم کرده تا بهینهترین استراتژی را در مدیریت منابع گرانقیمتِ محاسباتی انتخاب کنند.
منبع: arXiv Machine Learning
