محققان در پژوهشی تازه، موضوع جالبی را بررسی کردهاند: آیا مدلهای زبانی بزرگ (LLM) همانند انسانها، تحت تأثیر ترتیب پرسشها قرار میگیرند؟
در روانشناسی، انسانها «اثر ترتیب پرسش» (Question-order effect) را نشان میدهند و محققان با استفاده از مفهوم «برابری QQ» در فیزیک کوانتوم، چارچوبی برای بازرسی و تحلیل این رفتار در مدلهای زبانی طراحی کردهاند. این ابزار به توسعهدهندگان کمک میکند تا بفهمند مدلها چقدر در قضاوتهای متوالی خود پایدار هستند و آیا ترتیب ارائه دادهها، دقت و استدلال آنها را منحرف میکند یا خیر. این دستاورد گامی مهم برای درک بهتر مکانیسمهای درونی LLMها و کاهش خطاهای منطقی آنهاست! 🚀
منبع: arXiv AI