محققان بنچمارک جدیدی به نام «GameEngineBench» را معرفی کردهاند که توانایی مدلهای هوش مصنوعی در کدنویسی حرفهای به زبان C++ را در محیط واقعی Unreal Engine 5 به چالش میکشد.
این بنچمارک شامل ۱۱۰ وظیفه واقعی در حوزههای مختلف بازیسازی، از مکانیکهای گیمپلی گرفته تا هوش مصنوعی و گرافیک است. نتایج نشان میدهد که قویترین مدلها هنوز هم برای رسیدن به دقت ۱۰۰ درصد در محیطهای پیچیده و تعاملی بازیها راه درازی در پیش دارند. این پژوهش گام مهمی برای ارتقای کدنویسهای هوشمند در دنیای واقعی است. 🤖💻
نویسی
منبع: arXiv NLP