مدلهای بینایی-زبانی (VLM) هنوز در محیطهای صنعتی واقعی با چالشهای زیادی روبرو هستند؛ از نور کم و بخار گرفته تا دود و اشیاء متحرک. محققان به تازگی بنچمارک جدیدی به نام «SteelBench» معرفی کردهاند که به طور اختصاصی برای ارزیابی دقیق مدلهای هوش مصنوعی در محیطهای کارخانهای طراحی شده است.
این بنچمارک با استفاده از ۱۴۹ ساعت فیلمبرداری عملیاتی، دقت مدلها را در شناسایی فعالیت کارگران و رعایت پروتکلهای ایمنی به چالش میکشد. نکته جالب اینجاست که طبق این گزارش، مدلهای فعلی هنوز فاصله زیادی با دقت انسانی دارند و نیاز است برای محیطهای حساس صنعتی، بسیار دقیقتر و قابلاعتمادتر آموزش ببینند. 🤖⚙️
منبع: arXiv Computer Vision