تا به حال فکر کردهاید که چطور میتوان کیفیت کپشنهای تولید شده توسط هوش مصنوعی برای تصاویر را بدون تکیه بر دادههای انسانی ارزیابی کرد؟
محققان در پژوهش جدیدی، رویکرد خلاقانهای مبتنی بر «بازسازی تصویر» (Reconstruction) ارائه دادهاند. ایده اصلی این است: یک کپشن خوب، کپشنی است که بتواند تصویر اصلی را با همان مفاهیم معنایی بازسازی کند! 🖼️
در این روش، دیگر نیازی به کپشنهای مرجع انسانی نیست و مدل با بررسیِ شباهتِ معنایی تصویر بازسازیشده با تصویر اصلی، امتیاز کیفیت دریافت میکند. این گام بزرگی برای خودکارسازی و بهبود دقت سیستمهای بینایی-زبانی است. 🚀
منبع: arXiv Computer Vision
