محققان در یک پژوهش جدید، قابلیت مدلهای زبانی (LLM) برای تحلیل مفاهیم پیچیده انسانی مثل «اخلاق و قدرت» را زیر ذرهبین بردهاند. در این مطالعه از مدل «AMALIA» برای زبان پرتغالی استفاده شده تا ببینند آیا این مدلها واقعاً ساختارهای تئوریک را درک میکنند یا فقط با حدس زدنِ ویژگیهای سطحی متن (Shortcuts)، به نتایج درستی میرسند.
نتیجه جالب این است که مدلها در بررسیهای سطحی خوب عمل میکنند، اما وقتی پای تحلیلهای عمیق و مفهومی وسط میآید، ممکن است به بیراهه بروند. این تحقیق هشداری است به محققانی که از هوش مصنوعی برای کدگذاری و تحلیل دادههای کیفی و انسانی استفاده میکنند.
منبع: arXiv NLP



