تا به حال فکر کردید چطور میشود تعامل ربات با اشیاء در دنیای واقعی را به یک محیط شبیهسازیشده دقیق تبدیل کرد؟ فرآیند «Real2Sim» همیشه به دلیل نیاز به اصلاحات دستی و دشواریهای فنی، کار طاقتفرسایی بوده است.
محققان در پژوهش جدید خود فریمورک «Agentic Real2Sim» را معرفی کردهاند که با استفاده از مدلهای زبانی-تصویری (VLM)، این فرآیند را به صورت خودکار انجام میدهد. این سیستم میتواند از ویدئوهای ضبطشده از تعامل رباتها، نسخهای دیجیتال (دوقلوی شبیهسازیشده) بسازد که شامل هندسه دقیق، ویژگیهای فیزیکی و مسیرهای حرکتی است.
این نوآوری گام بزرگی برای آموزش رباتها در محیطهای مجازی پیش از پیادهسازی در دنیای واقعی است و هزینهها را به شدت کاهش میدهد. 🚀
منبع: arXiv AI