Code-as-World เปลี่ยนวิดีโอจริงให้กลายเป็นโปรแกรมฟิสิกส์ MuJoCo ที่รันและตรวจสอบได้
แนวคิดของ Code-as-World น่าสนใจเพราะมันไม่พยายามทำนายวิดีโอให้เหมือนภาพจริงอย่างเดียว แต่พยายามสร้าง “โลกที่รันได้” จากวิดีโอจริงแทน ถ้าทำได้จริง นี่คือการเปลี่ยนข้อมูลภาพจากหลักฐานเฉย ๆ ให้กลายเป็นโปรแกรมที่จำลองฟิสิกส์ ตรวจสอบ และแก้ไขต่อได้ ภาพ: MirroS-Lab แก่นของแนวคิดคือ pixels ไม่ใช่ตัวตนของโลก ทีม MirroS วางข้อเสนอว่า pixel เป็นแค่หลักฐานของฉาก ไม่ใช่ ontology ของมัน ดังนั้นแทนที่จะเก็บโลกไว้เป็นภาพหรือคำบรรยาย ระบบนี้แทนฉากเป็น executable code หรือ scene.json ที่รันใน MuJoCo ได้ จุดนี้ทำให้โลกจำลองไม่ได้เป็นแค่ภาพสวย แต่กลายเป็นสิ่งที่ agent ตรวจสอบต่อได้ ว่าแรง มวล
Code-as-World เปลี่ยนวิดีโอจริงให้กลายเป็นโปรแกรมฟิสิกส์ MuJoCo ที่รันและตรวจสอบได้ Read Post »








