Giới thiệu về hệ thống SceneSmith trong đào tạo robot

Các nhà nghiên cứu tại Phòng thí nghiệm Khoa học Máy tính và Trí tuệ Nhân tạo MIT cùng Viện Nghiên cứu Toyota đã phát triển hệ thống SceneSmith, một nền tảng AI giúp tạo ra các môi trường trong nhà 3 chiều chi tiết từ các mô tả văn bản đơn giản. Hệ thống này cho phép robot thực hành nhiều nhiệm vụ trong không gian ảo, từ đó nhận diện các kế hoạch hành động chưa hiệu quả trước khi áp dụng vào thế giới thực.

Khác với các mô phỏng trước đây vốn tạo ra các căn phòng thưa thớt, ít đồ đạc, SceneSmith xây dựng những mô hình 3D với nhiều vật dụng và bố trí gần gũi với môi trường sống thật, giúp cải thiện khả năng phản ứng linh hoạt và thực tiễn của robot.

Quy trình tạo nhà ảo và khả năng tương tác của vật thể

SceneSmith sử dụng ba tác nhân AI dựa trên GPT-5.2 phối hợp để xây dựng không gian 3D theo từng lớp, bắt đầu từ bản thiết kế sàn nhà, đồ nội thất, đến các vật dụng nhỏ có thể cầm nắm hoặc di chuyển. Tác nhân kiểm duyệt đảm bảo sự sắp đặt tự nhiên, chẳng hạn không để bồn tắm xuất hiện trong phòng khách. Nếu cần, tác nhân điều phối có thể yêu cầu chỉnh sửa lại thiết kế.

Hệ thống không chỉ tạo ra cảnh quan chân thực mà còn lập trình vật lý để các vật thể có thể tương tác được, như tủ có cửa mở đóng, đồ vật di chuyển và có trọng lượng, ma sát đúng thực tế. Qua đó, robot có thể luyện tập việc mở tủ, cầm nắm hoặc đẩy đồ vật một cách sống động, thay vì chỉ tương tác với cảnh vật tĩnh.