Generalist AI Trình Diễn Robot Học Nhanh Từ Video Ngắn

Tác giả đến thăm văn phòng Generalist AI ở Cambridge, Massachusetts, và quan sát các cánh tay robot làm các việc đơn giản như xếp cốc và bỏ khối vào bát. Robot nhanh chóng nắm bắt nhiệm vụ chỉ sau khi xem video ngắn hướng dẫn.

Một ví dụ là robot được dạy quét một khối vào bát bằng chổi và hốt rác; khi chổi bị bỏ ra khỏi khung, robot đã linh hoạt dùng hốt rác như chổi để hất khối vào bát. Trường hợp khác, robot hai cánh tay xem clip người kéo khoá ví rồi lấy tiền, sau đó mở một loại ví khác và lấy tiền ra; khi không kẹp được, robot chuyển từ kẹp phải sang kẹp trái để thay đổi góc tiếp cận.

Những người sáng lập Generalist AI gồm Pete Florence, Andrew Barry và Andy Zeng. Florence so sánh khả năng này với giai đoạn đầu của GPT-3, khi model ngôn ngữ cho thấy khả năng chuyển nhiệm vụ chỉ bằng câu lệnh. Nhóm nghiên cứu tập trung dạy robot về các quy luật vật lý của thế giới để hỗ trợ khả năng chuyển giao học được giữa các tình huống.

Tác giả ghi nhận nhiều tình huống bất ngờ trong các demo, như robot dùng một quả chuối để quét khi vật dụng đó được đặt trước mặt. Truyền thống huấn luyện robot thường cần hàng ngàn ví dụ và kém bền khi điều kiện thay đổi, ví dụ thay đổi ánh sáng khiến robot gặp khó khăn.