HiPHI: Benchmark Quy Mô Lớn Về Chuyển Động Người Và Tương Tác Đồ Vật

Tài liệu nói các chính sách huấn luyện trên bộ dữ liệu này có thể chuyển sang một robot hình người thật. Nó cũng cho thấy dữ liệu ghi nhận chuyển động mới này được dùng để kiểm tra khả năng học của robot.

Phần nội dung nêu học của robot hình người là một vấn đề trung tâm trong AI hiện thân và AI vật lý. Dữ liệu từ video trên internet và các bộ dữ liệu ghi nhận chuyển động hiện có không thể cung cấp điều đó.

FrameNet, một khung ngôn ngữ học về hành động của người, được nêu như cách để hướng dẫn thu thập chuyển động. Cách này nhằm bao phủ có hệ thống nhiều chuyển động toàn thân.

Tài liệu cũng nói dữ liệu tương tác người-đồ vật sẽ hữu ích khi quỹ đạo và lưới của đồ vật được đồng bộ. Nó gắn dữ liệu đó với các việc thực tế như mang, đẩy và kéo.