Danijar Hafner Phát Triển Agent Để Xử Lý Tình Huống Bất Ngờ

Không gian làm việc gần như trống, chỉ có thêm một người nữa và rất ít bàn ghế. Nhưng dọc giữa phòng là các robot hình người với nhiều hình dạng và kích thước, treo như con rối trên những giàn chạy giữa căn phòng rộng.

Hafner, 31, nói venture này là phần tiếp nối của công việc lâu nay nhằm giúp AI đi qua những môi trường chưa gặp khi huấn luyện. Các robot hình người anh nhập từ Trung Quốc là bước tiếp theo của hướng đi này, và cũng là hiện thân vật lý của nó.

Khả năng phản ứng trong những tình huống chưa từng thử là phần then chốt để đưa robot vào không gian của con người. Nếu muốn gửi robot vào nhà một người, robot phải xử lý được mặt bằng và đồ đạc mà nó chưa từng thấy trước đó.

Để làm vậy, Hafner dựa vào học tăng cường dựa trên model. Anh phát triển model mô phỏng thế giới và huấn luyện agent bên trong đó; agent xem model như mô phỏng ngoài đời thực, rồi dùng những trải nghiệm đó để dự đoán kết quả phía trước.

Cách này cho phép agent và robot mà nó điều khiển làm những việc rất phức tạp mà không cần kiểu thử và sai ngoài đời thực vốn thường dùng trong robot. Hafner nói anh được làm việc với nhiều người rất giỏi trong nghiên cứu ở Google, và anh ấy dễ dàng nằm trong nửa trên của 1%.

Hafner lớn lên ở một thị trấn nông thôn ở đông bắc Germany, nơi cha mẹ anh đều là nhạc công cổ điển. Anh học lập trình từ một người hàng xóm, rồi ở trung học bắt đầu học trực tuyến về AI và nhanh chóng say mê.

Năm 2015, khi là sinh viên năm 2 ngành kỹ thuật tại Hasso Plattner Institute ở Potsdam, anh giành được vai trò nhà nghiên cứu sinh viên tại Google Brain. Từ đó, anh trải qua một tá kỳ thực tập và vị trí khác tại công ty, gồm các thời gian ở Google Brain và Google DeepMind tại Vương quốc Anh, Canada và Mỹ; hai nhóm này sau đó đã gộp dưới DeepMind.

Anh cũng làm việc cùng Geoffrey Hinton và Ashish Vaswani. Timothy Lillicrap, Google DeepMind, nói Hafner là người nổi bật trong nhóm những người nổi bật.