Black Forest Labs Ra Mắt FLUX 3 Action Cho Robot

Black Forest Labs công bố FLUX 3 Action hôm thứ Ba. Trọng số của model có trên Hugging Face.

Theo công ty, FLUX 3 Action xây trên model FLUX 3 đa phương thức, vốn được huấn luyện chủ yếu trên video, nhưng cũng có ảnh và âm thanh. Với vai trò model hành động thế giới, nó nhận luồng video từ nhiều camera trong không gian làm việc của robot.

Model này dự đoán agent nên làm gì tiếp theo và môi trường sẽ thay đổi ra sao sau đó. Trên bảng xếp hạng RoboLab-120, Black Forest Labs nói FLUX 3 Action lập kỷ lục về tỉ lệ thành công với chỉ 7 tỉ tham số.

Công ty nói model này nhỏ hơn chưa tới một nửa so với model mở tốt nhất trước đó, đồng thời chạy nhanh hơn tới 3,95 lần. Black Forest Labs cũng cho rằng hiệu quả như vậy rất quan trọng cho triển khai trên thiết bị.

Black Forest Labs còn nhìn thấy tiềm năng trong môi trường số. Trong các trò chơi video, đó có thể là nơi thử nghiệm cho điều hướng, và agent phản ứng nhanh vận hành máy tính có thể xuất hiện sau này.