Giới thiệu
Robostral Navigate là model điều hướng robot dựa trên một camera RGB duy nhất, không cần phụ thuộc LiDAR hay nhiều sensor phức tạp. Mục tiêu là nhận chỉ dẫn dạng tiếng Anh tự nhiên như ‘đi vào kho rồi quay mặt về kệ thứ hai’ và dẫn robot thực thi hành vi phù hợp.
Tính năng chính
- Thành tích 76.6% success trên bộ R2R-CE unseen, vượt mô hình đơn camera trước đó ở một biên độ đáng kể.
- Kiến trúc 8B được huấn luyện nội bộ, sử dụng dữ liệu mô phỏng lớn để đẩy throughput và giảm chi phí huấn luyện.
- Có cơ chế pointing + fallback displacements, giúp model suy luận khi target nằm ngoài tầm nhìn tức thì.
- Dữ liệu được generate hàng trăm nghìn quỹ đạo trên hàng nghìn scene, kèm phương pháp RL online cho phép mô hình cải thiện theo phân phối thực tế.
Cách sử dụng
- Nội dung công bố mô tả hướng nghiên cứu/triển khai trong các bài toán vận hành văn phòng, công trình, kho bãi và outdoor.
- Đối với đội robotics, ưu tiên đánh giá đầu tiên trên môi trường mô phỏng và sau đó giảm bước sang môi trường thực có nhiễu.
- Theo dõi hướng phát triển tiếp theo cho unified embodied agent; đây là một block building block hơn là sản phẩm kết thúc.
Ý nghĩa cho dev
Với đội làm sản phẩm robot hoặc simulator-driven, điểm đáng giá là cost of entry thấp hơn vì không bắt buộc thêm nhiều phần cứng đắt tiền. Bạn có thể prototyping nhanh hơn cho task indoor navigation mà vẫn giữ được tính mở rộng lên wheeled, legged hoặc drone nếu pipeline chuẩn hóa dữ liệu đầu vào tốt.