Mistral AI prezentuje Robostral Navigate: model 8B do nawigacji robotów z jedną kamerą RGB

Mistral AI zaprezentowało Robostral Navigate, swój pierwszy model stworzony z myślą o nawigacji robotów w fizycznym świecie. Ten 8B-parametrowy model przyjmuje obrazy RGB oraz instrukcje w języku naturalnym, a następnie steruje robotem. Co istotne, osiąga on 76,6% skuteczności na zbiorze walidacyjnym R2R-CE unseen, wykorzystując jedynie pojedynczą kamerę RGB, co stanowi znaczące osiągnięcie w dziedzinie nawigacji robotycznej.

Innowacyjne podejście do nawigacji

Robostral Navigate to model 8B przeznaczony do nawigacji robotów w złożonych środowiskach, takich jak biura, budynki mieszkalne, obiekty komercyjne czy tereny zewnętrzne. Użytkownik wydaje jedną instrukcję, a model samodzielnie wykonuje całe zadanie. Przykładem może być polecenie: „Opuść hol, przejdź korytarzem, wejdź do magazynu i zatrzymaj się, aby stanąć przodem do drugiej półki”. Co ważne, robot porusza się w dynamicznych

Źródło: marktechpost.com