Mistral AI lansează Robostral Navigate, primul său model de robotică pentru navigarea robotului cu o singură cameră

Compania franceză de inteligență artificială Mistral AI a intrat în spațiul roboticii cu Robostral Navigate, un model cu 8 miliarde de parametri care le permite roboților să navigheze în mod autonom în medii complexe folosind nimic mai mult decât o singură cameră RGB obișnuită. Modelul, anunțat pe 8 iulie 2026, reprezintă prima mișcare a lui Mistral în IA încorporată și robotica fizică.

Robostral Navigate preia imagini RGB și instrucțiuni în limbaj simplu și mută un robot printr-un mediu precum un birou, o clădire rezidențială sau un spațiu exterior. Ceea ce îl diferențiază este minimalismul său hardware: în timp ce modelele concurente se bazează de obicei pe senzori de adâncime, LiDAR sau mai multe camere care lucrează în comun, Robostral Navigate folosește doar o cameră RGB standard și nici un senzor de adâncime. Pentru o acoperire cuprinzătoare a lansărilor de modele AI emergente, cititorii pot urmări cele mai recente evoluții AI pe pagina noastră de pornire.

Performanță de ultimă generație pe R2R-CE

În ciuda abordării sale cu o singură cameră, Robostral Navigate atinge o rată de succes de 76,6% la testul de referință nevăzut de validare R2R-CE (Room-to-Room in Continuous Environments), testul standard pentru urmarirea instrucțiunilor de navigare în medii ținute în timpul antrenamentului. Acest rezultat depășește cea mai bună abordare anterioară cu o singură cameră cu 9,7 puncte procentuale și depășește cel mai bun sistem care utilizează senzori de adâncime sau camere multiple cu 4,5 puncte, în ciuda faptului că nu folosește niciuna.

După validarea văzută, modelul atinge o rată de succes de 79,4%. Potrivit lui Mistral, modelul se generalizează pe toate tipurile de roboți, rulând pe roboți cu roți, pe picioare și chiar zburători și se adaptează la dimensiunile roboților fără a fi reinstruit.

Construit în întregime în simulare

Unul dintre cele mai notabile aspecte ale Robostral Navigate este că a fost construit în întregime intern și antrenat exclusiv în simulare. Mistral a construit o conductă eficientă de generare de date care a produs un set de date de aproximativ 400.000 de traiectorii colectate în 6.000 de scene simulate. Această abordare de simulare a permis o iterare rapidă fără costurile și provocările logistice ale colectării datelor din lumea reală.

Modelul este inițializat din modelul de limbaj de viziune al lui Mistral, care a fost specializat pentru sarcini de împământare, cum ar fi indicarea, numărarea și localizarea obiectelor. Navigarea apare ca o extensie naturală a acestor capacități: odată ce modelul înțelege unde sunt lucrurile într-o imagine, învață cum să se îndrepte spre ele. În special, Robostral Navigate nu se bazează pe niciun model de limbaj de viziune open-source existent.

Navigare bazată pe indicare și învățare prin consolidare

Robostral Navigate utilizează un mecanism de navigare bazat pe indicare. Având în vedere o sarcină și un istoric al observațiilor, modelul prezice unde ar trebui să se miște robotul în continuare, deducând coordonatele imaginii locației țintă în vizualizarea actuală a camerei robotului, împreună cu orientarea dorită la sosire. Această abordare de orientare face ca politica să fie în mod natural robustă la schimbările intrinseci a camerei și la scară mondială, spre deosebire de comenzile care se bazează pe deplasări metrice.

Când locația țintă se află în afara câmpului vizual curent și nu se aplică indicarea, modelul revine la deplasări în cadrul de coordonate local al robotului. După instruire supravegheată, Mistral a aplicat învățarea prin consolidare online folosind algoritmul său CISPO, care a permis modelului să învețe din încercări și erori, să se recupereze din eșecuri și să dobândească comportamente exploratorii. Numai această etapă de învățare prin întărire a îmbunătățit rata de succes cu 3,2 puncte procentuale, iar Mistral raportează că performanța este încă în creștere fără semne de plată.

Antrenament eficient prin prefix-caching

O inovație tehnică cheie este un algoritm de antrenament eficient bazat pe prefix-caching. Folosind o strategie de mascare a atenției bazată pe arbore, metoda lui Mistral comprimă un întreg episod într-o singură secvență, permițând antrenamentul pe toți pașii de timp într-o singură trecere înainte, prevenind în același timp scurgerea de informații între pașii de timp. În comparație cu antrenamentul cu un eșantion pe pas de timp, această abordare reduce numărul de jetoane de antrenament cu un factor de 22, păstrând în același timp toate semnalele de învățare. În practică, compania spune că acest lucru transformă cursele de antrenament care ar dura luni în curse care se finalizează în zile.

Aplicații și ce urmează

Mistral poziționează Robostral Navigate ca fiind una dintre cele mai solicitate capabilități pentru clienții săi din prezent. Tehnologia deblochează aplicații în producție, livrare, logistică și ospitalitate. Dați modelului o instrucțiune și acesta completează întreaga sarcină în mod autonom, deplasându-se prin spații de viață pline de oameni și obstacole pe care nu le-a fost niciodată arătat în timpul antrenamentului.

Compania descrie această versiune ca fiind doar primul pas către un agent încorporat unificat. Mistral își extinde în mod activ echipa de robotică și caută cercetători și ingineri. Lansarea marchează o expansiune strategică semnificativă pentru startup-ul din Paris, care a fost cunoscut în primul rând pentru modelele sale mari de limbaj și a semnalat acum un angajament serios față de AI fizică și robotică.

Trecerea către robotică are loc pe măsură ce industria AI mai largă investește din ce în ce mai mult în AI întruchipată, companiile explorând modul în care capabilitățile modelului lingvistic pot fi extinse la interacțiunea lumii fizice. Abordarea cu o singură cameră a lui Mistral, bazată pe simulare, ar putea reduce bariera în calea implementării sistemelor de navigație autonome, în special în aplicațiile comerciale sensibile la costuri, în care setările cu mai mulți senzori nu sunt practice.

Stai înaintea AI

Robostral Navigate este acum disponibil pentru clienții Mistral. Pentru mai multe știri și analize de ultimă oră, vizitați AI Buzz Wire.

Citiți mai multe știri AI →