🚀 Introduktion av X-VLA ; LeRobots nya mjukpromptade Vision-Language-Action-modell.
X-VLA är byggd för att skalas över många olika gestalter: olika robotar, kameror, handlingsutrymmen och miljöer, alla hanterade av en enhetlig transformatorryggrad.
- Generalist över robotar (Franka, WidowX, Agibot, sim + verklig)
- Softprompt-domän-ID:n låter modellen anpassa sig till ny hårdvara med små inlärningsbara inbäddningar
- Flödesmatchning + transformatorkärna för jämn, kontinuerlig 50 Hz-styrning
- Förtränad på en blandad integrerad datamängd som sträcker sig över 7+ plattformar och olika uppgifter
- Finjustera på vilken datamängd som helst med hjälp av en av de 6 kontrollpunkter vi tillhandahåller direkt från start.
Väldigt exalterad över att släppa detta tillsammans med @frodobots och @BitRobotNetwork, fantastiskt att se dem göra roboten och datamängden öppen källkod!
Utforska datamängden på Hugging Face Hub och kolla in Earth Rover Mini+ i LeRobot!
🚀 Vi har precis släppt en stor uppgradering till vår simuleringslekplats för imitation-lärande i LeRobot, byggd tillsammans med @LightwheelAI!
Du kan nu teleportera robotar i simulator (tangentbord eller riktig robot) och samla träningsdemos direkt. Detta gör det möjligt att genomföra riktig IL-forskning på svårare, mer realistiska manipulationsuppgifter, även om du inte har hårdvara.
Nya uppgifter:
🟠 Ta apelsin på tallriken
🧺 Vik tyg (ja!)
📦 Välj två "E"-leksaker i lådan
🔴 Lyft röd kub
Genom vårt partnerskap med Lightwheel integrerades LeIsaac i EnvHub redan från dag ett, en bästa praxis-integration som stärker båda ekosystemen och driver simuleringsfokuserad robotik framåt.
👉 Ladda en uppgift via EnvHub, börja teleopera, spela in din demo, ladda upp datan på hubben och du är redo att träna eller testa.