🚀 Představujeme X-VLA; Nový model Vision-Language-Action od LeRobotu s měkkým promptem.
X-VLA je navržena tak, aby se šálovala přes mnoho podob: různé roboty, kamery, akční prostory a prostředí, vše řízené jedním sjednoceným transformátorem.
- Generalista napříč roboty (Franka, WidowX, Agibot, sim + real)
- Soft-prompt doménové ID umožňují modelu přizpůsobit se novému hardwaru s malými naučitelnými embeddingy
- Transformátorové jádro s přizpůsobením průtoku + pro hladké, kontinuální řízení 50 Hz
- Předtrénováno na datové sadě s kombinovaným ztělesněním, která zahrnuje 7+ platforem a různé úkoly
- Jemné ladění na jakékoli datové sadě pomocí jednoho ze 6 kontrolních bodů, které poskytujeme hned po vybalení.
Jsem velmi nadšený, že to můžeme vydat společně s @frodobots a @BitRobotNetwork, skvělé vidět, že otevírají zdroj robota a datasetu!
Prozkoumejte datovou sadu na Hugging Face Hub a podívejte se na Earth Rover Mini+ v LeRobotu!
Otevíráme naši platformu Earth Rover s @huggingface & @sigrobotics!
🤖 Integrovaný hardware (elektronika, software, 3D soubory) s @LeRobotHF
🌎 7 000 hodin dat z jízdy ze 40+ měst, kurátorovaných výzkumníky z UC Berkeley
Vlákno ↓
🚀 Právě jsme dodali velký upgrade našeho hřiště pro napodobování učení v simulaci v LeRobotu, postaveného společně s @LightwheelAI!
Nyní můžete teleoperovat roboty v simulaci (klávesnici nebo skutečném robotovi) a okamžitě sbírat tréninkové ukázky. To umožňuje provádět skutečný výzkum IL na těžších, realističtějších manipulacích, i když nemáte hardware.
Nové úkoly:
🟠 Vyber oranžovou na talíř
🧺 Složit látku (ano!)
📦 Vyber 2 "E" hračky do krabice
🔴 zvedněte červenou kostku
Díky našemu partnerství s Lightwheel byl LeIsaac integrován do EnvHubu hned od prvního dne, což je osvědčená integrace, která posiluje jak ekosystémy, tak posouvá simulace v robotikách vpřed.
👉 Načtěte úkol přes EnvHub, začněte teleopovat, nahrajte demo, nahrajte data do hubu a jste připraveni trénovat nebo testovat.