🚀 Presentamos X-VLA ; El nuevo modelo de Visión-Lenguaje-Acción con prompts suaves de LeRobot. X-VLA está diseñado para escalar en muchas incorporaciones: diferentes robots, cámaras, espacios de acción y entornos, todo gestionado por una sola columna vertebral unificada de transformadores. - Generalista entre robots (Franka, WidowX, Agibot, sim + real) - Los identificadores de dominio de soft-prompt permiten que el modelo se adapte a nuevo hardware con pequeñas incrustaciones aprendibles - Ajuste de flujo + núcleo transformador para un control suave y continuo a 50 Hz - Preentrenado con un conjunto de datos mixto de incorporación que abarca 7+ plataformas y tareas diversas - Afinar finamente cualquier conjunto de datos usando uno de los 6 puntos de control que proporcionamos de fábrica.

Estoy muy emocionado de lanzarlo junto con @frodobots y @BitRobotNetwork, ¡genial ver que abren el código del robot y el conjunto de datos! ¡Explora el conjunto de datos en el Hugging Face Hub y echa un vistazo a Earth Rover Mini+ en LeRobot!

🚀 Acabamos de lanzar una gran mejora para nuestro patio de juegos de imitación de aprendizaje en simulación en LeRobot, construido junto con @LightwheelAI Ahora puedes teleoperar robots en simulación (teclado o robot real) y coleccionar demos de entrenamiento al instante. Esto hace posible realizar investigación real de IL en tareas de manipulación más difíciles y realistas, incluso si no tienes hardware. Nuevas tareas: 🟠 Elige naranja para el plato 🧺 Dobla tela (¡sí!) 📦 Elige 2 juguetes "E" para la caja 🔴 Levanta el cubo rojo Gracias a nuestra colaboración con Lightwheel, LeIsaac se integró en EnvHub desde el primer día, una integración de buenas prácticas que fortalece ambos ecosistemas y impulsa la robótica centrada en la simulación. 👉 Carga una tarea a través de EnvHub, empieza a teleop, graba tu demo, sube los datos al hub y estarás listo para entrenar o probar.