🚀 Apresentando o X-VLA; o novo modelo de Visão-Linguagem-Ação com soft-prompt do LeRobot. O X-VLA foi construído para escalar em muitas incorporações: diferentes robôs, câmaras, espaços de ação e ambientes, todos geridos por uma única estrutura de transformador unificada. - Generalista entre robôs (Franka, WidowX, Agibot, sim + real) - IDs de domínio de soft-prompt permitem que o modelo se adapte a novo hardware com pequenas incorporações aprendíveis - Correspondência de fluxo + núcleo de transformador para controle suave e contínuo a 50 Hz - Pré-treinado em um conjunto de dados de incorporações mistas abrangendo mais de 7 plataformas e tarefas diversas - Ajuste fino em qualquer conjunto de dados usando um dos 6 pontos de verificação que fornecemos de forma padrão.

Muito entusiasmado por lançar isto juntamente com @frodobots e @BitRobotNetwork, é incrível vê-los abrir o código do robô e do conjunto de dados! Explore o conjunto de dados no Hugging Face Hub e confira o Earth Rover Mini+ no LeRobot!

🚀 Acabámos de lançar uma grande atualização no nosso playground de aprendizagem por imitação em simulação no LeRobot, construído em conjunto com @LightwheelAI ! Agora você pode teleoperar robôs na simulação (teclado ou robô real) e coletar demonstrações de treinamento instantaneamente. Isso torna possível realizar pesquisas reais em IL em tarefas de manipulação mais difíceis e realistas, mesmo que você não tenha hardware. Novas tarefas: 🟠 pegar laranja para o prato 🧺 dobrar pano (sim!) 📦 pegar 2 brinquedos “e” para a caixa 🔴 levantar cubo vermelho Através da nossa parceria com a Lightwheel, o LeIsaac foi integrado no EnvHub no primeiro dia, uma integração de melhores práticas que fortalece ambos os ecossistemas e impulsiona a robótica com foco em simulação. 👉 Carregue uma tarefa via EnvHub, comece a teleoperar, grave sua demonstração, faça o upload dos dados no hub e você está pronto para treinar ou testar.