NVIDIA, dos Estados Unidos, une forças com Hugging Face para introduzir novo framework de modelos no LeRobot

De acordo com pt.wedoany.com-A NVIDIA estabeleceu uma parceria com a comunidade de inteligência artificial de código aberto Hugging Face, integrando o seu modelo de ação de linguagem visual de raciocínio aberto para robôs humanoides, Isaac GR00T 1.7, e o framework de recolha de dados, Isaac Teleop, na biblioteca de robótica de código aberto LeRobot da Hugging Face, com planos de introduzir em breve o modelo de fronteira de IA física, Cosmos 3. Estas integrações visam fornecer aos programadores um caminho de desenvolvimento robótico de ponta a ponta mais acessível e padronizado, promovendo a colaboração e a inovação na comunidade de robótica aberta.

Thomas Wolf, cofundador e diretor científico da Hugging Face, afirmou que o código aberto é a forma como um campo transforma investigação avançada em conteúdo que as pessoas podem aprender, adaptar e construir. Com a integração do Isaac GR00T 1.7 e do Isaac Teleop no LeRobot, os programadores podem treinar e avaliar robôs num ambiente aberto utilizando modelos, dados e fluxos de trabalho partilhados; o Cosmos 3, que se juntará em breve, fornecerá à comunidade um caminho para incorporar modelos mundiais de ponta no mesmo ciclo colaborativo.

O LeRobot da Hugging Face é uma biblioteca de código aberto para treinar, executar e partilhar conjuntos de dados, modelos, políticas e fluxos de trabalho robóticos. Esta parceria conecta os 3 milhões de programadores de robótica da NVIDIA com os 16 milhões de construtores de IA da Hugging Face, expandindo o acesso a ferramentas de IA física de ponta. Os conteúdos específicos da integração incluem: o Isaac Teleop, como framework de recolha de dados de código aberto, que ajuda os programadores a capturar demonstrações humanas de alta qualidade num formato interoperável padronizado e a expandir diretamente conjuntos de dados partilhados no LeRobot; o Isaac GR00T 1.7, como o primeiro modelo de base robótica aberto e comercialmente viável, que simplifica o processo de pós-treino e implementação através dos fluxos de trabalho do LeRobot, suporta a adaptação do modelo a novas plataformas robóticas e tarefas, e fornece desempenho de referência; e o Cosmos 3, como modelo de base mundial de fronteira para IA física, que será lançado em breve no LeRobot para gerar e melhorar dados robóticos quando os dados do mundo real são limitados, simular cenários e apoiar o desenvolvimento de políticas.

Estas integrações baseiam-se nos recursos existentes da NVIDIA para suportar um ciclo completo de desenvolvimento robótico. Esses recursos incluem: o maior conjunto de dados de IA física de código aberto, já descarregado mais de 15 milhões de vezes, contendo mais de 350 mil trajetórias reais e simuladas e 57 milhões de ações de preensão; frameworks de simulação baseados no Isaac Sim e no Isaac Lab; o Isaac Lab-Arena no LeRobot Environment Hub, que permite aos programadores prototipar rapidamente ambientes de simulação complexos, registá-los no LeRobot EnvHub e utilizá-los para treinar e avaliar políticas robóticas gerais, como GR00T, Pi e SmolVLA; e a integração do NVIDIA Jetson Thor com o Reachy 2 do LeRobot, que suporta a implementação de modelos VLA em robôs humanoides de código aberto.