NVIDIA a annoncé aujourd’hui le projet GR00T, un modèle de base à usage général pour les robots humanoïdes, conçu pour poursuivre ses travaux en matière de percées dans la robotique et l’IA incarnée.

Dans le cadre de cette initiative, la société a également dévoilé un nouvel ordinateur, Jetson Thor, pour robots humanoïdes basé sur le système sur puce (SoC) NVIDIA Thor, ainsi que des mises à niveau significatives de la plate-forme robotique NVIDIA Isaac™, notamment modèles de base et outils génératifs d’IA pour l’infrastructure de simulation et de flux de travail d’IA.

« La création de modèles de base pour les robots humanoïdes généraux est aujourd’hui l’un des problèmes les plus passionnants à résoudre en matière d’IA », a déclaré Jensen Huang, fondateur et PDG de NVIDIA. « Les technologies habilitantes se rassemblent pour permettre aux principaux roboticiens du monde entier de faire des pas de géant vers la robotique générale artificielle. »

Les robots propulsés par GR00T, qui signifie Generalist Robot 00 Technology, seront conçus pour comprendre le langage naturel et imiter les mouvements en observant les actions humaines – apprenant rapidement la coordination, la dextérité et d’autres compétences afin de naviguer, de s’adapter et d’interagir avec le monde réel. Dans son discours d’ouverture du GTC , Huang a présenté plusieurs de ces robots accomplissant diverses tâches.

Conçu pour les robots humanoïdes,
Jetson Thor a été créé en tant que nouvelle plate-forme informatique capable d’effectuer des tâches complexes et d’interagir de manière sûre et naturelle avec les personnes et les machines. Il dispose d’une architecture modulaire optimisée pour les performances, la puissance et la taille.

Le SoC comprend un GPU de nouvelle génération basé sur l’ architecture NVIDIA Blackwell avec un moteur de transformateur offrant 800 téraflops de performances d’IA à virgule flottante 8 bits pour exécuter des modèles d’IA génératifs multimodaux comme GR00T. Avec un processeur de sécurité fonctionnelle intégré, un cluster de processeurs hautes performances et 100 Go de bande passante Ethernet, il simplifie considérablement les efforts de conception et d’intégration.

NVIDIA construit une plate-forme d’IA complète pour les principales sociétés de robots humanoïdes telles que 1X Technologies, Agility Robotics, Apptronik, Boston Dynamics, Figure AI, Fourier Intelligence, Sanctuary AI, Unitree Robotics et XPENG Robotics, entre autres.

« Nous sommes à un point d’inflexion dans l’histoire, avec des robots centrés sur l’humain comme Digit sur le point de changer le travail pour toujours. L’IA moderne accélérera le développement, ouvrant la voie à des robots comme Digit pour aider les gens dans tous les aspects de la vie quotidienne », a déclaré Jonathan Hurst, cofondateur et directeur des robots chez Agility Robotics. « Nous sommes ravis de nous associer à NVIDIA pour investir dans l’informatique, les outils de simulation, les environnements d’apprentissage automatique et d’autres infrastructures nécessaires pour permettre au rêve de voir les robots faire partie de la vie quotidienne.

« L’IA incarnée contribuera non seulement à relever certains des plus grands défis de l’humanité, mais également à créer des innovations qui sont actuellement hors de notre portée ou de notre imagination », a déclaré Geordie Rose, cofondateur et PDG de Sanctuary AI. « Une technologie aussi importante ne devrait pas être construite en silos, c’est pourquoi nous accordons la priorité aux partenaires à long terme comme NVIDIA. »

Mises à jour majeures de la plateforme Isaac
Les outils Isaac utilisés par GR00T sont capables de créer de nouveaux modèles de base pour n’importe quelle incarnation de robot dans n’importe quel environnement. Parmi ces outils figurent Isaac Lab pour l’apprentissage par renforcement et OSMO , un service d’orchestration informatique.

Les modèles d’IA incorporés nécessitent d’énormes quantités de données réelles et synthétiques. Le nouvel Isaac Lab est une application légère, accélérée par GPU et aux performances optimisées, construite sur Isaac Sim spécifiquement pour exécuter des milliers de simulations parallèles pour l’apprentissage des robots.

Pour faire évoluer les charges de travail de développement de robots sur des calculs hétérogènes, OSMO coordonne la génération de données, la formation des modèles et les flux de travail logiciels/matériel dans la boucle dans des environnements distribués.

NVIDIA a également annoncé Isaac Manipulator et Isaac Perceptor , une collection de modèles robotiques pré-entraînés, de bibliothèques et de matériel de référence.

Isaac Manipulator offre une dextérité de pointe et des capacités d’IA modulaires pour les bras robotiques, avec une solide collection de modèles de base et de bibliothèques accélérées par GPU. Il offre une accélération jusqu’à 80 fois dans la planification du chemin et la perception du tir zéro augmente l’efficacité et le débit, permettant aux développeurs d’automatiser un plus grand nombre de nouvelles tâches robotiques. Parmi les premiers partenaires de l’écosystème figurent Yaskawa, Universal Robots, une société Teradyne, PickNik Robotics, Solomon, READY Robotics et Franka Robotics.

Isaac Perceptor offre des capacités de vision surround 3D multi-caméras, qui sont de plus en plus utilisées dans les robots mobiles autonomes adoptés dans les opérations de fabrication et d’exécution des commandes pour améliorer l’efficacité et la sécurité des travailleurs ainsi que pour réduire les taux d’erreur et les coûts. Parmi les premiers utilisateurs figurent ArcBest, BYD et KION Group, qui visent à atteindre de nouveaux niveaux d’autonomie dans les opérations de manutention et bien plus encore.

Les nouvelles capacités de la plateforme Isaac devraient être disponibles au cours du prochain trimestre.