L'éditeur de Downcodes a appris que l'équipe de recherche de NVIDIA a réalisé une avancée majeure et développé un nouveau réseau de neurones appelé HOVER (Humanoid Multi-Function Controller). Ce réseau neuronal ne compte que 1,5 million de paramètres, mais il peut coordonner efficacement le mouvement et le fonctionnement des robots humanoïdes. Sa méthode de formation efficace et ses fonctions puissantes attirent l'attention. L’émergence de HOVER marque un grand pas en avant dans la technologie de contrôle des robots humanoïdes et offre de nouvelles possibilités pour le développement de la future technologie robotique.
Jim Fan, directeur de recherche senior chez NVIDIA, a déclaré : « Tous les modèles de base n'ont pas besoin d'être énormes. Le réseau neuronal de 1,5 million de paramètres que nous avons formé est conçu pour contrôler le corps d'un robot humanoïde. » Il a en outre expliqué que HOVER peut capturer les mouvements humains. processus subconscients afin que les robots puissent effectuer des tâches complexes sans programmation lourde. Il a mentionné : « Les humains ont besoin de beaucoup de traitements subconscients lorsqu’ils marchent, maintiennent leur équilibre et contrôlent leurs membres avec souplesse. »
Au cours du processus de formation, HOVER a utilisé la plateforme de simulation Isaac de NVIDIA, capable d'accélérer la simulation physique 10 000 fois plus rapidement qu'en temps réel.
Jim Fan a révélé que ce modèle prenait un an pour s'entraîner dans un environnement virtuel et ne prenait en réalité qu'environ 50 minutes en temps réel, réalisées sur un seul GPU. Il a déclaré que cette formation efficace permet au réseau neuronal d'être transféré en douceur vers des applications du monde réel sans avoir besoin de réglages précis.
HOVER a la capacité de répondre à une variété de commandes de mouvement de haut niveau, notamment en utilisant des appareils XR (tels que Vision Pro d'Apple) pour le contrôle de la posture de la tête et des mains, ou en obtenant une posture complète du corps grâce à la capture de mouvement et aux caméras RVB, et même en obtenant articulations depuis l'angle des exosquelettes, ou obtenez la commande de vitesse racine à partir du joystick. Fan a souligné que HOVER fournit une interface unifiée pour les robots contrôlant différents périphériques d'entrée, facilitant ainsi la collecte de données de téléopération pour la formation.
De plus, HOVER est intégré au modèle visuel-langage-action en amont, permettant de convertir les commandes de mouvement en signaux moteur de bas niveau à haute fréquence. Ce modèle est compatible avec n'importe quel robot humanoïde pouvant être simulé dans Isaac, permettant aux utilisateurs de donner facilement vie au robot.
Dès le début de cette année, NVIDIA a également annoncé un projet appelé GR00T, qui est un modèle de base général conçu pour les robots humanoïdes. Les robots pilotés par GR00T (Generalist Robot00Technology) peuvent comprendre le langage naturel et imiter les mouvements humains en observant les mouvements, ce qui leur permet d'acquérir rapidement la coordination, la flexibilité et d'autres compétences nécessaires pour interagir efficacement dans le monde réel.
URL de l'article : https://arxiv.org/pdf/2410.21229
L'émergence de HOVER a apporté un nouvel espoir dans le domaine du contrôle des robots humanoïdes. Ses méthodes de formation efficaces et ses fonctions puissantes indiquent que la future technologie robotique sera plus intelligente et plus humaine. Cette avancée technologique favorisera grandement l’application des robots humanoïdes dans divers domaines. Nous attendons avec impatience des développements plus passionnants à l’avenir !