Редактор Downcodes узнал, что исследовательская группа NVIDIA совершила крупный прорыв и разработала новую нейронную сеть под названием HOVER (Humanoid Multi-Function Controller). Эта нейронная сеть имеет всего 1,5 миллиона параметров, но она может эффективно координировать движение и работу роботов-гуманоидов. Ее эффективный метод обучения и мощные функции привлекают внимание. Появление HOVER знаменует собой большой шаг вперед в технологии управления роботами-гуманоидами и открывает новые возможности для развития робототехники будущего.
Джим Фан, старший менеджер по исследованиям NVIDIA, сказал: «Не все базовые модели должны быть огромными. Обученная нами нейронная сеть с параметрами 1,5 млн предназначена для управления телом робота-гуманоида». Далее он пояснил, что HOVER может фиксировать движения человека». подсознательные процессы, чтобы роботы могли выполнять сложные задачи без громоздкого программирования. Он отметил: «Людям требуется много подсознательной обработки, когда они ходят, поддерживают равновесие и гибко управляют своими конечностями».
В процессе обучения HOVER использовала платформу моделирования Isaac от NVIDIA, которая может ускорить физическое моделирование в 10 000 раз быстрее, чем в реальном времени.
Джим Фан рассказал, что обучение этой модели в виртуальной среде заняло год, а в реальном времени это заняло всего около 50 минут, и это было выполнено на одном графическом процессоре. Он сказал, что такое эффективное обучение позволяет плавно перенести нейронную сеть на реальные приложения без необходимости тонкой настройки.
HOVER имеет возможность реагировать на различные команды движения высокого уровня, включая использование устройств XR (таких как Apple Vision Pro) для управления положением головы и рук или получение положения всего тела с помощью захвата движения и камер RGB и даже получение суставы под углом экзоскелетов или получить команду скорости движения корня с джойстика. Фан подчеркнул, что HOVER предоставляет единый интерфейс для роботов, управляющих различными устройствами ввода, тем самым облегчая сбор данных телеоперации для обучения.
Кроме того, HOVER интегрирован с предшествующей моделью визуально-языкового действия, что позволяет преобразовывать команды движения в двигательные сигналы низкого уровня на высокой частоте. Эта модель совместима с любым роботом-гуманоидом, которого можно смоделировать в Isaac, что позволяет пользователям легко воплотить робота в жизнь.
Еще в начале этого года NVIDIA также анонсировала проект под названием GR00T, который представляет собой общую базовую модель, предназначенную для роботов-гуманоидов. Роботы, управляемые GR00T (Generalist Robot00Technology), могут понимать естественный язык и имитировать движения человека, наблюдая за движениями, что позволяет им быстро освоить координацию, гибкость и другие навыки, необходимые для эффективного взаимодействия в реальном мире.
URL статьи: https://arxiv.org/pdf/2410.21229.
Появление HOVER принесло новую надежду в область управления роботами-гуманоидами. Его эффективные методы обучения и мощные функции указывают на то, что будущие робототехнические технологии будут более интеллектуальными и гуманными. Этот технологический прорыв будет способствовать применению роботов-гуманоидов в различных областях. Мы с нетерпением ждем новых интересных разработок в будущем!