Исследовательская группа из Калифорнийского университета, Сан-Диего и MIT недавно запустила проект удаленной операционной системы с открытым исходным кодом под названием «Open Television», технологию, которую можно рассматривать как революционный прорыв в области дистанционного управления. Система может реализовать точное управление роботами в 3000 миль, заставляя оператора чувствовать себя так, как будто он находится на сцене в научно -фантастическом фильме «Аватар», и реализует дистанционное управление физическим миром с помощью технологий виртуальной реальности.
Система с открытым телевидение демонстрирует отличную совместимость с устройствами и поддерживает различные устройства терминала, включая Vision Pro, Quest Series, Mac, iPad и iPhone. Его основное преимущество заключается в трехмерной технологии потоковой передачи видео в реальном времени, которая предоставляет пользователям точное пространственное восприятие и подробную информацию, что делает опыт дистанционного управления таким же плавным и естественным, как и текущие облака. Эта бесшовная функция кроссплатформенного соединения значительно снижает порог для использования пользователя и прокладывает путь для популяризации и применения технологии дистанционного управления.
Основная концепция этой системы состоит в том, чтобы добиться глубокого погружения взаимодействия человека с компьютером с помощью технологий виртуальной реальности. Пользователям нужно носить виртуальные гарнитуры только для достижения дистанционного управления роботом без других сложных носимых устройств. Система умело имитирует бинокулярное стереоскопическое видение и механизм движения шеи, позволяя оператору иметь «захватывающий» контрольный опыт и повышает взаимодействие человека с компьютером на совершенно новый уровень.
С точки зрения технологической реализации, система открытого телевидения показала много инновационных основных моментов. Во -первых, он прорывается через ограничения традиционного 2D -видео и представляет 3D -стереоскопическое видео через гарнитуры VR, предоставляя операторам точное восприятие пространственного расстояния. Во -вторых, система оснащена движущейся механизмом моделирования шеи, и пользователи могут наблюдать под разными углами, просто поворачивая головы, значительно улучшив удобство управления. Кроме того, система использует интеллектуальную технологию обработки изображений и фокусируется на обработке в центре картины, что значительно повышает эффективность вычислений и частоту системы системных кадров.
С точки зрения конкретных методов реализации, система принимает усовершенствованные алгоритмы обратной кинематики, чтобы точно отобразить API, предоставленный гарнитурой VR для робота для достижения точной передачи действий. Дизайн архитектуры, основанная на веб-платформе, позволяет получить доступ к системе в браузере любого устройства в любое время и в любом месте, достигая опыта удаленной эксплуатации с низкой задержкой и высокоэффективностью.
В ответ на технические проблемы в области удаленной эксплуатации, система открытого телефона предоставляет инновационные решения. Благодаря процессу картирования система эффективно решает проблему несоответствия между гуманоидными роботами и степенями свободы человека и достигает широкой адаптации к различным типам роботов. В то же время система использует удаленную операцию для сбора учебных данных, что значительно улучшает способность к автономной задаче робота и позволяет системе демонстрировать превосходную надежность и способность обобщения.
Проект был открыт на платформе Github, с адресом проекта по адресу https://github.com/improbable-ai/visionproteleop, предоставляя ценную ссылку для исследования и применения технологии дистанционного управления. Запуск системы с открытым телевидением не только демонстрирует идеальную интеграцию технологий виртуальной реальности и технологии робототехники, но и открывает новые направления для разработки дистанционного управления и, как ожидается, будет играть важную роль во многих областях, таких как промышленное производство Медицинская хирургия и опасные операции по окружающей среде.