Un equipo de investigación de la Universidad de California, San Diego y el MIT lanzó recientemente un proyecto de sistema operativo remoto de código abierto llamado Open-Television, una tecnología que puede considerarse un avance revolucionario en el campo del control remoto. El sistema puede realizar un control de robot preciso a 3.000 millas de distancia, haciendo que el operador se sienta como si estuviera en la escena en la película de ciencia ficción "Avatar", y realiza el control remoto del mundo físico a través de la tecnología de realidad virtual.
El sistema de televisión abierta demuestra una excelente compatibilidad del dispositivo y admite una variedad de dispositivos terminales, incluidos Vision Pro, Quest, Mac, iPad y iPhone. Su ventaja central se encuentra en la tecnología de transmisión de video tridimensional en tiempo real, que proporciona a los usuarios una percepción espacial precisa e información en profundidad, lo que hace que la experiencia de control remoto sea tan suave y natural como las nubes fluidas. Esta función de conexión multiplataforma perfecta reduce en gran medida el umbral para el uso del usuario y allana el camino para la popularización y la aplicación de la tecnología de control remoto.
El concepto central de este sistema es lograr una profunda inmersión de la interacción humana-computadora a través de la tecnología de realidad virtual. Los usuarios solo necesitan usar auriculares VR para lograr el control remoto del robot sin otros dispositivos portátiles complejos. El sistema simula hábilmente la visión estereoscópica binocular humana y el mecanismo de movimiento del cuello, lo que permite que el operador tenga una experiencia de control "inmersiva" y eleva la interacción humana-computadora a un nivel completamente nuevo.
En términos de implementación tecnológica, el sistema de televisión abierta ha mostrado muchos aspectos destacados innovadores. Primero, rompe las limitaciones del video 2D tradicional y presenta videos estereoscópicos 3D a través de auriculares VR, proporcionando a los operadores una percepción de distancia espacial precisa. En segundo lugar, el sistema está equipado con un mecanismo de simulación de cuello en movimiento, y los usuarios pueden observar desde múltiples ángulos simplemente volviendo la cabeza, mejorando en gran medida la conveniencia del control. Además, el sistema adopta tecnología inteligente de procesamiento de imágenes y se centra en el procesamiento en el centro de la imagen, lo que mejora significativamente la eficiencia informática y la velocidad de cuadros del sistema.
En términos de métodos de implementación específicos, el sistema adopta algoritmos de cinemática inversa avanzadas para mapear con precisión la API proporcionada por el auricular VR al robot para lograr una transmisión precisa de acciones. El diseño de la arquitectura basado en la plataforma web permite acceder al sistema en el navegador de cualquier dispositivo en cualquier momento, en cualquier lugar, lograr una experiencia de operación remota de baja latencia y alta eficiencia.
En respuesta a los desafíos técnicos en el campo de la operación remota, el sistema de televisión abierta proporciona soluciones innovadoras. A través del proceso de mapeo, el sistema resuelve efectivamente el problema del desajuste entre los robots humanoides y los grados de libertad del cuerpo humano, y logra una adaptación generalizada a varios tipos de robots. Al mismo tiempo, el sistema utiliza operaciones remotas para recopilar datos de capacitación, lo que mejora significativamente la capacidad de finalización de tareas autónomas del robot y permite que el sistema muestre una excelente capacidad de confiabilidad y generalización.
El proyecto ha sido abierto en la plataforma GitHub, con la dirección del proyecto en https://github.com/improbable-ai/VisionProteleop, proporcionando una valiosa referencia para la investigación y la aplicación de la tecnología de control remoto. El lanzamiento del sistema de televisión abierta no solo demuestra la integración perfecta de la tecnología de realidad virtual y la tecnología de robótica, sino que también abre nuevas direcciones para el desarrollo del control remoto, y se espera que juegue un papel importante en muchos campos, como la fabricación industrial. , cirugía médica y operaciones ambientales peligrosas.