Adobe Research colaboró con la Universidad Northwestern para desarrollar un sistema de inteligencia artificial llamado Sketch2Sound. Se espera que esta herramienta de inteligencia artificial revolucione el campo del diseño de sonido. Permite a los usuarios crear efectos de sonido profesionales y sonidos ambientales simplemente tarareando, imitando voz o simples descripciones de texto, lo que simplifica enormemente el proceso de diseño de sonido y mejora la eficiencia. Sketch2Sound analiza el volumen, el timbre y el tono de la entrada del usuario, combinados con descripciones de texto, para generar de forma inteligente los sonidos requeridos, como identificar los cantos de pájaros imitados por el usuario e integrarlos en el efecto de sonido de "atmósfera de bosque".
Recientemente, Adobe Research colaboró con la Universidad Northwestern para desarrollar un sistema de inteligencia artificial llamado Sketch2Sound. Se espera que esta herramienta cambie por completo la forma en que trabajan los diseñadores de sonido. Sketch2Sound permite a los usuarios crear ambientes y efectos de sonido profesionales tarareando, imitando sonidos y utilizando descripciones de texto simples.
El sistema analiza tres elementos clave de la entrada vocal del usuario: volumen, timbre (que determina qué tan brillante u oscuro es el sonido) y tono. Luego combina estas características con la descripción textual del usuario para generar el sonido deseado. Por ejemplo, cuando un usuario entra en la "atmósfera del bosque" y emite sonidos breves, el sistema reconoce automáticamente estos sonidos como cantos de pájaros sin instrucciones específicas.
Otra gran ventaja de Sketch2Sound es su capacidad para comprender el contexto. Al hacer música, los usuarios pueden ingresar "bombo, caja" y tararear el ritmo. El sistema coloca inteligentemente el bombo en las notas bajas y la caja en las notas altas. Este procesamiento inteligente simplifica enormemente el proceso de diseño de sonido.
Para satisfacer las necesidades de los profesionales, el equipo de investigación también incorporó una tecnología de filtrado especial, que permite a los usuarios ajustar la precisión del sonido generado según sus necesidades. Los diseñadores de sonido pueden elegir entre un control muy preciso o un enfoque más relajado y aproximado, y esta flexibilidad puede hacer que Sketch2Sound sea especialmente popular entre los artistas de Foley. Con esta herramienta, los profesionales que crean efectos de sonido para películas y programas de televisión pueden crear efectos más rápidamente utilizando descripciones de texto y sonido, en lugar de tener que manipular objetos físicos para crear sonidos.
Si bien los investigadores señalan que las características de audio espacial en las grabaciones de entrada a veces pueden tener un efecto adverso en el sonido resultante, están trabajando para abordar este problema. Actualmente, Adobe no ha anunciado si Sketch2Sound se lanzará como producto comercial ni cuándo se lanzará.
Entrada del proyecto: https://hugofloresgarcia.art/sketch2sound/
Reflejos:
Sketch2Sound es una herramienta de inteligencia artificial recientemente desarrollada que crea efectos de sonido mediante tarareos y descripciones de texto.
El sistema analiza el volumen, el timbre y el tono, combinando la entrada vocal del usuario con texto para generar efectos de sonido específicos.
Especialmente adecuado para artistas de Foley, puede generar rápidamente efectos de sonido de películas y televisión y mejorar la eficiencia del trabajo.
Considerándolo todo, con su inteligencia y conveniencia, Sketch2Sound tiene el potencial de convertirse en un poderoso asistente para diseñadores de sonido y artistas de Foley, mejorando enormemente la eficiencia del trabajo. Aunque todavía se encuentra en la etapa de investigación y desarrollo, vale la pena esperar con ansias su desarrollo futuro. El enlace del proyecto se ha proporcionado para que los usuarios interesados obtengan más información.