Dans la création vidéo, les effets sonores sont cruciaux, mais trouver et produire des effets sonores adaptés prend du temps et est laborieux. Adobe a présenté un prototype expérimental appelé Project Super Sonic lors de la conférence MAX, qui utilise la technologie d'IA pour générer des effets sonores basés sur le texte, la reconnaissance d'objets vidéo et même imiter les voix des utilisateurs, améliorant ainsi considérablement l'efficacité de la production vidéo. L'éditeur de Downcodes vous fera découvrir cet outil étonnant.
Outre les éléments visuels, l'audio joue également un rôle important lorsqu'il s'agit de créer des vidéos attrayantes. Cependant, trouver ou créer les bons effets sonores peut souvent prendre beaucoup de temps.
Lors de la conférence annuelle MAX d'Adobe, ils ont présenté un prototype expérimental appelé Project Super Sonic, une technologie capable de générer des effets sonores à partir de texte, d'identifier des objets dans des vidéos et même d'utiliser votre voix pour générer rapidement des arrière-plans pour des projets vidéo. Effets sonores et effets sonores. .
Bien que la possibilité de générer des effets sonores à partir d’invites textuelles semble intéressante, des sociétés comme ElevenLabs proposent déjà des services similaires dans le commerce. Plus intéressant encore, Adobe a poussé cette fonctionnalité encore plus loin et a ajouté deux façons de créer des pistes audio. La première consiste à utiliser le modèle de reconnaissance d'objets. Les utilisateurs peuvent cliquer sur n'importe quelle partie de l'image vidéo et le système générera pour vous des invites d'effet sonore correspondantes. Il s'agit d'un moyen intelligent de combiner plusieurs modèles en un seul flux de travail.
La chose la plus étonnante est le troisième mode, les utilisateurs peuvent enregistrer leur propre voix imitée (synchronisée avec le temps de la vidéo), puis Project Super Sonic générera automatiquement des effets sonores appropriés. Justin Salamon, responsable de l'IA de conception sonore d'Adobe, a déclaré que l'équipe avait commencé avec un modèle texte-audio et a souligné qu'elle n'utilisait que des données sous licence dans tous les projets d'IA générés par Adobe.
"Ce que nous voulons vraiment faire, c'est donner à l'utilisateur le contrôle de l'ensemble du processus. Il s'agit d'un outil conçu pour les créateurs, les concepteurs sonores et les personnes qui souhaitent améliorer le son de leurs vidéos", explique Salamon. pas seulement du texte, mais aussi du flux de travail initial pour les effets sonores, et travailler sur le développement d'un outil qui fournirait un contrôle précis.
En ce qui concerne le contrôle du son, l'outil analyse en fait les différentes caractéristiques et spectres sonores de la voix de l'utilisateur pour guider le processus de génération. Salamon a mentionné que même si la démo utilise des voix humaines, les utilisateurs peuvent également enregistrer avec des applaudissements ou des instruments de musique.
Il convient de noter qu'il y a toujours des "Sneaks" affichés lors des conférences Adobe MAX. Ces projets, comme Project Super Sonic, sont des fonctionnalités expérimentales qu'Adobe développe. Si de nombreux projets seront à terme intégrés à la suite créative d'Adobe, rien ne garantit que tous seront officiellement lancés. Je pense que Project Super Sonic devrait aboutir à une véritable production, car la même équipe est également impliquée dans la partie audio du modèle d'IA généré par Adobe Firefly, qui est capable de prolonger la durée des courtes vidéos, y compris leurs pistes audio. Mais pour l’instant, Project Super Sonic n’est encore qu’une démo.
Souligner:
? Project Super Sonic est un prototype expérimental qui utilise la technologie de l'IA pour aider les utilisateurs à générer rapidement des effets sonores vidéo.
Les utilisateurs peuvent générer des effets sonores grâce à la reconnaissance de texte, d'objets vidéo et à l'imitation de sons pour améliorer l'expérience créative.
? Parmi les projets Sneaks présentés à la conférence Adobe MAX, Project Super Sonic devrait entrer dans la suite créative du futur.
Dans l’ensemble, Project Super Sonic démontre l’énorme potentiel de l’IA dans le domaine audio. Bien qu’il soit encore au stade expérimental, sa méthode de génération d’effets sonores pratique et efficace apportera sans aucun doute des changements révolutionnaires aux créateurs vidéo, et cela vaut la peine d’attendre. à son développement futur.