La technologie de prévisualisation « Sneak » a encore besoin d’être peaufinée
Prospectif : Les services d’IA générative ouvrent actuellement la voie à la vulgarisation des algorithmes d’apprentissage automatique. Cependant, les solutions audio peuvent également offrir des fonctionnalités tout aussi intrigantes et avancées. Adobe développe activement une telle technologie, en utilisant l’IA pour isoler différents types de sons au sein d’un seul enregistrement.
Lors de son dernier événement créatif MAX, Adobe a dévoilé une nouvelle technologie « Sneak » qui devrait s’intégrer à la plate-forme créative de l’entreprise. La société américaine de logiciels a décrit le projet Sound Lift comme l’avenir de l’édition audio basée sur l’IA, un outil conçu pour simplifier l’isolation acoustique.
Dans une brève démonstration vidéo, Adobe a présenté ce que Project Sound Lift peut faire, en utilisant la technologie basée sur l’IA pour séparer la parole des autres bruits de fond tels que la foule et la musique. Sound Lift peut effectuer de courts téléchargements de vidéos, comme démontré, et isoler un type spécifique de son tout en filtrant presque tout le reste.
L’outil propose diverses options audio parmi lesquelles choisir, notamment les applaudissements, les rires, les alarmes, la parole, la circulation, la saisie au clavier, etc. L’IA identifie la couche audio sélectionnée, extrayant des fichiers audio séparés avec soit le bruit de fond, soit le son choisi pour l’extraction.
La démo vidéo montre que les résultats finaux de la manipulation audio du Project Sound Lift ne sont peut-être pas clairs, mais ils sont efficaces et obtenus très rapidement. Adobe a également démontré comment les « pistes » sonores isolées peuvent être importées dans Adobe Premiere Pro, permettant aux créateurs de vidéos et de contenu d’ajuster le volume, d’ajuster la hauteur ou d’effectuer d’autres tâches d’édition audio avancées.
Le projet Sound Lift semble utiliser une conception similaire de technologie d’IA qui a été utilisée pour restaurer la voix de John Lennon à partir d’une vieille cassette, créant ainsi une chanson supplémentaire des Beatles. Bien que les outils audio basés sur l’IA existaient avant l’implication d’Adobe, ils étaient principalement utiles pour peaufiner la voix, l’ambiance ou le bruit dans les enregistrements.
L’outil d’IA d’Adobe offre une approche plus nuancée de l’édition et de la manipulation audio, offrant aux créateurs de contenu et aux vidéastes une option avancée pour transformer leur vision en un clip TikTok viral. En tant que fonctionnalité d’aperçu, Project Sound Lift devra être peaufiné avant de devenir un véritable service commercial disponible pour les utilisateurs.
