Adobe, leader dans le domaine des logiciels créatifs, a récemment présenté, lors de sa conférence Max, des aperçus de nouveaux outils d'intelligence artificielle qui pourraient changer le visage de l'édition vidéo et photo et de la correction audio. Loin des mises à jour habituelles ou des améliorations de base, ces outils, connus sous le nom de “sneaks”, sont encore en phase de test mais témoignent de l'approche innovante d'Adobe pour anticiper les besoins des utilisateurs.
La plus étonnante de ces nouveautés est sans doute le projet "Frame Forward". Cet outil permet aux éditeurs vidéo d'insérer ou de supprimer n'importe quel élément d'une séquence sans avoir recours à des masques, un processus traditionnellement fastidieux. Frame Forward peut identifier un objet ou une personne, isoler l'élément dès la première image et le supprimer entièrement, en reproduisant automatiquement le changement sur l'ensemble de la séquence. L'entité supprimée est remplacée par un arrière-plan naturel convaincant, à l'instar de l'outil de remplissage ou de suppression d'arrière-plan contextuel de Photoshop. À l'avenir, les éditeurs pourront avoir un impact aussi important sur leur contenu vidéo en quelques clics seulement.
Le projet Frame Forward permet également d'incorporer de nouveaux objets dans la vidéo. Les utilisateurs peuvent dessiner l'endroit où ils souhaitent placer un objet et décrire ce qu'ils souhaitent ajouter à l'aide d'une invite de l'IA. Cette manipulation s'étend à l'ensemble de la séquence vidéo, ce qui donne l'impression que l'objet était là depuis le début. Dans la démonstration d'Adobe, un objet inséré - une flaque artificielle - reflétait les mouvements d'un chat préexistant dans la vidéo, démontrant ainsi la capacité de l'outil à créer des ajouts en fonction du contexte.
Un autre outil, Project Light Touch, permet aux utilisateurs d'ajuster les sources de lumière dans les photos. Par exemple, l'outil peut modifier la direction de l'éclairage, simuler comme si des lampes étaient allumées dans l'image originale et permettre aux utilisateurs de contrôler la diffusion de la lumière et de l'ombre. Plus impressionnant encore, l'outil peut créer un éclairage dynamique que les utilisateurs peuvent déplacer sur le canevas d'édition, en courbant la lumière autour des objets et des personnes selon les besoins. Il peut même faire passer une scène entière du jour à la nuit et ajuster la couleur des sources lumineuses manipulées pour obtenir les effets souhaités, comme la chaleur ou des impressions vibrantes de type RVB.
Un autre nouvel outil d'édition, le projet Clean Take, est une ressource puissante qui permet de modifier la prononciation de la parole à l'aide d'invites IA. Les éditeurs peuvent modifier l'émission ou l'émotion d'une voix, par exemple en la rendant plus joyeuse ou plus curieuse, sans qu'il soit nécessaire de la réenregistrer. Les utilisateurs peuvent remplacer entièrement des mots tout en conservant les caractéristiques uniques de la voix de l'orateur d'origine. L'outil Clean Take peut même séparer les bruits de fond en sources individuelles, ce qui permet aux utilisateurs d'ajuster ou de couper des sons spécifiques. Cette capacité peut améliorer la clarté de la voix tout en préservant l'atmosphère audio globale.
Bien que ces projets novateurs soient incontestablement intrigants, ils ne sont pas encore disponibles pour un usage public et ne sont pas assurés de devenir des fonctionnalités officielles des logiciels Creative Cloud ou des applications Firefly d'Adobe. Néanmoins, de nombreuses fonctionnalités à succès, telles que les outils Distraction Removal et Harmonize de Photoshop, ont débuté en tant que projets de démonstration. Les utilisateurs d'Adobe peuvent donc s'attendre à ce qu'une version de ces outils expérimentaux soit disponible à l'avenir.
Pour des aperçus détaillés de toutes les capacités impressionnantes présentées lors de l'événement Max, voir l'article original sur The Verge.