Le remplissage génératif semble impressionnant mais peut encore avoir du mal avec des tâches simples
Résumer: Adobe a introduit des outils d'IA dans sa suite d'édition d'images il y a un an et vise désormais à les améliorer avec de meilleures performances et de nouvelles fonctionnalités. Cependant, les mises à niveau ne sont pas à l’abri de certains pièges associés à l’IA, donnant parfois des résultats humoristiques.
Le nouveau modèle de base basé sur l'IA d'Adobe, Firefly Image 3, est désormais en version bêta. Disponible dans Photoshop et l'application Web Firefly, la mise à jour améliore les performances des outils d'IA générative de l'entreprise et introduit de nouvelles méthodes de création et d'édition d'images.
Introduit l'année dernière, Firefly utilise l'IA pour ajouter ou supprimer des objets des images, modifier des surfaces, étendre les images à des proportions plus larges et apporter d'autres modifications. Les principaux points focaux de Firefly Image 3 sont le style et la cohérence. Les utilisateurs peuvent désormais générer des images dans une plus grande variété de styles ou demander au logiciel de produire de nouvelles images dans un style similaire à celui d'une référence.
L'éclairage des images réalistes devrait désormais être plus précis. De plus, la nouvelle version de Firefly peut comprendre des invites plus longues et plus complexes avec plus de précision que son prédécesseur.
L'outil de remplissage génératif de Photoshop, que de nombreux utilisateurs ont utilisé de manière amusante l'année dernière pour agrandir les couvertures d'albums emblématiques, bénéficie de plusieurs nouvelles fonctions de Firefly Image 3. Le logiciel d'édition d'images le plus populaire d'Adobe propose désormais pour la première fois la génération de texte en image, et les utilisateurs peuvent générer également des arrière-plans pour les images existantes.
De plus, ils peuvent améliorer les détails pour une image plus nette et répéter les créations en demandant des sorties similaires. La vidéo de démonstration d'Adobe (ci-dessus) donne une apparence transparente aux nouveaux outils de Photoshop, mais un utilisateur a récemment découvert qu'ils peuvent toujours conduire à des résultats inattendus.
vous avez raison, l'IA prend le contrôle du monde et je suis terrifié ð pic.twitter.com/g4ih8GpZlA
– Nina Nikolic – Kerri (@kidkerrigan) 23 avril 2024
La développeur et animatrice Nina Nikolic a tenté d'utiliser le remplissage génératif pour élargir le rapport hauteur/largeur d'une photo d'elle-même sur laquelle son épaule était coupée. Cependant, lorsqu’elle a demandé au modèle d’IA d’améliorer la façon dont il remplissait l’épaule, celui-ci a généré une personne supplémentaire entière – un homme nu – à côté de sa photo. Une autre tentative a abouti à un visage géant horriblement déformé.
Aussi : améliorations vidéo basse résolution
Dans le même ordre d’idées, les chercheurs d’Adobe ont récemment dévoilé leurs travaux sur un outil de super-résolution vidéo basé sur l’IA. La technologie, appelée VideoGigaGAN, partage le même objectif que la RTX Video Super Résolution de Nvidia : rendre les images basse résolution plus nettes sur les écrans haute résolution. Cependant, Adobe affirme que sa solution ajoute des détails plus clairs pour un résultat moins flou.
Plusieurs comparaisons sont disponibles sur GitHub.
