Adobe expérimente le remplissage généré par l’IA pour les vidéos

Adobe présente une nouvelle fonctionnalité de remplissage génératif, Project Fast Fill, qui peut facilement ajouter ou supprimer des objets dans des vidéos grâce à la puissance de l’IA. C’est l’une des nombreuses nouvelles fonctionnalités d’IA expérimentales et sauvages annoncé aujourd’hui à la conférence MAX de l’entreprise. Project Fast Fill a la capacité d’échanger des accessoires vestimentaires contre des personnes en mouvement ou de supprimer les touristes de l’arrière-plan d’un paysage.

Fast Fill fonctionne de manière similaire à Magic Editor de Google, où vous pouvez déplacer des personnes ou des objets, mais avec de la vidéo au lieu de simplement des photos. Fast Fill promet de faire des choses que le projet Stardust de la société fait pour les photos fixes, comme changer les couleurs en entrant simplement une invite de texte. Adobe affirme que ces fonctionnalités d’IA générative sont rendues possibles par les modèles Firefly AI mis à jour de la société.

Comme la plupart des nouvelles fonctionnalités présentées lors de la conférence d’Adobe, Project Fast Fill est une expérience sur laquelle travaillent actuellement les ingénieurs de l’entreprise. Mais comme les fonctionnalités de remplissage génératif de Photoshop révélées les années précédentes, elles finissent souvent par parvenir aux clients Creative Cloud. Adobe envisage d’utiliser la nouvelle fonctionnalité dans Premiere Pro et After Effects, mais n’a pas fourni de calendrier.

Adobe travaille également sur sa technologie d’édition IA pour la conception vidéo, audio et 3D par d’autres moyens. Le Project Dub Dub Dub de la société peut traduire les voix dans différentes langues. Le changement de scène peut déplacer les sujets vers un nouvel emplacement dans un autre clip. Res Up utilise la diffusion pour suréchantillonner la vidéo basse résolution. Et Project Poseable peut poser des objets 3D à partir de photos de personnes réelles et générer des rendus 3D à l’aide de la saisie de texte.

Alors que de plus en plus d’outils génératifs d’IA pour les photos deviennent plus accessibles aux utilisateurs, comme Magic Editor de Google Pixel 8, nous en étions déjà au stade de nous demander : Qu’est-ce qu’une photo ? Désormais, l’IA de manipulation vidéo Fast Fill d’Adobe pourrait bientôt offrir la même capacité à davantage de personnes, et nous devrons nous demander : Qu’est-ce qu’une vidéo ?

source site-132