Adobe a dévoilé mercredi les outils de génération de vidéos Firefly AI qui arriveront en version bêta plus tard cette année. Comme pour beaucoup de choses liées à l’IA, les exemples sont à la fois fascinants et terrifiants, car l’entreprise intègre progressivement des outils conçus pour automatiser une grande partie du travail créatif pour lequel sa précieuse base d’utilisateurs est payée aujourd’hui. Faisant écho aux techniques de vente de l’IA que l’on trouve ailleurs dans le secteur technologique, Adobe présente tout cela comme une technologie supplémentaire qui « aide à éliminer la monotonie de la postproduction ».
Adobe décrit ses nouveaux outils de conversion de texte en vidéo, Generative Extend (qui sera disponible dans Premiere Pro) et d’image en vidéo basés sur Firefly comme aidant les monteurs dans des tâches telles que « la navigation dans les espaces vides dans les séquences, la suppression des objets indésirables d’une scène, le lissage des transitions entre les coupes et la recherche du b-roll parfait ». L’entreprise affirme que ces outils donneront aux monteurs vidéo « plus de temps pour explorer de nouvelles idées créatives, la partie de leur travail qu’ils aiment ». (Pour prendre Adobe au pied de la lettre, il faudrait croire que les employeurs n’augmenteront pas simplement leurs exigences de production envers les monteurs une fois que l’industrie aura pleinement adopté ces outils d’IA. Ou paieront moins. Ou emploieront moins de personnes. Mais je m’égare.)
Firefly Text-to-Video vous permet, vous l’aurez deviné, de créer des vidéos générées par l’IA à partir d’invites textuelles. Mais il comprend également des outils pour contrôler l’angle de la caméra, le mouvement et le zoom. Il peut prendre une photo avec des trous dans sa chronologie et combler les blancs. Il peut même utiliser une image de référence fixe et la transformer en une vidéo IA convaincante. Adobe affirme que ses modèles vidéo excellent dans les « vidéos du monde naturel », aidant à créer des plans d’ensemble ou des plans B à la volée sans gros budget.
Pour un exemple de la pertinence de cette technologie, consultez les exemples d’Adobe dans la vidéo promotionnelle :
Bien qu’il s’agisse d’échantillons sélectionnés par une entreprise qui essaie de vous vendre ses produits, leur qualité est indéniable. Des textes détaillés invitant à un plan d’ensemble d’un volcan en feu, d’un chien se reposant dans un champ de fleurs sauvages ou (ce qui prouve qu’elle peut aussi gérer le fantastique) de monstres de laine miniatures en train de danser produisent exactement cela. Si ces résultats sont représentatifs de la production typique de ces outils (ce qui n’est guère une garantie), alors la production télévisuelle, cinématographique et commerciale disposera bientôt de puissants raccourcis à sa disposition – pour le meilleur ou pour le pire.
L’exemple d’Adobe de conversion d’image en vidéo commence par une image de galaxie téléchargée. Une invite textuelle l’invite à la transformer en une vidéo qui effectue un zoom arrière sur le système stellaire pour révéler l’intérieur d’un œil humain. La démonstration de Generative Extend de l’entreprise montre deux personnes traversant un ruisseau forestier ; un segment généré par l’IA comble un vide dans la séquence. (C’était suffisamment convaincant pour que je ne puisse pas dire quelle partie du résultat était générée par l’IA.)
Reuters Selon Adobe, l’outil ne générera que des clips de cinq secondes, du moins dans un premier temps. Adobe affirme que son modèle vidéo Firefly est conçu pour être commercialement sûr et ne s’entraîne que sur le contenu que l’entreprise est autorisée à utiliser. « Nous les entraînons uniquement sur la base de données de contenu Adobe Stock qui contient 400 millions d’images, d’illustrations et de vidéos organisées pour ne pas contenir de propriété intellectuelle, de marques commerciales ou de caractères reconnaissables », a déclaré Alexandru Costin, vice-président de l’IA générative d’Adobe. Reuters. L’entreprise a également souligné qu’elle ne formait jamais ses utilisateurs sur le travail. Cependant, qu’elle mette ou non ses utilisateurs au chômage est une toute autre affaire.
Adobe annonce que ses nouveaux modèles vidéo seront disponibles en version bêta plus tard dans l’année. Vous pouvez vous inscrire sur une liste d’attente pour les essayer.