Vous souhaitez intégrer divers clips vidéo générés par Stability AI dans un film ? Il existe désormais un outil pour cela.
Morph Studio, qui possède son propre modèle de conversion texte-vidéo, vient de lancer une plateforme de réalisation de films IA. L’outil éponyme prend la forme d’un storyboard, dans lequel les utilisateurs peuvent créer et éditer des plans en saisissant des invites de texte pour différentes scènes et les combiner dans un récit cohérent.
Le partenariat de Morph avec Stability AI est à la base du processus de création, même si à terme, Morph prévoit d’introduire une gamme de modèles vidéo génératifs parmi lesquels les utilisateurs pourront choisir. Morph appelle le processus de génération, d’édition et de transversalité un « flux de travail ». Les utilisateurs peuvent partager leur flux de production unique dans la communauté des créateurs de Morph, où d’autres peuvent reproduire et modifier les modèles en modifiant simplement les invites de l’IA.
« Le tournage, le montage et la post-production étaient autrefois des étapes distinctes dans la réalisation cinématographique traditionnelle, mais l’IA brouille les frontières de ces étapes et les transforme en un seul processus continu. Si vous n’êtes pas satisfait d’une photo, vous pouvez la régénérer sur notre toile. L’IA a introduit un nouveau flux de travail dans la production cinématographique », a déclaré Xu Huaizhe, co-fondateur de Morph, dans une interview avec TechCrunch.
Xu fait partie d’une équipe de doctorants en vision par ordinateur de l’Université des sciences et technologies de Hong Kong qui a fondé Morph Studio en 2023. Il considère CapCut, l’application de montage vidéo populaire de ByteDance qui est également alimentée par l’IA, comme un concurrent potentiel de Morph et il souhaite pour s’assurer que sa startup n’est pas « facilement remplaçable par une autre application ByteDance ».
Selon Xu, le fossé de Morph dépendra de sa capacité à créer une communauté d’utilisateurs dynamique. « La communauté est difficile à remplacer », a suggéré le fondateur. En termes de fossés technologiques, Xu a déclaré que Morph avait fait de gros efforts pour affiner le modèle afin de « mieux répondre aux besoins des créateurs ».
Aujourd’hui, Morph emploie environ 10 personnes et a jusqu’à présent levé 2,5 millions de dollars auprès de Baidu Ventures.
Génération de mèmes
L’engagement de Xu à créer une communauté autour des vidéos était évident dans le projet de produit inaugural de Morph : un lieu de partage de mèmes générés par l’IA. La startup s’est donné pour mission de travailler sur des vidéos haute définition, mais pour explorer des cas d’utilisation, elle a d’abord affiné un modèle permettant de créer des GIF à partir d’invites de texte.
« De nos jours, les jeunes communiquent et consomment des informations à travers des mèmes », a déclaré Xu. « Il existe de nombreuses communautés basées sur l’image, comme Reddit et 9Gag, mais jusqu’à présent, il n’y avait pas de communauté en ligne basée sur la vidéo. »
Cette observation a incité Xu à créer un groupe Telegram où les gens n’étaient autorisés à « parler » que via des GIF. Le groupe est passé à 300 membres en quelques jours, les utilisateurs publiant des GIF mettant en vedette Elon Musk enfilant une combinaison spatiale ou Donald Trump dansant en disco, tous générés avec le modèle d’IA de Morph. Une chaîne Discord similaire lancée plus tard. Ces jours-ci, Morph concentre ses ressources sur l’amélioration de la plateforme de production cinématographique.
« Nous avons constaté que les gens ne se soucient pas vraiment de savoir si les GIF semblent un peu faux. Ils aiment pouvoir dire que c’est généré par l’IA », a déclaré Xu. « Les gens utilisent les mèmes pour transmettre des significations plus importantes qu’ils ne peuvent le faire à travers des mots. »