Dans le cadre du premier accord de ce type à être rendu public, Lionsgate a conclu un partenariat avec la société d’IA Runway pour développer un modèle vidéo exclusif, formé à partir de la bibliothèque de contenus cinématographiques et télévisuels du studio de cinéma, rapporté pour la première fois par le Hollywood Reporter.
Cette formation consiste à affiner les modèles de génération de vidéos en utilisant le contenu cinématographique et télévisuel du studio comme données de formation. VIP+ avait déjà évoqué l’intérêt des sociétés de médias pour cette technologie et les implications en aval de l’affinement des modèles vidéo sur le contenu des studios en juillet, peu après le lancement par Runway de la version alpha de sa dernière mise à jour du modèle vidéo, Gen-3.
Analyse VIP+ : les modèles vidéo d’IA optimisés suscitent un intérêt précoce de la part des studios de cinéma et de télévision
L’année dernière, les accords de licence entre les éditeurs et les sociétés d’IA pour les données de formation, indexées par VIP+, ont été un véritable chaos. Cependant, il est important de noter que l’accord Lionsgate-Runway n’est pas un accord de licence de données. L’accord ne signifie pas non plus que les données de Lionsgate sont utilisées pour former l’un des modèles vidéo généraux de Runway, tels que Gen-3, qui prennent en charge ses outils rendus accessibles aux autres utilisateurs de Runway.
Analyse VIP+ : pourquoi les studios n’ont toujours pas autorisé les films et les émissions de télévision à former l’IA
Bien que les termes exacts n’aient pas pu être communiqués, l’accord Lionsgate-Runway est structuré comme un partenariat. Lionsgate donne à Runway accès à certaines de ses archives cinématographiques et télévisuelles afin de créer un modèle personnalisé géré conjointement que seuls Lionsgate et ses cinéastes, réalisateurs ou autres créatifs pourront utiliser en exclusivité. Les équipes de production de Lionsgate pourront également travailler avec Runway pour les aider à utiliser la technologie de manière optimale.
« Nous travaillons en partenariat avec Lionsgate pour créer des modèles et des outils personnalisés qu’ils pourront ensuite utiliser dans le cycle de vie de pré- ou post-production d’un film ou d’une émission », a déclaré Cristóbal Valenzuela, PDG et co-fondateur de Runway, à VIP+.
À terme, Runway et Lionsgate pourraient également développer ensemble des modèles de vidéos personnalisées plus petites et hyperspécialisées, qui seraient concédés sous licence en tant qu’outils adaptés aux besoins des équipes créatives externes, qui pourraient ensuite les former et les utiliser avec leur propre propriété intellectuelle sur leurs propres productions. Bien que cela ne soit encore qu’hypothétique, ces outils pourraient être capables de créer des matériaux de pré-production et de post-production spécifiques, y compris certains effets spéciaux.
« Nous avons différents algorithmes pour différents types de choses », a déclaré Valenzuela. « La façon dont nous formons les modèles est basée sur des cas d’utilisation en comprenant d’abord à quoi les réalisateurs et les créatifs pourraient vouloir les utiliser. Par exemple, si vous avez besoin d’explosions et de simulations d’incendies ou de liquides, cela nécessite un ensemble de paramètres, d’ensembles de données, de réglages et de méthodes de formation différents. »
Les ajustements visant à obtenir des modèles vidéo exclusifs formés sur des contenus IP détenus par l’entreprise sont probablement en cours dans l’ensemble du secteur, alors que chaque studio s’efforce d’améliorer l’efficacité de sa production grâce à l’IA de génération. Six grands studios hollywoodiens poursuivent l’ajustement de leurs modèles vidéo, a déclaré une source à VIP+. Au moins deux studios négocient actuellement avec OpenAI pour obtenir une licence puis former Sora sur le corpus de leur propriété intellectuelle pour une utilisation interne, comme VIP+ l’a déjà écrit selon une autre source.
Des allusions à de tels accords sont également apparues dans divers articles de presse ces derniers mois, notamment selon le Wall Street Journal en mai, selon lequel Disney discuterait d’un accord avec Microsoft pour créer un outil d’IA générative privé formé à partir de la bibliothèque de contenu du studio et d’autres données.
Cependant, les capacités exactes et l’utilisation en production de ces modèles affinés restent largement inconnues. La découverte de cas d’utilisation sera un processus continu de tests et d’apprentissage pour les cinéastes au sein des studios. Comme décrit de diverses manières, les cas d’utilisation immédiats concerneraient la prévisualisation, la création de storyboards ou d’animatiques et la postproduction, comme la création d’arrière-plans ou d’environnements où les acteurs sont ensuite composés ou pour des effets spéciaux complexes, comme des explosions qui sont coûteuses et longues à créer physiquement ou avec des effets visuels traditionnels.
Reproduire l’image d’un acteur avec un modèle n’est pas à l’ordre du jour, a déclaré une source au courant du dossier. Comme l’accord SAG-AFTRA de 2023 ne dit rien sur la formation de l’IA, un consentement éclairé serait toujours requis si un studio avait l’intention d’utiliser un modèle pour les visuels d’un acteur spécifique dans une nouvelle production. Le projet de loi AB-2602 récemment signé par l’Assemblée californienne ajoute davantage de mordant pour protéger les acteurs contre les pratiques déloyales, rendant tout contrat de talent inapplicable lorsqu’une réplique numérique est utilisée dans une œuvre que l’acteur aurait pu exécuter en personne ; si son utilisation n’est pas clairement décrite dans le contrat ; et si l’interprète n’était pas représenté par un avocat ou un syndicat lors de la conclusion de l’accord.
Il serait plus probable qu’un modèle peaufiné soit chargé de créer des visuels non liés à l’acteur, tels que des arrière-plans virtuels ou des prises de vue CGI coûteuses qui incomberaient normalement aux effets visuels, comme VIP+ l’a déjà soutenu dans notre article de juillet sur les implications du peaufinage.
Le véritable objectif du modèle est de donner aux cinéastes un « outil d’efficacité » qui leur permet, tout simplement, de réaliser des films avec des contraintes budgétaires.
Il est important de noter que les studios considèrent probablement le réglage fin d’un modèle d’IA exclusivement pour un usage interne comme une alternative préférable à l’octroi de licences sur leur propriété intellectuelle pour la formation générale des modèles, comme l’a également écrit VIP+.
Contrairement à l’octroi de licences, les studios considèrent que le réglage fin est plus sûr en termes de données et constitue un avantage concurrentiel, car il leur permet de conserver leur propriété intellectuelle et tout avantage en termes d’efficacité de production sans apporter d’améliorations aux capacités générales du modèle vidéo d’une société d’IA, l’utilisation du modèle étant contenue et contrôlée par le studio. Ainsi, tous les avantages restent en interne plutôt que dans le produit commercial largement distribué d’un développeur.
Bien que les ajustements ne soient pas totalement exempts de problèmes juridiques potentiels, ils sont considérablement moins controversés qu’un accord de licence de données pour la formation de l’IA pourrait le devenir pour un studio, ce que les talents ou d’autres tiers pourraient interpréter comme une violation d’anciens contrats, ont déclaré des sources à VIP+ en août.
De plus, l’utilisation par un studio d’un modèle affiné n’est pas à l’abri de considérations de droits d’auteur. La protection des droits d’auteur des résultats de l’IA et le statut de contrefaçon de l’utilisation de modèles formés sur des œuvres protégées par le droit d’auteur restent des questions ouvertes. Valenzuela n’a pas pu dire quel modèle spécifique Lionsgate ou d’autres partenaires potentiels utilisaient comme modèle sous-jacent pour ensuite le personnaliser avec leurs propres données.
Variety VIP+ explore la génération IA sous tous les angles — Choisissez une histoire