Imaginez basculer en toute transparence entre un match intense de Call of Duty et refléter un moment crucial de la bataille royale de Warzone sur votre téléphone. Un nouveau brevet d’Activision présente une technologie permettant de synchroniser les jeux et le visionnage vidéo, transformant potentiellement la façon dont nous consommons le divertissement.
Le dépôt de brevet d’Activision est antérieur à l’acquisition de Microsoft, mais pourrait désormais bénéficier spécifiquement à Xbox en tant que fonctionnalité exclusive. Microsoft a investi massivement dans la technologie des jeux en nuage, et ce type d’interactivité en temps réel s’aligne sur cette vision.
Le brevet décrit des techniques de surveillance des flux en direct pour identifier les événements clés au fur et à mesure qu’ils se produisent. Des outils tels que des modèles d’apprentissage automatique, entraînés à reconnaître les signaux visuels et audio, permettraient de détecter les moments cruciaux. Ceux-ci peuvent aller des grands jeux dans l’esport aux mouvements emblématiques dans les émissions en streaming.
Lorsqu’un événement est détecté, le système peut générer et proposer instantanément des mini-jeux contextuels ou des améliorations de gameplay qui complètent l’action à l’écran. Par exemple, vous pourriez jouer à Call of Duty sur Xbox et visionner en deuxième lieu un flux Warzone tendu sur Twitch sur votre mobile.
La technologie surveillerait le flux et détecterait le moment où un intense échange de tirs en cercle final éclate. Il pourrait alors vous inviter instantanément à jouer à un mini-jeu rapide sur votre Xbox, synchronisé pour refléter simultanément le combat Twitch en temps réel. Accepter l’invite superpose le mini-jeu sur votre écran, vous permettant de vivre la fusillade en tandem avec les streamers sur le téléviseur.
Dans un autre scénario, votre héros préféré décrochant une énorme capacité ultime dans un match de l’Overwatch League pourrait débloquer temporairement cette même ultime pour vous dans Overwatch 2. Ou une grande victoire en tournoi dans Hearthstone Battlegrounds pourrait vous accorder des cartes bonus. De même, Forza Horizon pourrait synchroniser les conditions météorologiques et présenter les événements avec le lieu réel où vous courez.
Le brevet suggère également des récompenses ou des buffs en jeu liés à des événements réels, mais distribués en temps réel. Votre pro Call of Duty préféré réussissant un quad kill pourrait donner à votre équipement une amélioration temporaire de la précision. Ou encore, un héros d’Overwatch atteignant un objectif pourrait déclencher des bonus associés. Un jeu décisif de votre professionnel préféré dans un tournoi Fortnite peut vous donner de l’XP bonus et des récompenses cosmétiques dans le jeu Fortnite normal.
En acquérant Activision Blizzard IP, y compris ce brevet, Microsoft est en mesure d’intégrer potentiellement cette technologie dans les abonnements Xbox Game Pass. Il s’inscrit dans la vision plus large de Microsoft en matière d’expériences interactives de jeu et de streaming Xbox. Microsoft pourrait développer des implémentations exclusives à Xbox en tirant parti des franchises Activision comme Call of Duty et Overwatch.
L’un des défis techniques majeurs de cette technologie consiste à reconnaître rapidement le contexte vidéo et à y répondre de manière dynamique avec des éléments de jeu personnalisés, mais même une réussite partielle en synchronisant de grands moments à l’écran avec un gameplay optionnel pourrait permettre des expériences de visionnage plus engageantes.
L’apprentissage automatique et l’IA surveilleraient les flux audio et vidéo des diffusions pour identifier les événements clés au fur et à mesure qu’ils se produisent en temps réel, les algorithmes étant entraînés sur de nombreuses heures de séquences de jeu pour reconnaître les signaux visuels et audio associés à des moments passionnants comme des éliminations rapides. ou des évasions étroites.
Si Activision et son nouveau propriétaire, Microsoft, parviennent à surmonter certains obstacles complexes, qui, nous devons l’admettre, semblent assez importants à l’heure actuelle, cette vision de convergence du visionnage et du jeu pourrait avoir un impact significatif sur le divertissement. Il convient également de noter qu’avec les progrès rapides actuels de l’apprentissage automatique, une analyse robuste en temps réel pourrait bientôt être réalisable. Microsoft détient également une participation de 49 % dans OpenAI, la société à l’origine de Chat-GPT et d’un certain nombre d’autres produits d’IA de pointe.
N’oubliez pas non plus que la technologie peut également être concédée sous licence à d’autres sociétés. Pour prendre un exemple de jeu de sport, qui semble correspondre le mieux au thème sous-jacent du brevet, l’engagement sur le deuxième écran, vous pourriez jouer à un match FIFA standard sur votre console, tout en gardant un œil sur le match de football local sur un autre appareil. La technologie pourrait détecter le début d’une séance de tirs au but tendue. Il vous inviterait alors instantanément à jouer à un mini-jeu de penalty de la FIFA sur votre console, parfaitement synchronisé pour refléter les penaltys qui se déroulent simultanément dans la vie réelle. Accepter l’invite superposerait un mini-jeu, vous permettant de subir les pénalités en tandem avec de vrais joueurs, pour une plus grande immersion.
En fin de compte, cette vision combine les histoires de la télévision et du cinéma avec la participation active du jeu vidéo. Il semble qu’Activision soit parfaitement conscient du fait que nous regardons de plus en plus de flux tout en jouant simultanément, et nous sommes certains que Microsoft l’est aussi, et cette technologie vise à compléter ce style de vie, en nous gardant immergés sur les deux écrans.