« J’ai pensé, ‘quelle est la chose la plus difficile que je puisse faire?' » Pour le streamer PerriKaryal, qui a fait la une des journaux le mois dernier pour ses tentatives de jouer à Elden Ring en utilisant le pouvoir de son esprit, il y a eu un saut significatif entre le monde de Minecraft où elle l’a envisagé pour la première fois et les arènes de boss de The Lands Between où cela a commencé à devenir une réalité. Lorsque nous avons parlé après que des clips de son flux Twitch soient devenus viraux, cependant, c’est la communauté autour des jeux de FromSoftware et son incroyable précédent de trouver de nouvelles façons de jouer qui l’ont conduite là-bas. Maintenant, elle est à l’avant-garde de ce précédent, mais repousse toujours les limites de ce que sa technologie peut faire.
Savoir profond
Perri a une formation en psychologie – une matière dans laquelle elle détient une maîtrise et qui lui a offert sa première opportunité d’expérimenter ce matériel. La version qu’elle utilise, cependant, est un modèle grand public de 1 000 £ acheté avec les bénéfices de ses flux.
La version mains libres de Perri Anneau d’Elden nécessite l’utilisation d’un électroencéphalogramme (EEG en abrégé). L’appareil, qui est placé sur la tête de l’utilisateur, utilise un certain nombre d’électrodes pour « capter différents changements d’activité électrique qui sortent de votre cerveau ». Ce processus peut être sommaire. « L’EEG n’est pas très bon pour placer d’où viennent les signaux, [but it’s] vraiment bon pour comprendre quand ils se produisent. » Traditionnellement, la technologie est utilisée pour diagnostiquer divers troubles cérébraux, comme l’épilepsie, et dans la recherche neuroscientifique. Plus directement, cependant, les signaux qu’elle capte sont suffisamment spécifiques pour pouvoir être associés à une action spécifique.
Dans le cas de Perri, cette action est une attaque, souvent l’un des sorts les plus percutants d’Elden Ring, mais même cette action unique est le résultat d’heures de tests et d’entraînement. Tout d’abord, l’EEG doit déterminer les longueurs d’onde de fréquence émises par une action spécifique, puis d’où elles viennent, puis à quel point elles sont « fortes » dans le cerveau. « Cela, de manière holistique sur l’ensemble du cerveau, est un modèle d’activité cérébrale. Et puis vous enregistrez à quoi vous ressemblez quand vous parlez, et il se souvient à quoi ressemble votre cerveau pour cela. »
Entrainement Cerebral
Après être devenue virale pour avoir joué à Elden Ring avec son cerveau. La streameuse Twitch @perrikaryal a été accusée par certains d’avoir truqué son expérience. Elle a donc encore plus expliqué comment son EEG fonctionne avec son activité cérébrale pour utiliser ses capacités dans le jeu pic.twitter.com/z94LyCDeAO7 février 2023
Le clip ci-dessus montre à quoi ressemble ce processus, mais l’étape suivante consiste à enregistrer le modèle requis pour une attaque. Pour Perri, « l’attaque, c’est s’imaginer pousser quelque chose de lourd vers l’avant ». Un peu de codage supplémentaire, et cette poussée imaginaire peut être liée à une clé d’attaque.
Si cela semble trop simple pour être vrai, c’est parce que ça l’est. Lorsque nous avons parlé, la seule contribution que Perri avait obtenue était l’attaque. D’autres activités, comme déplacer ou utiliser une Estus Flask, sont toujours liées à un contrôleur traditionnel, et, après avoir recommencé à zéro plusieurs fois, il a fallu « peut-être 11 heures d’entraînement d’affilée ». Même dans ce cas, Perri dit qu’elle n’est pas satisfaite des résultats – « ça marche mais c’est parfois peu fiable et je dois continuer à l’ajuster. » 30 minutes avant un stream, il y aura plus de formation, et cela se prolonge parfois dans les diffusions. Dans un monde idéal, Perri dit qu’elle repartirait de zéro, en supprimant tous ses essais précédents et en le faisant « plusieurs centaines de fois au cours d’une semaine », juste pour bien cerner ce mouvement mental unique.
Même avec tous ces efforts à l’avance, il n’y a aucune garantie d’obtenir des résultats. Une seule action quelque part au fond de l’esprit peut perturber la lecture et rendre le schéma de pensée inefficace : « Vous pouvez entraîner le logiciel autant que vous le souhaitez, mais vous n’êtes pas toujours assuré que vous allez faire la même chose. Parfois, je tape distraitement du pied, et ça gâche complètement le tout, parce que ça ajoute un petit « gribouillis » ailleurs.
Parfois, le système fonctionnera parfaitement lors des tests, seulement pour que les nerfs de jouer devant un public le perturbent dans un environnement en direct. Parfois, se concentrer sur une pensée spécifique devient impossible lorsqu’on est chargé par un énorme monstre imposant. La fatigue joue également un rôle, tout comme, selon Perri, la capacité de la batterie de l’EEG. Si l’une de ces choses contribue à un modèle différent d’activité cérébrale, l’EEG ne captera pas le désir d’attaquer et le raccourci clavier ne sera pas déclenché, quel que soit l’effort mental mis. cerveau est brisé », dit-elle.
La science
L’expérience de Perri avec les EEG remonte à ses études universitaires. Elle est titulaire d’une maîtrise en psychologie et a découvert la technologie au cours des petites étapes de la neuroscience qu’elle a abordées à l’école. « J’ai toujours pensé que c’était ces machines massives et très chères qu’il fallait avoir un diplôme de médecine pour pouvoir les utiliser », dit-elle, mais le casque qu’elle utilise dans ses streams est un modèle grand public qu’elle a acheté pour environ 1 000 £. « Je me suis dit, ‘hey, j’ai des économies. Ce n’est pas faisable’. » A partir de là, la curiosité a pris le dessus. « ‘Pourriez-vous lier ceci ? Ou pourriez-vous l’afficher sur un jeu d’horreur ? À quoi cela ressemblerait-il lors d’un jumpscare ?’ C’est ce que j’ai commencé à faire. Donc c’était juste quelque chose que je connaissais, que j’ai trouvé accidentellement, que je pensais être vraiment cool. Maintenant, je pense à toutes les possibilités et où vous pouvez aller. Perri elle-même n’est pas directement impliquée dans cet aspect de la technologie, mais note « le potentiel pour les personnes ayant certains handicaps et l’accessibilité ».
Au-delà des jeux vidéo, ces aspects de l’EEG sont déjà testés. « La première fois qu’ils ont fait quelque chose comme ça, avec le casque contrôlant un robot, c’était en 1988. Et c’est long pour la science. Et puis ils ont réussi à contrôler les fauteuils roulants. » Le casque de Perri semble futuriste, mais elle dit que le potentiel qu’offre la technologie est « peut-être […] plus proche que nous ne le pensons si elle obtient suffisamment de recherche et de financement. Si nous pouvons envisager de créer une commune sur Mars dans les 100 prochaines années, ce sera plus proche. »
Malheureusement, il reste encore à surmonter la barrière de la physique grossière de l’EEG. Si Perri est fatigué, les entrées sont plus maladroites. Les coussinets des capteurs peuvent se dessécher et devenir moins réceptifs, et les cheveux de Perri n’ont « pas survécu » aux vastes quantités de solution saline nécessaires pour les rafraîchir. Inversement, tout ce temps passé à se concentrer signifie que la transpiration commence également à entraver le processus. Tout cela « en vaut la peine pour le contenu », mais il y a ensuite les problèmes matériels. Certains d’entre eux sont avec le casque – la nature délicate des fils a fait que le premier modèle de Perri s’est cassé, et beaucoup d’entretien administratif est nécessaire pour empêcher les électrodes de « s’épuiser » – mais d’autres sont avec notre propre matériel : « Je pense honnêtement que le Les principales limites sont, jusqu’à un certain point, ce que nous savons réellement sur le cerveau. »
Blocage mental
Une fois que tous ces problèmes physiques ont été surmontés, le prochain obstacle était les terres entre elles-mêmes. L’expérience a commencé avec Minecraft, et Perri dit qu’elle prévoit de retourner un jour chez le constructeur de blocs, mais que le désir de relever un défi est ce qui l’a conduite à Elden Ring. Autant que n’importe quel jeu FromSoft peut l’être, son effort actuel est une course pacifiste, « s’il y a beaucoup de choses autour et que je dois esquiver et tisser et plonger, alors je pense qu’il est peu probable que je puisse déclencher la commande rapidement assez à cause de toutes les autres distractions en cours. » Si elle peut obtenir une course droite avec Torrent, il y a une opportunité pour une attaque à cheval, mais au moins pour l’instant, l’accent a été mis sur un tir direct vers l’objectif.
Cela a plutôt bien fonctionné, au moins pendant un certain temps. Les premiers clips montraient Perri utilisant des sorts massifs tout en se cachant loin derrière une invocation d’esprit, faisant exploser les boss à une distance de sécurité. « Quoi [the EEG] fonctionne très bien avec ses coups puissants lorsque vous avez le temps de régler la latence », dit-elle. « Cela fonctionne très bien à distance. Mais ce avec quoi il a lutté, ce sont les trucs de succession rapides et au bon moment. »
Malheureusement, pour certains patrons, ces coups rapides sont tout sauf une nécessité. Perri ajoute: « Oh, Rennala … Je n’ai jamais cherché sur Google et essayé de mémoriser des courses sans succès auparavant. » Pour une construction de mage, Rennala, reine de la pleine lune, est la tueuse de runes. Une énorme quantité de résistance magique signifie que les sorts rebondissent sur elle. « Vous devez la frapper, près d’elle, entourée de choses qui vous mordent le bras. Je pense que je peux le faire. Je pense que j’ai trouvé un moyen de persévérer, mais ce genre de chose est vraiment, vraiment difficile. » Depuis que nous avons parlé, Perri a dépassé Rennala, mais ses efforts sont loin du des gens qui dansent littéralement à travers The Lands Between.
Regarde Ma(rgit), pas de mains
Bien que Perri ne jouera probablement pas à Elden Ring exclusivement avec son esprit de si tôt, le jeu offre de nombreuses opportunités pour mapper de nouveaux schémas cérébraux à de nouvelles actions. Finalement, cependant, l’objectif est « de faire quelque chose qui est complètement mains libres ». Les contrôleurs gyroscopiques de l’EEG pourraient le rendre parfait pour des jeux comme Mario Kart ou Monkey Ball. Minecraft fait signe, tout comme les jeux FPS, et Perri veut revenir aux jeux d’horreur, affichant ses schémas cérébraux alors qu’elle fait face à la peur et au stress inhérents à ce genre.
Pour toutes ces idées, elle présente les flux EEG comme un caprice : « Je prenais un coup sur ma chaîne, pas mal – mon nombre moyen de téléspectateurs a diminué de moitié, mais je me suis dit ‘c’est vraiment cool, et c’est vraiment bon contenu, et je veux faire ça. Ce n’est peut-être pas si populaire, c’est peut-être un peu ennuyeux, mais j’ai pensé que ça valait la peine. Mais il y a clairement un public. C’est vraiment encourageant, et ça me donne envie de me pousser plus fort, voir ce qui est possible. »
Elle joue Elden Ring… avec son cerveau. La streameuse Twitch @perrikaryal a connecté un EEG à son cerveau, où différentes activités cérébrales sont liées à différentes capacités dans le jeu.23 janvier 2023
La réception – plusieurs clips des flux de Perri sont devenus viraux, et son compte sur Twitch a augmenté dans leur sillage – a également signifié qu’elle « veut vraiment s’impliquer pour essayer de le rendre utile au-delà du jeu ». Le simple fait d’expérimenter la technologie est « une excellente motivation pour la création de contenu », mais « il y a certainement plus à faire ici ».
En partie, c’est le résultat de l’ignorance relative autour du sujet. La santé mentale et le cerveau humain sont encore des sujets extrêmement énigmatiques, et Perri dit qu’elle a fait face à de nombreuses personnes qui disent que ses efforts avec l’EEG sont faux. « Mais c’est assez amusant à gérer. Même lorsque les gens doutent que ce soit réel, même cela est vraiment encourageant », dit-elle. « C’est une science si nouvelle, et si peu de gens dans le public ne sont pas informés de son travail. Ce n’est pas diffusé comme le sont les autres sciences. Il y a tellement de choses qui ne sont pas partagées, alors les gens disent ‘il n’y a aucun moyen que cela puisse peut-être être réel « , c’est simplement affirmer que nous devons sensibiliser. »
« Pour la santé mentale, la même chose se produit là-bas ; ‘il n’y a aucun moyen que quelqu’un puisse ressentir cela ou faire cette chose de manière rationnelle’, et en fait, bien sûr, ils le peuvent, car c’est ainsi que fonctionne le cerveau. Si on a l’impression Je peux faire une petite partie en apportant un peu d’attention et de conscience à cette chose, alors c’est vraiment cool, c’est un objectif de vie coché. »
Pour un jeu de gros cerveau très différent, ce créateur a fait un énorme Miyazaki en papier.