Des IA hyper-capables nous battent à nos propres jeux depuis des années. Qu’il s’agisse de Go ou de Jeopardy, de DOTA 2 ou de Nethack, les intelligences artificielles se sont régulièrement révélées être des concurrents supérieurs, contribuant à faire progresser non seulement l’état des arts du jeu, mais également ceux de l’apprentissage automatique et de la science informatique. Mercredi, Sony a annoncé son dernier ajout au domaine, GT Sophy, un coureur IA capable d’affronter – et de battre – certains des meilleurs joueurs de Gran Turismo au monde.
GT Sophy (le GT signifie « Gran Turismo ») est le résultat d’une collaboration entre Sony AI, Polyphony Digital (PDI) et Sony Interactive Entertainment (SIE), ainsi que de plus d’une demi-décennie de recherche et développement.
« Gran Turismo Sophy est un développement significatif de l’IA dont le but n’est pas simplement d’être meilleur que les joueurs humains, mais d’offrir aux joueurs un adversaire stimulant qui peut accélérer et élever les techniques et la créativité des joueurs au niveau supérieur », a déclaré le PDG de Sony AI, Hiroaki Kitano, a déclaré mercredi dans un communiqué. « En plus d’apporter des contributions à la communauté des joueurs, nous pensons que cette percée présente de nouvelles opportunités dans des domaines tels que la course autonome, la conduite autonome, la robotique à grande vitesse et le contrôle. »
En utilisant une nouvelle méthode d’apprentissage par renforcement en profondeur, l’équipe de recherche a appris à son agent d’intelligence artificielle comment contrôler une voiture de course numérique dans la structure du GT jeu, aidant Sophy à comprendre la dynamique et les capacités du véhicule, ainsi que les tactiques de course comme le sillage, le dépassement et le blocage des dépasseurs et l’étiquette de base de la piste.
« Pour conduire de manière compétitive, GT Sophy a dû apprendre à contrôler la voiture à la limite physique, à optimiser les points de freinage et d’accélération, ainsi qu’à trouver les bonnes lignes qui pressent le dernier dixième de seconde hors de la piste », Michael Spranger, COO de Sony AI, a déclaré lors de la présentation. « Mais relever signifie aussi que vous n’êtes pas seul sur la piste, donc Sophie doit trouver des lignes pour dépasser les adversaires, en tenant compte de la réaction de l’adversaire, ainsi que des interactions aérodynamiques complexes entre les voitures. »
Sony a formé son IA en utilisant l’apprentissage par renforcement profond pour optimiser sa capacité à rester sur la bonne voie. « Sophy observe l’environnement, comme la vitesse et l’accélération de la voiture, la position relative, bien sûr les frontières et les adversaires, ainsi que la progression de la voiture le long de la piste », a expliqué Spranger. « Sur la base de ces entrées, GT Sophy apprend à prendre des mesures, telles que l’utilisation d’une manette des gaz ou le freinage. »
« Pour apprendre », a-t-il poursuivi, « Sophy reçoit un signal positif – une récompense – quand les choses vont bien, quand elle se concentre sur la piste et dépasse d’autres voitures. [Sophy receives] un signal négatif lorsque les choses ne vont pas bien grâce à une interaction continue avec le jeu.”
Les premiers résultats ont été impressionnants, Sophy battant 95% des humains qui lui étaient opposés au cours des deux premiers jours d’entraînement. De plus, l’IA a continué à gagner du temps sur ses divisions tout au long de la semaine suivante. Lors d’une course d’exhibition mercredi contre certains des meilleurs pilotes japonais de Gran Turismo – avec quatre variantes de Sophy contre un quatuor d’humains – l’IA a remporté le drapeau à damier et deux des quatre premières positions sur le circuit du Lago Maggiore. L’agent AI gagnant a commencé la course en pole position et y est resté pendant les trois tours, battant finalement le peloton de plus de cinq secondes. Cependant, les IA ne roulaient pas sur des rails, comme en témoigne le fait qu’un agent a mal évalué une tentative de dépassement, puis a sous-viré dans un virage et a rapidement couru tête baissée dans le mur et hors compétition.
« Ce n’est pas seulement un projet de percée technique », a déclaré le PDG du groupe Sony, Kenichiro Yoshida, lors de la conférence de presse de mercredi. « Il s’agit vraiment de mettre l’IA entre les mains des développeurs de jeux qui vont créer de nouvelles expériences pour les joueurs. »
Les joueurs pourront bientôt se mesurer à Sophy et l’avoir potentiellement sous la main en tant qu’entraîneur de conduite dans le jeu ou coéquipier en course. Gran Turismo 7 pour la PS4 et la PS5 sortira le 4 mars et les dirigeants de Sony s’attendent à ce que l’IA soit ajoutée dans une future mise à jour.
Tous les produits recommandés par Engadget sont sélectionnés par notre équipe éditoriale, indépendante de notre maison mère. Certaines de nos histoires incluent des liens d’affiliation. Si vous achetez quelque chose via l’un de ces liens, nous pouvons gagner une commission d’affiliation.