Malgré mon travail, je ne suis pas très doué pour Wordle. Mais, comme le bonnes gens dans le Maine, Je ne suis pas non plus au-dessus de la triche.
Plutôt que de simplement rechercher la réponse sur Google, j’ai demandé à une IA incroyablement intelligente formée sur plus de 500 milliards de mots, le nouveau Bing avec ChatGPT, pour m’aider. Facile, non ? Il s’avère, pas tellement.
Attention spoilers pour mot d’aujourd’hui.
Après que trois suppositions de ma part m’aient laissé avec seulement deux lettres ‘E’ correctement placées mais rien d’autre dans un modèle de _E_E_, j’étais perplexe. Le nouveau Bing est capable de tant de choses, y compris la capacité de produire du code pour les jeux en quelques secondes. Mais dans ce cas, il semblait avoir du mal à compter jusqu’à cinq. En lui demandant de m’aider avec cette configuration Wordle, il ne suggérait initialement que des mots de quatre lettres, « simple » puis « gène ».
Après lui avoir rappelé que nous recherchions un mot de cinq lettres, l’IA a suggéré un lot de solutions possibles qui étaient, encore une fois, incompatibles.
Aucune des suggestions n’avait un « E » comme deuxième lettre.
Comment Bard a-t-il fait ?
Bref, tout aussi mauvais. Si ce n’est sans doute pire.
j’ai testé Bing avec ChatGPT contre Bard beaucoup et je n’ai pas encore vu les deux gérer une tâche aussi mal. Demander à résoudre le Wordle au format hashtag (par exemple #E#E#) Bard a déclaré « Le Wordle #384 est » Eager « ce qui n’est pas vrai (celui-là était Showy) ou compatible avec la réponse que nous recherchons.
J’ai imploré Bard d’essayer à nouveau et il a de nouveau prétendu répondre à Wordle # 384 cette fois convaincu que la réponse était « Voice ». Encore une fois, cela ne correspond pas aux lettres que nous connaissons déjà.
Après une conversation douloureuse qui tournait en rond, au cours de laquelle Bard m’a accusé d’essayer de le tromper, j’ai essayé de présenter le puzzle en utilisant des traits de soulignement _E_E_. Sa première réponse était « EEE » mais à moins que ce ne soit Dolphin qui parle pour Beset (la bonne réponse), alors Bard se trompait à nouveau.
Bard a fait plusieurs autres suppositions incompatibles avant de conclure « Vous avez raison. Il n’y a pas de mot de cinq lettres où la deuxième lettre est E et la quatrième lettre est E. D’une manière ou d’une autre, j’ai réussi à gaslighter Google.
Pourquoi l’IA est-elle si mauvaise à Wordle ?
Considérant qu’ils sont basés sur des modèles de grande langue créés de manière coûteuse comme GPT4 et LaMDA, on pourrait penser que ces chatbots IA pourraient gérer Wordle sans problème. Mais clairement, ce n’est pas le cas. Ce qui peut également expliquer pourquoi ceux qui créent des jeux avec ChatGPT comme Supplémentaire ont collé à travailler avec des chiffres.
En un morceau pour La conversation Professeur d’informatique à l’Université de Galway Michael G. Madden explique qu’en raison des réseaux de neurones sur lesquels ils travaillent, « toutes les entrées de texte doivent être codées sous forme de nombres et le processus qui le fait ne capture pas la structure des lettres dans les mots ».
Il écrit : « Au cœur de ChatGPT se trouve un réseau de neurones profond : une fonction mathématique complexe – ou règle – qui mappe les entrées aux sorties. Les entrées et les sorties doivent être des nombres. Puisque ChatGPT4 fonctionne avec des mots, ceux-ci doivent être « traduits » en nombres pour que le réseau de neurones travaille avec eux.
« La traduction est effectuée par un programme informatique appelé tokenizer, qui maintient une énorme liste de mots et de séquences de lettres, appelées « jetons ». Ces jetons sont identifiés par des numéros. Un mot tel que « ami » a un identifiant de jeton de 6756, Ainsi, un mot tel que « amitié » est décomposé en jetons « ami » et « navire ». Ceux-ci sont représentés par les identifiants 6756 et 6729.
« Lorsque l’utilisateur saisit une question, les mots sont traduits en chiffres avant même que ChatGPT4 ne commence à traiter la demande. Le réseau neuronal profond n’a pas accès aux mots sous forme de texte, il ne peut donc pas vraiment raisonner sur les lettres. »
Comment corriger cette imprécision ? Les futurs LLM peuvent surmonter cela de deux manières. Tout d’abord, ChatGPT-4 connaît la première lettre de chaque mot, de sorte que ses données de formation pourraient être augmentées pour inclure des mappages de chaque position de lettre dans chaque mot de son dictionnaire.
La seconde est une solution plus excitante et générale. Les futurs LLM pourraient générer du code pour résoudre des problèmes comme celui-ci… Un article récent a démontré une idée appelée Toolformeroù un LLM utilise des outils externes pour effectuer des tâches où il a normalement du mal, comme des calculs arithmétiques. »
Pour l’instant, amis tricheurs de Wordle, restons-en aux moteurs de recherche et aux médias sociaux.
Plus de Tom’s Guide
- ChatGPT est plus utile à la société que la crypto-monnaie, selon Nvidia
- Qu’est-ce que Google Barde ? Tout ce que vous devez savoir sur le rival de ChatGPT
- Comment utiliser le nouveau Bing avec ChatGPT – et ce que vous pouvez en faire