ChatGPT a (à peine) réussi les examens de commerce et de droit

On craint beaucoup que le ChatGPT d’OpenAI puisse aider les étudiants à tricher aux tests, mais à quel point le chatbot se comporterait-il si vous lui demandiez de passer un examen de niveau supérieur ? Cela passerait – si seulement juste. Dans une étude récemment publiée, des professeurs de droit de l’Université du Minnesota ont demandé à ChatGPT de produire des réponses pour les examens d’études supérieures dans quatre cours de leur école. L’IA a réussi les quatre, mais avec une note moyenne de C+. Dans un autre article récent, Christian Terwiesch, professeur à la Wharton School of Business, a découvert que ChatGPT avait réussi un examen de gestion d’entreprise avec une note de B à B. Vous ne voudriez pas utiliser la technologie pour impressionner les universitaires, alors.

Les équipes de recherche ont trouvé que l’IA était incohérente, c’est un euphémisme. Le groupe de l’Université du Minnesota a noté que ChatGPT était bon pour aborder les « règles juridiques de base » et résumer les doctrines, mais pataugeait lorsqu’il tentait d’identifier les problèmes pertinents à une affaire. Terwiesch a déclaré que le générateur était « incroyable » avec des questions simples sur la gestion des opérations et l’analyse des processus, mais qu’il ne pouvait pas gérer les questions avancées sur les processus. Il a même fait des erreurs avec les mathématiques de niveau 6e.

Il y a place à l’amélioration. Les professeurs du Minnesota ont déclaré qu’ils n’avaient pas adapté les invites de génération de texte à des cours ou à des questions spécifiques, et pensaient que les étudiants pourraient obtenir de meilleurs résultats avec la personnalisation. Chez Wharton, Terwiesch a déclaré que le bot était apte à changer les réponses en réponse au coaching humain. ChatGPT pourrait ne pas réussir un examen ou un essai en soi, mais un tricheur pourrait demander au système de générer des réponses approximatives et de les affiner.

Les deux camps ont averti que les écoles devraient limiter l’utilisation de la technologie pour empêcher la triche basée sur ChatGPT. Ils ont également recommandé de modifier les questions pour décourager l’utilisation de l’IA (comme se concentrer sur l’analyse plutôt que sur la récitation des règles) ou pour augmenter le défi pour les personnes qui s’appuient sur l’IA. Les étudiants doivent encore acquérir des « compétences fondamentales » plutôt que de s’appuyer sur un bot pour obtenir de l’aide, a déclaré l’Université du Minnesota.

Les groupes d’étude croyaient toujours que ChatGPT pourrait avoir sa place dans la salle de classe. Les professeurs pourraient enseigner aux élèves comment s’appuyer sur l’IA sur le lieu de travail, ou même l’utiliser pour rédiger et noter des examens. La technologie pourrait finalement faire gagner du temps aux étudiants, explique Terwiesch, comme davantage de réunions d’étudiants et de nouveaux supports de cours.

Tous les produits recommandés par Engadget sont sélectionnés par notre équipe éditoriale, indépendante de notre maison mère. Certaines de nos histoires incluent des liens d’affiliation. Si vous achetez quelque chose via l’un de ces liens, nous pouvons gagner une commission d’affiliation. Tous les prix sont corrects au moment de la publication.

Source-145