Pour tester les connaissances de ChatGPT sur la cirrhose et le cancer du foie, l’équipe a présenté au chatbot 164 questions fréquemment posées réparties en cinq catégories : connaissances de base, diagnostic, traitement, mode de vie ou médecine préventive. Deux spécialistes de la transplantation hépatique ont évalué les résultats.
Selon les enquêteurs, ChatGPT a répondu correctement à environ 77 % des questions, avec des niveaux de précision élevés dans plus de 90 % des questions de différentes catégories. Cependant, les spécialistes du foie qui ont noté les réponses ont constaté que 75 % des réponses relatives aux connaissances de base, au traitement et aux catégories de mode de vie étaient correctes mais insuffisantes. La proportion de réponses « mélangées avec des données correctes et incorrectes » était la suivante : connaissances de base (22 %), diagnostic (33 %), traitement (25 %), mode de vie (18 %) et médecine préventive ( 50 pourcent).
ChatGPT aussi un outil pour les médecins
Bien que le logiciel ait été en mesure d’offrir des conseils utiles aux patients et aux soignants confrontés à la cirrhose et au cancer du foie, l’étude a clairement montré que les informations de qualité supérieure proviennent d’un médecin.
« Des recherches supplémentaires sont encore nécessaires pour mieux examiner l’outil dans l’éducation des patients, mais nous pensons que ChatGPT est un outil complémentaire très utile pour les médecins – pas un remplacement – mais un outil complémentaire qui donne accès à des informations de santé fiables et précises qui sont faciles pour beaucoup. à comprendre », a déclaré Spiegel. « Nous espérons que cela pourra aider les médecins à responsabiliser les patients et à améliorer la littératie en santé des patients confrontés à des conditions difficiles telles que la cirrhose et le cancer du foie. »
Dans un essai publié dans le New England Journal of Medicine À la fin de la semaine dernière, Peter Lee, vice-président de Microsoft, recherche et incubations, a déclaré que la société avait un choix à faire lorsqu’il s’agissait d’utiliser ChatGPT dans le secteur des soins de santé.
« Nous pouvons essayer de ralentir ou d’arrêter cette technologie, car nous ne comprenons pas complètement les risques », a déclaré Lee. » Un deuxième argument est plus fataliste, disant : « C’est imparable. Nous pourrions aussi bien essayer.