Faut-il voir le verre à moitié plein ou à moitié vide ? Une nouvelle étude du Dr Adam Rodman, expert en médecine interne au Beth Israel Deaconess Medical Center de Boston, a examiné comment des chatbots comme ChatGPT pourraient aider les médecins à diagnostiquer des maladies. -même d’excellents résultats, il semble que les praticiens n’exploitent pas correctement son potentiel. Faisons le point.
Dans le détail, les chercheurs de cette étude publiée dans la revue Réseau JAMA ouverta réuni 50 médecins exerçant dans des hôpitaux américains. Ils ont examiné 105 cas cliniques basés sur des patients réels utilisés par les scientifiques depuis les années 1990.
Des résultats inquiétants
Les conclusions de cette expérience sont pour le moins surprenantes. En effet, ils ont même choqué le docteur Rodman. Sans surprise, ChatGPT a obtenu un score moyen satisfaisant de 90 % pour établir le diagnostic. Les médecins qui n’ont pas utilisé cet outil ont obtenu une évaluation de 74 %, tandis que ceux qui ont utilisé cette IA n’ont fait que légèrement mieux : 76 %.
La question principale était donc de savoir pourquoi ces praticiens ne profitaient-ils pas des capacités de ChatGPT ? La réponse est simple : les médecins ne faisaient pas confiance à l’IA lorsqu’elle posait un diagnostic différent du leur. Ils s’accrochaient fermement à leur idée sans chercher à la remettre en question ni à la confronter à l’analyse de l’IA.
De même, les médecins utilisaient très mal le modèle de langage d’OpenAI. Ainsi, ces derniers avaient tendance à l’utiliser comme moteur de recherche en lui posant certaines questions précises sur une affaire. Seule une petite partie d’entre eux a compris qu’ils pouvaient lui demander un point de vue global sur un dossier patient.
Apprendre semble donc nécessaire si l’on veut que les professionnels de santé bénéficient des capacités de cette technologie, même s’ils doivent toujours entretenir leur esprit critique.
Les internautes font-ils (trop ?) confiance à ChatGPT ?
Pour rappel, la confiance des utilisateurs dans les compétences de ChatGPT est au contraire étonnamment élevée. Selon une étude récente du Life Span Institute de l’Université du Kansas, les parents sont incapables de distinguer les réponses produites par les IA de celles produites par des médecins humains.
De même, la majorité d’entre eux ont jugé que les textes produits par les chatbots étaient les plus fiables dans le cadre de cette expérimentation. Plus d’informations dans notre article précédent ici.
???? Pour ne manquer aucune actualité de Presse-citron, suivez-nous sur Google News et WhatsApp.