Aux urgences, ChatGPT a réalisé des diagnostics au moins aussi bien que des médecins et les a dans certains cas surpassés, ont découvert des chercheurs néerlandais, selon lesquels l’IA pourrait « révolutionner le domaine médical ».
ChatGPT aux urgences
Les auteurs de l’étude ont toutefois souligné que les jours des médecins urgentistes n’étaient pas encore comptés, ChatGPT étant potentiellement capable d’accélérer le diagnostic, mais pas de remplacer le jugement et l’expérience d’un humain.
30 cas traités dans un service d’urgence aux Pays-Bas en 2022 ont été examinés en alimentant ChatGPT en fonction des antécédents des patients, des tests en laboratoire et des observations des médecins, demandant au chatbot de proposer cinq diagnostics possibles. Dans 87% des cas, le bon diagnostic se trouvait dans la liste des praticiens, contre 97% pour la version 3.5 de ChatGPT.
L’IA d’OpenAI « était capable de réaliser des diagnostics médicaux un peu comme l’aurait fait un médecin humain », a résumé Hidde ten Berg, du service d’urgence de l’hôpital Jeroen Bosch, dans le sud des Pays-Bas.
Le coauteur de l’étude Steef Kurstjens a souligné que celle-ci ne concluait pas que des ordinateurs pourraient un jour diriger les urgences, mais que l’IA pouvait jouer un rôle vital en aidant les médecins sous pression. De tels outils ne sont pas conçus comme des dispositifs médicaux, a-t-il toutefois relevé, partageant également des inquiétudes quant à la confidentialité des données médicales sensibles dans un autre chatbot.
Quelques gaffes
Tout n’est naturellement pas parfait. ChatGPT avait un raisonnement « parfois médicalement invraisemblable ou incohérent, ce qui peut conduire à des informations erronées ou à un diagnostic incorrect, avec des implications importantes », selon l’étude. Les scientifiques admettent également certaines lacunes dans leurs recherches, comme la petite taille de l’échantillon. De plus, seuls des cas relativement simples ont été examinés, avec des patients présentant une seule plainte principale. L’efficacité du chatbot dans des cas complexes n’est pas claire.
Parfois, ChatGPT ne fournissait pas le bon diagnostic dans les cinq possibilités, notamment dans le cas d’un anévrisme aortique abdominal, une complication potentiellement mortelle, avec l’aorte qui enfle. Mais, consolation pour ChatGPT, dans ce cas, le médecin s’est également trompé.
Le rapport signale en outre des gaffes médicales commises par le ChatGPT, par exemple en diagnostiquant une anémie (faible taux d’hémoglobine dans le sang) chez un patient présentant un taux d’hémoglobine normal.
Les résultats de l’étude, parus dans la revue spécialisée Annals of Emergency Medicine, seront présentés au Congrès européen de médecine d’urgence (EUSEM) de 2023 à Barcelone.
