Le chatbot médical d'IA de Google réussit l'examen de médecine américain

DÉPÊCHE — Le chatbot médical d'intelligence artificielle de Google a réussi l'examen de médecine aux États-Unis, mais ses résultats restent en deçà de ceux des humains, indique une étude publiée mercredi dans Nature.

Alors que certains algorithmes sont aujourd'hui capables de lire des scanners médicaux mieux que les humains, voilà que la santé se pare d'un nouvel instrument technologique. En décembre, Google avait dévoilé son outil d'IA dédié aux questions médicales, appelé Med-PaLM.

L'entreprise affirme que Med-PaLM a été le premier grand modèle de langage, une technique d'IA entraînée sur de grandes quantités de texte produit par l'homme, à réussir l'USMLE (US Medical Licensing Examination). Cet examen requiert un taux de bonnes réponses supérieur à 60 % pour être validé, et permet ensuite de pratiquer la médecine aux États-Unis.

Dans une étude évaluée par les pairs et publiée mercredi dans la revue Nature, les chercheurs de Google ont déclaré que Med-PaLM avait atteint 67,6 % en répondant aux questions à choix multiples de style USMLE. Ces résultats sont "encourageants, mais restent inférieurs à ceux des humains", indique l'étude.

Pour identifier et réduire ce que l'on appelle les "hallucinations" (une fausse réponse de l'IA), Google a indiqué avoir développé une nouvelle référence d'évaluation, ainsi qu'une nouvelle version du robot. Med-PaLM 2 aurait atteint le score de 86,5 %. Cette deuxième version serait en test dans le prestigieux hôpital de recherche américain Mayo Clinic depuis avril.

Toutefois, le chercheur de Google et auteur principal de l'étude Karan Singhal affirme que tout test effectué ne sera pas "clinique, ni face au patient, ni susceptible de nuire aux patients". Le modèle sera plutôt testé pour des "tâches administratives qui peuvent être automatisées relativement facilement, avec de faibles enjeux", a-t-il expliqué.