ChatGPT ha sido sometido a un estudio que revela sus limitaciones en el diagnóstico de enfermedades en niños. La investigación realizada por el Centro Médico Infantil Cohen en Nueva York evaluó la capacidad del sistema para resolver 100 casos pediátricos publicados en revistas médicas importantes.
La metodología fue sencilla pero reveladora: se introdujo cada caso de estudio en ChatGPT y se le solicitó que proporcionara un diagnóstico diferencial y un diagnóstico final. Sin embargo, los resultados fueron desalentadores. El chatbot logró respuestas correctas en solo 17 de los 100 casos.
En 11 ocasiones, no captó completamente el diagnóstico, y en 72 casos, falló por completo. Considerando los resultados incorrectos e incompletos, el chatbot falló en un 83 % de las ocasiones. La complejidad del diagnóstico en niños, donde se deben considerar los síntomas y su relación con la edad, plantea un desafío adicional.
Los investigadores notaron que ChatGPT tenía dificultades para identificar relaciones conocidas entre múltiples condiciones, algo que un médico experimentado puede detectar.
Por ejemplo, el sistema no pudo relacionar el autismo con la deficiencia de vitamina C (escorbuto), a pesar de la relación entre dietas restringidas y deficiencias vitamínicas en casos neuropsiquiátricos.
La Organización Mundial de la Salud (OMS) ha advertido previamente sobre el uso de herramientas de inteligencia artificial en la atención médica, citando el riesgo de datos sesgados y posibles daños a los pacientes.
Además, otro estudio señala que ChatGPT también tiene dificultades para resolver preguntas relacionadas con medicamentos, fallando en el 75 % de los casos.
Si bien el equipo del Centro Médico Infantil Cohen cree que un entrenamiento más específico podría mejorar los resultados, actualmente no recomiendan usar ChatGPT como herramienta de diagnóstico, ni en niños ni en adultos.
Sugieren que estas plataformas podrían ser útiles para tareas administrativas o para brindar instrucciones a los pacientes, pero no para diagnósticos médicos precisos.