Agentic LLM reasoning in pediatric diabetes outcome prediction from multimodal medical records
En palabras de los autores
Large language model (LLM) agents are proposed for clinical prediction but are untested in pediatrics, where cohorts are small and outcomes are uncommon. Using records from 2,489 youth with type 2 diabetes (T2D) and 4,018 with type 1 diabetes (T1D), spanning structured data, note-derived social determinants and, in T1D, continuous glucose monitoring data, we predicted seven T2D outcomes, four also in T1D, at 24 months from 18 months of follow-up. CEDAR (Clinical Evidence-Driven Agent for Risk-prediction), an evidence-citing, self-auditing LLM pipeline, outperformed trained machine learning in both cohorts (pooled area under the receiver operating characteristic curve 0.815 versus 0.656 to 0.700 in T2D and 0.756 versus 0.603 to 0.631 in T1D), most on the sparsely screened outcomes. Only 4 of 70,246 values it cited did not match the chart. Reading only the evidence and reasoning cited by CEDAR, two pediatric endocrinologists reached the same prediction as CEDAR in about nine of ten cases, agreeing with each other on 90.5%.
En palabras simples Resumen con IA
Los autores crearon CEDAR, un sistema de inteligencia artificial que cita evidencia y revisa su propio trabajo, para predecir resultados de diabetes en niños. Usaron registros médicos de 2,489 jóvenes con diabetes tipo 2 y 4,018 con diabetes tipo 1. El sistema citó 70,246 piezas de evidencia, y solo 4 no coincidieron con las historias clínicas reales. Dos especialistas pediatras en diabetes estuvieron de acuerdo con la predicción de CEDAR en aproximadamente nueve de cada diez casos cuando se les mostró solo la evidencia que CEDAR usó.
Escrito por Kimi K2.5 usando solo el abstract de arriba. Jev verificó que cada oración esté respaldada por las oraciones del abstract que cita y eliminó las que no. Pasá el cursor por una oración para ver de dónde sale. Se eliminó 1 oración por no estar respaldada por el abstract.
Apareció: viernes, 30 de octubre. arXiv. Preprint, todavía sin revisión por pares.
Comentario de los autores: 18 pages main text plus 40 pages Supplementary Information