Agweyu LLM (primary care, Kenya)
Generative AI-Enabled Clinical Decision Support System in Primary Care: A Pragmatic, Cluster-Randomized Trial
In 9.691 pazienti di strutture di cure primarie in Kenya, un supporto decisionale con LLM nella cartella clinica non ha ridotto il fallimento terapeutico entro 14 giorni rispetto alla sola cartella clinica elettronica.
Il primo grande studio randomizzato pragmatico su un LLM nelle cure primarie reali a basse risorse — e un risultato nullo sull'esito primario a livello di paziente, con un eventuale beneficio «probabilmente modesto» nelle parole degli autori. Sicurezza rassicurante, ma un tasso di eventi del 2 % lascia poca potenza, il follow-up era di 14 giorni e le unità randomizzate erano i clinici e non i pazienti. Un monito contro l'estrapolazione dei guadagni degli LLM su vignette (Goh GPT-4 (management reasoning)) agli esiti sui pazienti.