Agweyu LLM (primary care, Kenya)
Generative AI-Enabled Clinical Decision Support System in Primary Care: A Pragmatic, Cluster-Randomized Trial
Bei 9.691 Patienten in Primärversorgungseinrichtungen in Kenia, senkte ein LLM-Entscheidungsunterstützungssystem in der Patientenakte das Therapieversagen innerhalb von 14 Tagen verglichen mit der elektronischen Patientenakte allein nicht.
Die erste große pragmatische randomisierte Studie zu einem LLM in der realen, ressourcenarmen Primärversorgung — und ein Nullergebnis beim primären Endpunkt auf Patientenebene, mit einem nach den Worten der Autoren „wahrscheinlich bescheidenen“ Nutzen. Beruhigende Sicherheit, aber eine Ereignisrate von 2 % lässt wenig Power, das Follow-up betrug 14 Tage, und die randomisierten Einheiten waren Kliniker und nicht Patienten. Eine Warnung davor, vignettenbasierte LLM-Gewinne (Goh GPT-4 (management reasoning)) auf Patienten-Outcomes zu extrapolieren.