Verständlichkeit und Sicherheit von Leitlinien-basierten LLM-Chatbots zur Patientenbildung in der Rheumatologie
Von KI ausgewählt und zusammengefasst
Worum es geht
Deutschlandweite multizentrische Evaluation von zehn krankheitsspezifischen Chatbots basierend auf deutschen Rheuma-Leitlinien; 6.291 Patientenfragen wurden erfasst und bewertet, 2.671 Antworten von Nutzern beurteilt, 602 Fragebogen erhoben.
Ergebnis
92,9 % der von Nutzern bewerteten Antworten (2.481 von 2.671) erhielten positive Bewertung. 84,6 % berichteten, der Chatbot sei leicht zu bedienen, 84,1 % fanden Antworten verständlich, 80,2 % hielten ihn nützlich für Patientenbildung. 4,2 % der Interaktionen (263) konnten nicht beantwortet werden. LLM-Bewertung: 95,3 % der Antworten vollständig sicher, 79,1 % vollständig korrekt, aber nur 45,0 % vollständig leitlinienkonform. Schwache Übereinstimmung mit Arztbeurteilung. Anwender bewerteten Chatbots überwiegend positiv; unabhängige Validierung der Qualität bleibt notwendig.
Übertragbarkeit auf Deutschland
Deutschland, deutsche Leitlinien und Kliniken, direkt anwendbar
Originalstudie in PubMedIm Hub ansehenNeue Studien per E-Mail
Auswahl und deutsche Zusammenfassung stammen von einer KI und sind nicht redaktionell geprüft. Maßgeblich ist die Originalpublikation.