MEMPHIS (Biermann) — ChatGPT und weitere KI-Plattformen finden auch in der Wissenschaft immer mehr einen Platz. Eine amerikanische Studie widmete sich der Frage, wie gut die Fähigkeiten von ChatGPT‑4.0 und ChatGPT‑3.5 im Vergleich zu menschlichen Experten sein können, die Diagnose von Hornhauterkrankungen anhand von Fallberichten zu bewerten.
Dabei wurden nach dem Zufallsprinzip 20 Fälle von Hornhauterkrankungen einschließlich Hornhautinfektionen, Hornhautdystrophien und Hornhautdegenerationen aus einer öffentlich zugänglichen Online-Datenbank der Universität von Iowa ausgewählt und der Text der Fallbeschreibung in ChatGPT‑4.0 und ChatGPT‑3.5 eingegeben. ChatGPT wurde anhand dieser Schilderungen um eine vorläufige Diagnose gebeten. Die Antworten wurden mit den korrekten Diagnosen und mit den Diagnosen von drei Hornhautspezialisten verglichen.
Die Genauigkeit der vorläufigen Diagnose auf der Grundlage von ChatGPT‑4.0 betrug 85% (17 richtige von 20 Fällen), während die Genauigkeit von ChatGPT‑3.5 nur bei 60 % lag (12 richtige von 20 Fällen). Die Genauigkeit von drei Hornhautspezialisten im Vergleich zu ChatGPT‑4.0 und ChatGPT‑3.5 betrug 100% (20 Fälle, P = 0,23, P = 0,0033), 90% (18 Fälle, P = 0,99, P = 0,6) bzw. 90% (18 Fälle, P = 0,99, P = 0,6). Die Interobserver-Übereinstimmung zwischen ChatGPT‑4.0 und ChatGPT‑3.5 betrug 65 % (13 Fälle), während die Interobserver-Übereinstimmung zwischen ChatGPT‑4.0 und drei Hornhautspezialisten 85% (17 Fälle), 80% (16 Fälle) bzw. 75% (15 Fälle) betrug. Die Interobserver-Übereinstimmung zwischen ChatGPT‑3.5 und jedem der 3 Hornhautspezialisten lag bei 60% (12 Fälle).
Die Genauigkeit von ChatGPT‑4.0 bei der Diagnose von Patienten mit verschiedenen Hornhauterkrankungen war damit deutlich besser als die von ChatGPT‑3.5 und könnte vielversprechend für eine mögliche klinische Integration sein. Mit einem ausgewogenen Ansatz aus den durch künstliche Intelligenz gewonnenen Erkenntnisse in Kombination mit klinischem Fachwissen könnte künstliche Intelligenz auch auf diese Weise hilfreich bei der Diagnosefindung sein. (ak)
Künstliche Intelligenz
Kann ChatGPT Hornhauterkrankungen diagnostizieren?
21. Mai 2024
Autoren: Delsoz M et al.
Korrespondenz: siamak.yousefi@uthsc.edu
Studie: Performance of ChatGPT in Diagnosis of Corneal Eye Diseases
Quelle: Cornea. 2024 May 1;43(5):664-670.
Web: https://doi.org/10.1097/ICO.0000000000003492