TORONTO (Biermann) – Eine aktuelle Studie hat gezeigt, dass Chatbots, bei denen die Künstliche Intelligenz (AI) zum Einsatz kommt, in einem hohen Prozentsatz Multiple-Choice (MC)-Fragen zu ophthalmologischen Befunden richtig beantworten können, wobei Fragen, die nicht auf der Interpretation bildgebender Befunde basieren, häufiger korrekt beantwortet werden als bildbasierte Fragen. Laut den Autoren der Arbeit wird es zukünftig erforderlich sein, Chatbots, die immer häufiger genutzt werden, bei der klinischen Befundung miteinzubeziehen, um die diagnostische Genauigkeit zu verbessern.
Im Rahmen ihrer Querschnittsstudie verwendeten die Wissenschaftler einen öffentlich zugänglichen Datensatz ophthalmologischer Fälle von OCTCases (medizinische Ausbildungsplattform der Abteilung für Ophthalmologie und Vision Sciences der Universität Toronto [Ontario; Kanada]) mit begleitender multimodaler Bildgebung und MC-Fragen.
Eine aktuelle Version eines Chatbots (ChatGPT‑4; OpenAI) beantwortete im Zeitraum 16. bis 23.10.2023 insgesamt 429 MC-Fragen zu 136 ophthalmologischen Fällen und 448 Aufnahmen der multimodalen Bildgebung. Die Arbeitsgruppe legte als primären Endpunkt die Genauigkeit des Chatbots bei der Beantwortung der MC-Fragen zur Bilderkennung fest, gemessen als Anteil richtiger Antworten. Mithilfe von Chi-Quadrat (ꭕ2)-Tests wurde ferner der Anteil richtiger Antworten unterschiedlicher ophthalmologischer Gebiete verglichen.
Die Forscher ermittelten, dass der Chatbot insgesamt 299 MC-Fragen (70%) korrekt beantwortete, während Antworten zu retinologischen Fragen häufiger richtig ausfielen als solche zu neuro-ophthalmologischen Themen (77 vs. 58%; 95%-KI 7,5–29,4; ꭕ2= 11,4; p<0,001). Ebenso wurde bei nicht bildbasierten gegenüber bildbasierten Fragen eine bessere Quote an positiven Antworten erzielt (82 vs. 65%; 95%-KI 7,8–25,1; ꭕ2=12,2; p<0,001). Des Weiteren wurde zu Fragen in Bezug auf die Ophthalmo-Onkologie in 72%, auf die Kinder-Ophthalmologie in 68%, auf Uveitiden in 64% sowie auf Glaukom in 61% die richtige Antwort geliefert.
(tt)