Evaluating multimodal AI in medical diagnostics

Abstract: This study evaluates multimodal AI models’ accuracy and responsiveness in answering NEJM Image Challenge questions, juxtaposed with human collective intelligence, underscoring AI’s potential and current limitations in clinical diagnostics. Anthropic’s Claude 3 family demonstrated the highest accuracy among the evaluated AI models, surpassing the average human accuracy, while collective human decision-making outperformed all AI models. GPT-4 Vision Preview exhibited selectivity, responding more to easier questions with smaller images and longer questions

Standort
Deutsche Nationalbibliothek Frankfurt am Main
Umfang
Online-Ressource
Sprache
Englisch
Anmerkungen
npj digital medicine. - 7, 1 (2024) , 205, ISSN: 2398-6352

Klassifikation
Medizin, Gesundheit

Ereignis
Veröffentlichung
(wo)
Freiburg
(wer)
Universität
(wann)
2024
Urheber
Kaczmarczyk, Robert
Wilhelm, Theresa Isabelle
Martin, Ron
Roos, Jonas

DOI
10.1038/s41746-024-01208-3
URN
urn:nbn:de:bsz:25-freidok-2565754
Rechteinformation
Open Access; Der Zugriff auf das Objekt ist unbeschränkt möglich.
Letzte Aktualisierung
25.03.2025, 13:50 MEZ

Datenpartner

Dieses Objekt wird bereitgestellt von:
Deutsche Nationalbibliothek. Bei Fragen zum Objekt wenden Sie sich bitte an den Datenpartner.

Beteiligte

  • Kaczmarczyk, Robert
  • Wilhelm, Theresa Isabelle
  • Martin, Ron
  • Roos, Jonas
  • Universität

Entstanden

  • 2024

Ähnliche Objekte (12)