Vera Health belegt Platz 1 bei wichtigen medizinischen KI-Benchmarks – vor OpenAI, Anthropic und Google
Einleitung
Vera nutzt hochentwickelte KI-Agenten und Retrieval-Augmented-Generation-Technologie und fasst das Wissen aus über 60 Millionen begutachteten medizinischen Publikationen zusammen, um verlässliche und kontextgerechte Antworten zu liefern. Diese Multi-Benchmark-Bewertung untersucht die Leistung von Vera in drei verschiedenen medizinischen Wissensbereichen: dem United States Medical Licensing Examination (USMLE), dem KI-Frage-Antwort-Datensatz des New England Journal of Medicine (NEJM-AI) und dem MedXpertQA-Benchmark.
Leistungskennzahlen
- Beim USMLE erreichte Vera eine außergewöhnliche Gesamtgenauigkeit von 97,5 %, mit stufenspezifischen Genauigkeiten von 97,9 % (Step 1), 98,2 % (Step 2 CK) und 96,7 % (Step 3).
- Beim NEJM-AI-Benchmark mit 655 Fragen aus fünf medizinischen Fachgebieten zeigte Vera mit einer Genauigkeit von 84,9 % eine überlegene Leistung und übertraf führende KI-Modelle wie OpenAI o4 Mini (77,1 %), Claude 4 Sonnet (75,4 %) und Perplexity Sonar Pro (74,4 %).
- Beim MedXpertQA-Benchmark mit 500 Fragen zu mehreren Organsystemen und medizinischen Aufgaben erreichte Vera eine Genauigkeit von 62,2 % und zeigte damit eine starke Leistung in anspruchsvollen klinischen Denkszenarien.
- Vera erzielte in vier von fünf medizinischen Fachgebieten des NEJM-AI die höchste Genauigkeit, mit besonders starker Leistung in der Pädiatrie (93,9 %) und der Inneren Medizin (87,3 %).
Fazit
Diese Ergebnisse über verschiedene Bewertungsrahmen hinweg unterstreichen die robuste Repräsentation medizinischen Wissens und die Schlussfolgerungsfähigkeiten von Vera und positionieren sie als führende Lösung für die klinische Entscheidungsunterstützung. Den vollständigen Beitrag können Sie hier lesen.
Über Vera Health
Vera ist ein KI-gestütztes System zur klinischen Entscheidungsunterstützung (Clinical Decision Support, CDS), das Gesundheitsfachkräfte dabei unterstützt, evidenzbasierte Entscheidungen effizienter zu treffen. Vera lässt sich in elektronische Patientenakten integrieren und liefert verlässliche Empfehlungen in Echtzeit am Behandlungsort. Mit ihrer hochmodernen KI-Technologie befähigt Vera Klinikerinnen und Kliniker, die Behandlungsergebnisse zu verbessern und Entscheidungsprozesse zu optimieren. Mit Standorten in San Francisco und New York City ist Vera Vorreiter bei der Modernisierung klinischer Arbeitsabläufe in Notaufnahmen und anderen schnelllebigen medizinischen Umgebungen.