Retour au feed
arXiv cs.CL·

AIPatient Arena: EHR-grounded evaluation of large language models in end-to-end clinical consultation workflows

Signal
82
Hype
15
En 3 lignesAIPatient Arena évalue les LLM en consultation clinique multi-tours sur 8 dimensions via des graphes de connaissances EHR. Sur 437 patients, les modèles excellent en questionnement (4.43-4.99/5) et conduite éthique (4.38-4.93/5), mais échouent en diagnostic (2.63-3.55/5) et couverture informationnelle (2.08-3.02/5). Les faiblesses incluent répétitions, omissions d'antécédents, gestion insuffisante de l'incertitude.
Lire la source
Ton avis ?
ÉvaluationsRaisonnementSécurité IABenchmarks

Résumé généré par Claude — vérifié par l'humain