Orvosi AI-benchmarkok: Carnegie Mellon 'Synthetic Hospital', MLCommons és az AMIE-szerzők kritikája
A Carnegie Mellon benchmarkja valós, többéves betegadatokon tárja fel a vezető AI-modellek korlátait, az MLCommons pedig orvosi AI-benchmarkot készít. Az AMIE szerzői szerint a benchmarkok önmagukban nem érdemelnek klinikai bizalmat.
Kit érint és hogyan
- orvos
- A modellek benchmark-eredményei nem igazolják a hosszú betegadatokkal való klinikai megbízhatóságot.
- egészségügyi IT
- Az AI-beszerzésnél a valós adatokon végzett helyi tesztelést kell követelni.
Források
- Valós betegadatokkal teszteli az orvosi AI-k gyengeségét a Carnegie Mellon új benchmarkjaaiforradalom.hu · 2026. szept. 26. · magyar
- MLCommons: benchmark készül az orvosi AI-hoz | AI Hírekaihirek.info · 2026. szept. 23. · magyar
- AMIE authors: benchmarks alone can't earn clinical AI trust | AI Weeklyaiweekly.co · 2026. szept. 27.
Gépi összefoglaló a forráscikkek címe és kivonata alapján. A tények forrása a hivatkozott cikk. Hírfigyelés, nem orvosi tanács: egészségügyi döntéshez kérd ki orvos véleményét.