medRxiv 预印本· Kotabhattara, K. C., Siroha, A., Pal, P., K, S., Dhara, V. S., Prabhakar, P., Honkote, N., Marreddy, M., Namita, N., K, A. K., Saha, P., Agris, J. M. ·· 1 天前AI 评分22
研究:植入式错误无法测量临床医生漏诊率,ConcertAI 安全证书须以裁定数据确认条件
Planted Errors Cannot Measure What a Clinician Misses
AI 导读
ConcertAI 作者在 medRxiv 预印本中指出,临床 AI 安全证书所依赖的医生漏诊率无法通过"植入已知缺陷并计数"这一医院唯一可运行的测试获得,因为植入缺陷与模型真实缺陷的难度不可比。模拟显示,漏诊 85% 缺陷的审查者需 185 例裁定病例,而漏诊 3% 者需 147,938 例;改为裁定审查者自身病例可降至 498 例。该库因此要求条件在裁定数据上确认,否则拒绝放宽证书并默认关闭。
来源:medRxiv 预印本 · medrxiv.org