medRxiv 预印本· Omar, M., Glicksberg, B. S., Sakhuja, A., Barash, Y., Charney, A. W., Klang, E., Nadkarni, G. N. ·· 16 天前AI 评分36
决策专用模型 TypeSafe Jev 1.13 可作为医疗 AI 答案的低成本评判器
A decision-only model as a low-cost judge of medical AI answers
AI 导读
在 OSF 预注册评估中,决策专用模型 TypeSafe Jev 1.13 对专家标签的平均一致率为 64.7%,在 3,614 个匹配单元上为 66.1%,高于 Opus 的 65.0% 和 Sol 的 60.7%,并在六项任务中的四项对两者均达非劣效。
来源:medRxiv 预印本 · medrxiv.org