bioRxiv 预印本· Medagbe, J. F. P., Kilyungi, B. M., Isaac, A., Kabua, A., Lisso, F., Wambua, S., Williams, R. W., Prins, P. ·· 1 天前AI 评分12
GeneNetwork 生物医学知识图谱 LLM 查询基准：组合式 RAG 架构 psi 达 86%
An Expert-Curated Benchmark for Frontier and Local LLMs Querying a Biomedical Knowledge Graph
AI 导读
研究者将 GeneNetwork 的 1TB 结构化数据库及其元数据构建为 RDF 知识图谱并关联文献语料，用 40 个专家策划的领域问题评测前沿与本地 LLM 在文档、图谱、agentic RAG 及三者组合四种架构下的查询表现，并提出新指标 psi（精确率与召回率均≥70% 或 f1≥60% 的问题占比）。
来源：bioRxiv 预印本 · biorxiv.org