arXiv · AI×医药交叉论文· Alicem Koyun·· 23 小时前精选AI 评分75
临床试验模拟器是否真正理解药物作用:基于7207项试验的干预有效性盲测研究
Does Your Trial Simulator Know What the Drug Does? An Intervention-Blind Test of Interventional Validity on 7,207 Registered Trials
AI 导读
该研究基于7207项已完成的II/III期临床试验构建干预有效性评测基准,提出通过屏蔽药物识别字段的盲测对照体系量化模拟器的反事实推演能力。评测发现传统梯度提升模拟器的干预技能得分为负数(-0.12),而仅阅读注册方案的前沿大语言模型得分达到0.20且在组别互换测试中86%反转了预测符号。团队已公开发布相关基准、代码、提示词与模型输出结果。
推荐理由
该研究通过构建干预盲测对照评估临床试验模拟器,为检验AI模型是否真正理解药物干预效果提供了量化基准。
来源:arXiv · AI×医药交叉论文 · arxiv.org