npj Digital Medicine· Gavin Hui·· 14 小时前精选AI 评分69
npj Digital Medicine:静默评估揭示自动化指标评价 AI 临床消息具有情境依赖性
Silent evaluation reveals context-dependent validity of automated metrics for AI-generated clinical messages
AI 导读
npj Digital Medicine 发表的一项研究发现,BLEU 和 BERTScore 等自动化文本评估指标在评价 AI 生成临床消息时具有情境依赖性,无法有效衡量 AI 内容是否达到人类独立撰写水平。
推荐理由
该研究通过静默对照揭示了自动评估指标仅反映编辑保真度,为医疗大模型在临床沟通场景的质控提供了实证依据。
来源:npj Digital Medicine · nature.com