跳到正文
原文
npj Digital Medicine· Gavin Hui·· 14 小时前精选AI 评分69

npj Digital Medicine:静默评估揭示自动化指标评价 AI 临床消息具有情境依赖性

Silent evaluation reveals context-dependent validity of automated metrics for AI-generated clinical messages

AI 导读

npj Digital Medicine 发表的一项研究发现,BLEU 和 BERTScore 等自动化文本评估指标在评价 AI 生成临床消息时具有情境依赖性,无法有效衡量 AI 内容是否达到人类独立撰写水平。

推荐理由

该研究通过静默对照揭示了自动评估指标仅反映编辑保真度,为医疗大模型在临床沟通场景的质控提供了实证依据。

来源:npj Digital Medicine · nature.com