跳到正文
原文
AWS ML Blog· Khaled Thabit·· 3 天前AI 评分42

消除评估偏差以在 Amazon Bedrock 上选出更优模型

Fix evaluation bias to unlock better models on Amazon Bedrock

AI 导读

房产平台 Property Finder 联合 AWS 团队消除了视觉 AI 评估偏差,在 Amazon Bedrock 上实现更高准确率并将成本降低 86%。团队此前发现 96.8% 的评估标签直接继承自原有模型预测而导致对比失真,随后通过专家独立标注房产图片重建基准真值,并基于 Micro F1 指标历经 28 个提示词版本(v0 至 v27)迭代优化完成模型选型。

来源:AWS ML Blog · aws.amazon.com