跳到正文
热点事件历史事件

Property Finder优化评估方法提升Amazon Bedrock模型性能并降本

1 篇报道1 个报道来源12 天前更新

先了解这件事

AI 综述

Property Finder通过构建无偏专家标注基准和应用进化式提示词优化,解决了Amazon Bedrock模型评估中96.8%标签源自单一模型预测导致的评估偏差。 团队最终选择Llama 4 Maverick 17B Instruct,在356张图像评估集上达到Micro F1 0.80,同时实现了86%的成本降低。

AI 根据报道生成 · 12 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. AWS Machine Learning Blog精选
    Property Finder 利用无偏评估和提示词优化提升 Amazon Bedrock 模型性能并降低 86% 成本

    Property Finder 发现 96.8% 的评估标签源自单一模型预测而非人工验证,导致模型比较存在评估偏差。团队通过构建无偏的专家标注基准,并应用进化式提示词优化,最终选择 Llama 4 Maverick 17B Instruct,在 356 张图像评估集上达到 Micro F1 0.80,成本降低 86%。