AWS Machine Learning Blog· Khaled Thabit·· 4 小时前精选AI 评分80
Property Finder 修正模型评测偏差并在 Amazon Bedrock 选择 Llama 4 Maverick 17B Instruct,开发集 Micro F1 达 0.81且估算成本降低 86%
Fix evaluation bias to unlock better models on Amazon Bedrock
AI 导读
Property Finder 在 Amazon Bedrock 上以无偏评测集和提示词优化选择 Llama 4 Maverick 17B Instruct,其开发集 Micro F1 为 0.81,高于原生产模型的 0.55,估算成本降低 86%。
推荐理由
以 96.8% 标签直接沿用现有模型预测为切入点,完整拆解专家标注、指标选择与提示词迭代,为视觉模型选型提供可迁移方法。
来源:AWS Machine Learning Blog · aws.amazon.com