
精选·评测安全与生产2026-07-13
大模型应用的 badcase 怎么收集、归因和回归,形成闭环
badcase 体系的关键是闭环:线上多渠道收集、按错误类型归因打标、修复后入评测集回归,让每一次线上事故都变成评测资产。
91学AI·9 阅读
共 2 篇文章

badcase 体系的关键是闭环:线上多渠道收集、按错误类型归因打标、修复后入评测集回归,让每一次线上事故都变成评测资产。

考察 Prompt 效果评估方法论。核心答案:先建带标准答案的评测集,客观任务看准确率类指标,开放任务用 LLM-as-Judge+人工抽检,线上看业务指标闭环。