
评测与安全2026-07-26
怎么保证每次 prompt 或模型迭代效果不倒退?
考察迭代质量保障能力:prompt 当代码做版本管理、核心指标进 CI 门禁且阈值要大于自然波动、线上走灰度和 shadow 验证、护栏指标异常自动回滚。
91学AI·9 阅读
共 2 篇文章

考察迭代质量保障能力:prompt 当代码做版本管理、核心指标进 CI 门禁且阈值要大于自然波动、线上走灰度和 shadow 验证、护栏指标异常自动回滚。

考察评测体系的分层设计能力:组件级、链路级、系统级三层评测,上线前用 golden set 做 CI 门禁,上线后靠监控、抽样标注和 badcase 回流形成闭环。