
评测与安全2026-07-26
评测集怎么构造?多少条够?怎么防过拟合?评测集需要更新吗?
考察评测集工程能力:样本要贴近真实线上分布、量级由统计功效决定而不是拍脑袋、用 holdout 拆分和滚动轮换防过拟合,评测集是需要持续维护的活资产。
91学AI·8 阅读
共 2 篇文章

考察评测集工程能力:样本要贴近真实线上分布、量级由统计功效决定而不是拍脑袋、用 holdout 拆分和滚动轮换防过拟合,评测集是需要持续维护的活资产。

考察微调效果的评估体系与过拟合防控:训练/验证 loss 之外还要有任务指标、通用基准与人工评审,早停、正则、数据侧手段的组合使用。