
评测与安全2026-07-26
评测集怎么构造?多少条够?怎么防过拟合?评测集需要更新吗?
考察评测集工程能力:样本要贴近真实线上分布、量级由统计功效决定而不是拍脑袋、用 holdout 拆分和滚动轮换防过拟合,评测集是需要持续维护的活资产。
91学AI·8 阅读
共 2 篇文章

考察评测集工程能力:样本要贴近真实线上分布、量级由统计功效决定而不是拍脑袋、用 holdout 拆分和滚动轮换防过拟合,评测集是需要持续维护的活资产。

考察 SFT 数据工程的实操理解:指令数据的来源与构造流程、质量要求的具体维度(准确性、多样性、一致性)、以及量级选择的依据。